Qt+FFmpeg播放视频

实践出真知。通过实践才能发现更多的问题。在学习新的技术的时候也是这样。今天通过学习FFmpeg解码视频，实现一个Qt 和ffmpeg播放视频的小栗子。当然刚开始学习难免会到网上查询一下资料，然后结合自己的理解重新实现一下。具体参考哪一篇文章，我似乎也不记得了，但我记得还是好多东西都是参考雷神的博客才一步一步实践出来的。如果要学习音视频开发一定要去看雷神的博客。

说了太多废话，看一下如何配置环境。由于是在Qt中开发的，所以需要安装Qt,而IDE自然是使用QtCreator，如果你要使用visual studio，那么我也不能强求你。接下来是下载FFmpeg的库文件，可以直接去官网ffmpeg的官网下载，那里有着丰富的介绍，可惜的是我没有找到过中文版的文档。它会给你指出两个windows下可以使用的别人编译好的ffmpeg的库文件。

首先使用QtCreator创建一个项目，我把它命名为videoplayer，虽然能播放视频，但没有声音，而且播放速度还很快。在Qt项目管理配置pro文件中,添加上

1
2
INCLUDEPATH += D:/ffmpeg/include
LIBS += -LD:/ffmpeg/lib/ -lavutil -lavformat -lavcodec -lavdevice -lavfilter -lswresample -lswscale -lpostproc

以上两行，目的是为了添加ffmpeg的头文件，在链接的时候链接到ffmpeg的库文件。

首先是界面设计 如下（很简单）：

img

打开文件，就是让你选择一个文件，播放就是播放视频，而TextLabel则是为了显示解码出的一帧帧图像。

流程图如下：

img

部分代码讲解如下：

打开解码视频文件并绑定AVFormatContext,并找到其中流信息

1
2
3
4
5
6
7
8
9
10
11
12
AVFormatContext *pFormatCtx = avformat_alloc_context();
   if (avformat_open_input(&pFormatCtx,input_file.c_str(),nullptr,nullptr) < 0)
   {
       qDebug() << "fail to find the stream\n";
       return;
   }
   if (avformat_find_stream_info(pFormatCtx,NULL) < 0)
   {
       qDebug() << "fail to find the stream info\n";
       return;
   }
  // av_dump_format(pFormatCtx,0,input_file.c_str(),0);

打开解码器，设置转换解码参数：

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
AVCodecContext *pCodecCtx = pFormatCtx->streams[video_stream_index]->codec;
    AVCodec *pCodec = avcodec_find_decoder(pCodecCtx->codec_id);
    if (pCodec == NULL)
    {
        qDebug() << "fail to find the decoder\n";
        return;
    }
    if (avcodec_open2(pCodecCtx,pCodec,nullptr) < 0 )
    {
        qDebug() << "fail to open the decodec\n";
        return;
    }
    //展示图像
    AVFrame *pFrame = av_frame_alloc();
    AVFrame *pframeRGB = av_frame_alloc();
    unsigned char *out_buffer = (unsigned char*)av_malloc(av_image_get_buffer_size(AV_PIX_FMT_RGB32,pCodecCtx->width,pCodecCtx->height,1));
    av_image_fill_arrays(pframeRGB->data,pframeRGB->linesize,out_buffer,AV_PIX_FMT_RGB32,pCodecCtx->width,pCodecCtx->height,1);

    AVPacket *pkt = av_packet_alloc();
    av_init_packet(pkt);
    SwsContext *pSwsCtx = sws_alloc_context();
    pSwsCtx = sws_getContext(pCodecCtx->width,pCodecCtx->height,pCodecCtx->pix_fmt,
                             pCodecCtx->width,pCodecCtx->height,AV_PIX_FMT_RGB32,
                             SWS_BICUBIC,nullptr,nullptr,nullptr);

读取每一帧并播放：

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
int got_frame = 0;
    while(av_read_frame(pFormatCtx,pkt) >= 0)
    {
        if (pkt->stream_index == video_stream_index){
            int ret = avcodec_decode_video2(pCodecCtx,pFrame,&got_frame,pkt);
            if (ret < 0)
            {
                qDebug() << "fail to decode video\n";
                return;
            }
           if (got_frame > 0)
            {
                sws_scale(pSwsCtx,(const unsigned char* const*)pFrame->data,pFrame->linesize,0,pCodecCtx->height,pframeRGB->data,pframeRGB->linesize);
                QImage image = QImage((unsigned char*)pframeRGB->data[0],pCodecCtx->width,pCodecCtx->height,QImage::Format_RGB32,nullptr,nullptr);
                ui->Canvas->setPixmap(QPixmap::fromImage(image));
                Delay(3000);
            }
        }
        av_packet_unref(pkt);
    }

实现代码如下：

widget.cpp

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
#include "widget.h"
#include "ui_widget.h"
#include <QTime>
#include <QMessageBox>
#include <QFileDialog>
#include <QImage>
#include <QDebug>
Widget::Widget(QWidget *parent)
    : QWidget(parent)
    , ui(new Ui::Widget)
{
    ui->setupUi(this);
    connect(ui->OpenFile,SIGNAL(clicked()),this,SLOT(OpenFile()));
    connect(ui->Play,SIGNAL(clicked()),this,SLOT(Play()));
}
Widget::~Widget()
{
    delete ui;
}
void Widget::OpenFile()
{
    QString filter = tr("mp4 file(*.mp4);;rmvb file(*.rmvb);;avi file(*.avi)");
    filePath_ = QFileDialog::getOpenFileName(this,tr("打开文件"),QString(),filter);
}
void Widget::Play()
{
    if (filePath_.isEmpty())
    {
        QMessageBox::warning(nullptr,tr("warn"),tr("未选择文件"),QMessageBox::Ok);
        return;
    }
    std::string input_file=filePath_.toStdString();
    //注册编解码器
    av_register_all();
    AVFormatContext *pFormatCtx = avformat_alloc_context();
    if (avformat_open_input(&pFormatCtx,input_file.c_str(),nullptr,nullptr) < 0)
    {
        qDebug() << "fail to find the stream\n";
        return;
    }
    if (avformat_find_stream_info(pFormatCtx,NULL) < 0)
    {
        qDebug() << "fail to find the stream info\n";
        return;
    }
   // av_dump_format(pFormatCtx,0,input_file.c_str(),0);

    int video_stream_index = -1;
    for (size_t i =0;i < pFormatCtx->nb_streams ;++i )
    {
        if (pFormatCtx->streams[i]->codec->codec_type == AVMEDIA_TYPE_VIDEO)
        {
            video_stream_index = i;
            break;
        }
    }
    if (video_stream_index == -1)
    {
        qDebug() << "fail to find the video stream";
        return;
    }

    AVCodecContext *pCodecCtx = pFormatCtx->streams[video_stream_index]->codec;
    AVCodec *pCodec = avcodec_find_decoder(pCodecCtx->codec_id);
    if (pCodec == NULL)
    {
        qDebug() << "fail to find the decoder\n";
        return;
    }
    if (avcodec_open2(pCodecCtx,pCodec,nullptr) < 0 )
    {
        qDebug() << "fail to open the decodec\n";
        return;
    }
    //展示图像
    AVFrame *pFrame = av_frame_alloc();
    AVFrame *pframeRGB = av_frame_alloc();
    unsigned char *out_buffer = (unsigned char*)av_malloc(av_image_get_buffer_size(AV_PIX_FMT_RGB32,pCodecCtx->width,pCodecCtx->height,1));
    av_image_fill_arrays(pframeRGB->data,pframeRGB->linesize,out_buffer,AV_PIX_FMT_RGB32,pCodecCtx->width,pCodecCtx->height,1);

    AVPacket *pkt = av_packet_alloc();
    av_init_packet(pkt);
    SwsContext *pSwsCtx = sws_alloc_context();
    pSwsCtx = sws_getContext(pCodecCtx->width,pCodecCtx->height,pCodecCtx->pix_fmt,
                             pCodecCtx->width,pCodecCtx->height,AV_PIX_FMT_RGB32,
                             SWS_BICUBIC,nullptr,nullptr,nullptr);

    int got_frame = 0;
    while(av_read_frame(pFormatCtx,pkt) >= 0)
    {
        if (pkt->stream_index == video_stream_index){
            int ret = avcodec_decode_video2(pCodecCtx,pFrame,&got_frame,pkt);
            if (ret < 0)
            {
                qDebug() << "fail to decode video\n";
                return;
            }
           if (got_frame > 0)
            {
                sws_scale(pSwsCtx,(const unsigned char* const*)pFrame->data,pFrame->linesize,0,pCodecCtx->height,pframeRGB->data,pframeRGB->linesize);
                QImage image = QImage((unsigned char*)pframeRGB->data[0],pCodecCtx->width,pCodecCtx->height,QImage::Format_RGB32,nullptr,nullptr);
                ui->Canvas->setPixmap(QPixmap::fromImage(image));
                Delay(3000);
            }
        }
        av_packet_unref(pkt);
    }

    sws_freeContext(pSwsCtx);
    av_packet_free(&pkt);
    avformat_close_input(&pFormatCtx);
    avformat_free_context(pFormatCtx);

}
void Widget::Delay(int delay)
{
    QTime deadTime = QTime::currentTime().addMSecs(delay);
    if (QTime::currentTime() < deadTime)
        QCoreApplication::processEvents(QEventLoop::AllEvents,100);
}

widget.h

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
#ifndef WIDGET_H
#define WIDGET_H

#include <QWidget>
#ifdef __cplusplus
extern "C" {
#endif
#include <libavcodec/avcodec.h>
#include <libavformat/avformat.h>
#include <libavutil/imgutils.h>
#include <libswresample/swresample.h>
#include <libswscale/swscale.h>
#ifdef __cplusplus
}
#endif


QT_BEGIN_NAMESPACE
namespace Ui { class Widget; }
QT_END_NAMESPACE

class Widget : public QWidget
{
    Q_OBJECT

public:
    Widget(QWidget *parent = nullptr);
    ~Widget();
    void Delay(int delay);

private slots:
    void OpenFile();
    void Play();
private:
    Ui::Widget *ui;
    QString filePath_;
};
#endif // WIDGET_H

main.cpp

1
2
3
4
5
6
7
8
9
10
11
#include "widget.h"

#include <QApplication>

int main(int argc, char *argv[])
{
    QApplication a(argc, argv);
    Widget w;
    w.show();
    return a.exec();
}
赏

谢谢你请我吃糖果

扫一扫，分享到微信

微信分享二维码

tag:

    缺失模块。
    1、请确保node版本大于6.2
    2、在博客根目录（注意不是yilia根目录）执行以下命令：
    npm i hexo-generator-json-content --save

    3、在根目录_config.yml里添加配置： 

      jsonContent:
    meta: false
    pages: false
    posts:
      title: true
      date: true
      path: true
      text: false
      raw: false
      content: false
      slug: false
      updated: false
      comments: false
      link: false
      permalink: false
      excerpt: false
      categories: false
      tags: true

I am what I am