使用 FFmpeg 开发播放器基础--使用 ffmpeg 解码视频文件

谁践踏了优雅 2022-09-23 15:42 335阅读 0赞

原：http://blog.chinaunix.net/uid-11344913-id-4282729.html

使用 ffmpeg 解码多媒体文件之前，首先需要了解一些基本的概念：

容器：多媒体文件中包含视频与音频部分，将音频与视频封装在容器内，封装的形式为容器标准中所规定的格式，除了音频编码数据，视频编码数据，文字编码数据以外，还有一些用来格式化这些数据的字段，组成了容器；

编码器：多媒体文件中包含了视频编码部分与音频编码部分，都为容器所包含；

了解了以上基本概念后，下面看一下解码视频文件的基本步骤：

1.  打开视频文件
2.  从视频文件中打开视频流
3.  从视频流中读取视频信息到视频帧里面
4.  如果读取视频真没有完成，就继续从视频流中读取视频信息到视频帧里面
5.  对视频帧进行操作，例如解码，绘制到屏幕，保存文件等
6.  继续从视频流中读取视频信息到视频帧里面

在执行第2步之前，首先要注意，如果希望使用 ffmpeg 第一步要注册 ffmpeg 的函数，注册完成以后才能够顺利的使用 ffmpeg；

点击(此处)折叠或打开

1.  av\_register\_all()

通过这个函数，将ffmpeg中的avformat/avcodec/avfilter等模块全部注册完成了；

接下来就可以打开视频文件；

点击(此处)折叠或打开

1.  avformat\_open\_input()

通过该函数打开视频文件，分析对应的文件的信息，将信息填充进AVFormatContext中，填充完毕以后，可以获得视频流信息；

点击(此处)折叠或打开

1.  av\_find\_stream\_info()

获得到了视频信息之后，可以知道视频中含多少路视频流，一路视频流用一路视频流的解流方式进行解流，例如音频流，例如视频流，例如字幕流等这里只讲述视频流；当或得到视频流信息后，既可根据对应的视频流的类型进行解码，例如h264，则会根据查找对应的解码器进行获得解码器的信息；

点击(此处)折叠或打开

1.  avcodec\_find\_decoder()

或得到解码器信息后，则可以将解码器打开;

点击(此处)折叠或打开

1.  avcodec\_open()

打开解码器以后就可以根据解码信息将对应的frame数据进行读取，本文档来自于http://bbs.chinaffmpeg.com孙悟空读取的时候，每一个frame都需要右地方存储，所以，需要申请frame内存空间；

点击(此处)折叠或打开

1.  avcodec\_alloc\_frame()

申请完成之后则开始进行了读取视频frame，然后解frame操作；

点击(此处)折叠或打开

1.  av\_read\_frame();  
    
2.  avcodec\_decode\_video()

点击(此处)折叠或打开

1.  av\_read\_frame();  
    
2.  avcodec\_decode\_video()

av\_read\_frame会将数据从format中读取出来存储入packet中，然后使用avcodec\_decode\_video来对packet的data进行解码，然后将对应的解码后的数据存入frame中，frame中的数据可以存储入文件中，也可以直接绘制到屏幕上；

将数据存储入文件中的代码实例如下：

点击(此处)折叠或打开

1.  \#include <libavcodec/avcodec.h>  
    
2.  \#include <libavformat/avformat.h>  
    
3.  \#include <libswscale/swscale.h>  
    
4.    
    
5.  \#include <stdio.h>  
    
6.    
    
7.  void SaveFrame(AVFrame \*pFrame, int width, int height, int iFrame) \{  
    
8.    FILE \*pFile;  
    
9.    char szFilename\[32\];  
    
10.   int y;  
    
11.   // Open file  
    
12.   sprintf(szFilename, "frame%d.ppm", iFrame);  
    
13.   pFile = fopen(szFilename, "wb");  
    
14.   if (pFile == NULL)  
    
15.     return;  
    
16.   // Write header  
    
17.   fprintf(pFile, "P6\\n%d %d\\n255\\n", width, height);  
    
18.   // Write pixel data  
    
19.   for (y = 0; y < height; y\+\+)  
    
20.     fwrite(pFrame\->data\[0\] \+ y \* pFrame\->linesize\[0\], 1, width \* 3, pFile);  
    
21.   // Close file  
    
22.   fclose(pFile);  
    
23. \}  
    
24.   
    
25. int main(int argc, char \*argv\[\])  
    
26. \{  
    
27.   AVFormatContext \*pFormatCtx = NULL;  
    
28.   int i = 0;  
    
29.   int videoStream = 0;  
    
30.   AVCodecContext \*pCodecCtx = NULL;  
    
31.   AVCodec \*pCodec = NULL;  
    
32.   AVFrame \*pFrame = NULL;   
    
33.   AVFrame \*pFrameRGB = NULL;  
    
34.   AVPacket packet;  
    
35.   int frameFinished;  
    
36.   int numBytes;  
    
37.   uint8\_t \*buffer = NULL;  
    
38.   
    
39.   AVDictionary \*optionsDict = NULL;  
    
40.   struct SwsContext \*sws\_ctx = NULL;  
    
41.   if(argc < 2) \{  
    
42.     printf("Please provide a movie file\\n");  
    
43.     return \-1;  
    
44.   \}  
    
45.   // Register all formats and codecs  
    
46.   av\_register\_all();  
    
47.   // Open video file  
    
48.   if(avformat\_open\_input(&pFormatCtx, argv\[1\], NULL, NULL) != 0)  
    
49.     return \-1; // Couldn't open file  
    
50.   // Retrieve stream information  
    
51.   if(avformat\_find\_stream\_info(pFormatCtx, NULL) < 0)  
    
52.     return -1; // Couldn't find stream information  
    
53.   // Dump information about file onto standard error  
    
54.   av\_dump\_format(pFormatCtx, 0, argv\[1\], 0);  
    
55.   // Find the first video stream  
    
56.   videoStream=\-1;  
    
57.   for(i = 0; i < pFormatCtx\->nb\_streams; i\+\+)  
    
58.     if(pFormatCtx\->streams\[i\]\->codec\->codec\_type == AVMEDIA\_TYPE\_VIDEO) \{  
    
59.       videoStream = i;  
    
60.       break;  
    
61.     \}  
    
62.   if(videoStream == \-1)  
    
63.     return \-1; // Didn

OSX下编译方法如下：

点击(此处)折叠或打开

1.  gcc \-Wall \-ggdb test.c \-I/usr/include/SDL/ \-c \-o test.o  
    
2.  gcc \-Wall \-ggdb test.o \-L/usr/local/lib \-lavdevice \-lavfilter \-lavformat \-lavcodec \-lswresample \-lswscale \-lavutil \-framework QTKit \-framework Foundation \-framework QuartzCore \-framework CoreVideo \-framework Foundation \-framework AVFoundation \-framework CoreMedia \-framework CoreFoundation \-framework VideoDecodeAcceleration \-framework QuartzCore \-liconv \-L/usr//lib \-lSDLmain \-lSDL \-Wl,\-framework,Cocoa \-lm \-lbz2 \-lz\-pthread \-o test

Linux下编译方法如下：

点击(此处)折叠或打开

1.  gcc \-Wall \-ggdb test.c \-I/usr/include/SDL/ \-c \-o test.o  
    
2.  gcc \-Wall \-ggdb test.o \-o test \-L/usr/local/lib \-lavdevice \-lavfilter \-lavformat \-lavcodec \-lswresample \-lswscale \-lavuti \-lm \-lbz2 \-lz \-pthread

点击(此处)折叠或打开

1.  ffmpeg version N\-63027\-g9e58677 Copyright (c) 2000\-2014 the FFmpeg developers  
    
2.    built on Jun 1 2014 17:05:37 with Apple LLVM version 5.1 (clang\-503.0.40) (based on LLVM 3.4svn)  
    
3.    configuration: \-\-prefix=/usr/local/  
    
4.    libavutil 52. 81.100 / 52. 81.100  
    
5.    libavcodec 55. 60.103 / 55. 60.103  
    
6.    libavformat 55. 37.102 / 55. 37.102  
    
7.    libavdevice 55. 13.101 / 55. 13.101  
    
8.    libavfilter 4. 5.100 / 4. 5.100  
    
9.    libswscale 2. 6.100 / 2. 6.100  
    
10.   libswresample 0. 18.100 / 0. 18.100