FFmpeg开发实战

​AVS3是中国AVS工作组制定的第三代音视频编解码技术标准，也是全球首个已推出的面向8K及5G产业应用的视频编码标准。AVS工作组于2019年3月9日完成第三代AVS视频标准（AVS3）基准档次的制

同步播放音视频的时候，《FFmpeg开发实战：从零基础到短视频上线》一书第10章的示例程序playsync.c采取一边遍历一边播放的方式，在源文件的音频流和视频流交错读取的情况下，该方式可以很好地实现

​FFmpeg结合SDL可以播放音频文件，也能播放视频文件中的音频流。然而其他音频格式（如ogg、amr、wma等）的每帧样本数并不固定，从frame_size字段取到的样本数量为0。

​libass是一个适用于ASS和SSA格式的字幕渲染器，支持的字幕类型包括srt、ass等，凡是涉及到给视频画面添加字幕，均需事先集成libass。

​《FFmpeg开发实战：从零基础到短视频上线》一书的例程主要测试本地的音视频文件，为了安全起见，很多网络视频采用了https地址。FFmpeg若要访问https视频，就必须集成第三方的openssl

MediaMTX是个开源的轻量级流媒体服务器，下载后的压缩包包括可执行程序mediamtx.exe和配置文件mediamtx.yml，看起来非常简约，但它提供的流媒体服务一点也没缩水。

​FFmpeg在很多地方都运用了缓存机制，比如《FFmpeg开发实战：从零基础到短视频上线》一书介绍了编解码的数据缓存，不单是视频编码过程和视频解码过程有缓存，甚至连音频重采样都用到了缓存。

前文介绍了在Linux环境给FFmpeg集成libopus和libvpx，接下来介绍如何在Windows环境给FFmpeg集成libopus和libvpx。

视频的封装格式除了MP4和ASF之外，还有较新的WebM格式，该格式的音频编码主要采用Opus，视频编码采用VP8或VP9。Opus的编解码库为libopus，VP8和VP9的编解码库为libvpx。

前文介绍了在Linux环境给FFmpeg集成vorbis和amr，接下来介绍如何在Windows环境给FFmpeg集成vorbis和amr。

​FFmpeg内置了aac音频格式，在《FFmpeg开发实战：从零基础到短视频上线》一书介绍了如何给FFmpeg集成mp3格式，常见的音频文件除了这两种之外，还有ogg和amr两种格式也较常用。

前文介绍了如何在Linux环境交叉编译Android所需FFmpeg的so库，接下来介绍如何在Linux环境交叉编译Android所需x265的so库。

​《FFmpeg开发实战：从零基础到短视频上线》一书介绍了如何在Windows环境交叉编译Android所需FFmpeg的so库，接下来介绍如何在Linux环境交叉编译Android的FFmpeg库。

FFmpeg支持Linux、macOS、Windows、Android等操作系统，其中Linux系列包括Ubuntu、Debian、Mint、CentOS、RHEL、Fedora等分支。

学习FFmpeg的时候，经常要到GitHub下载各种开源代码，比如FFmpeg的源码页面位于https://github.com/FFmpeg/FFmpeg。然而国内访问GitHub很不稳定……

《FFmpeg开发实战：从零基础到短视频上线》一书提到：使用MSYS对FFmpeg进行交叉编译时，需要事先安装交叉编译工具链。 一般情况可以正常安装交叉编译工具链，不过有时会提示错误。

FFmpeg不仅提供了ffmpeg、ffplay和ffprobe三个可执行程序，还提供了八个工具库，使得开发者能够调用库里面的函数，从而实现更精准的定制化开发需求。

外界对于FFmpeg主要有两种使用途径，一种是在命令行运行FFmpeg的可执行程序，该方式适合没什么特殊要求的普通场景；另一种是通过代码调用FFmpeg的动态链接库。

由于Linux系统比较专业，个人电脑很少安装Linux，反而大都安装Windows系统，因此提高了FFmpeg的学习门槛，毕竟在Windows系统搭建FFmpeg的开发环境还是比较麻烦的。

对于初学者来说，如何搭建FFmpeg的开发环境是个不小的拦路虎，因为FFmpeg用到了许多第三方开发包，所以要先编译这些第三方源码，之后才能给FFmpeg集成编译好的第三方库。