ltlovezh

HLS（Http Live Streaming）是由Apple公司定义的用于实时流传输的协议，HLS基于HTTP协议实现，传输内容包括两部分，一是M3U8描述文件，二是TS媒体文件。 HLS的优势是可以自适应码率播放，客户端可以根据网速，动态选择合适的一路播放，当网速不好时，可…

ESDS BOX主要存储Element Stream Descriptors（ESDs），该Box Body的前4个字节为version&flag，一般全为0，从第4个字节开始为ESDs。 可用的Tag Type有以下几种，Mp4主要处理MP4ESDescrTag、M…

通过FFmpeg解封装或者封装Mp4容器时，可以进行解密或者加密，这是MP4容器提供的能力。 libavformat/movenc.c：提供了mov、3gp、mp4、psp、3g2、ipod、ismv和f4v的Muxer。 libavformat/mov.c：提供了mov、mp…

AVFormatContext->pb是一个AVIOContext结构体，负责IO操作。 一般情况下，我们通过avio_open函数创建并初始化AVFormatContext->pb；通过avio_closep函数关闭AVFormatContext->pb。 所谓边合成边上传，…

VS Code安装Shader Toy插件后，可以实时预览glsl效果，开发shader特效很有意思。 gl_FragCoord是只读变量，保存当前片元的窗口坐标(x, y, z, 1/w)，该值是图元装配阶段对图元插值计算所得，z分量表示当前片元的深度值。

SAR表示单个像素显示的宽高比，即像素不都是按照1:1显示。 SAR(Sample Aspect Ratio): 单个像素宽高比，即每个像素宽度与高度的比值。 PAR(Pixel Aspect Ratio): 像素数宽高比，图像的横向采集点数与纵向采集点数的比值，即像素个数的比…

当使用结构体时，一定要在定义结构体变量时，对所有成员变量进行初始化，否则，成员变量是随机值，导致出现各种奇葩Bug。 结构体的初始化整体分为：直接初始化和构造函数初始化。 在定义结构体变量时，给定初始值。 在C++中，结构体与类在使用上已没有本质区别了，所以可以使用构造函数来初…

在FFmpeg中，AVPacket主要存储编码数据，例如：H264、H265、AAC等。对于视频流，它通常应该包含一个编码帧；对于音频流，则可能包含多个音频帧。编码器可能输出空AVPacket，不包含编码数据，只包含边side data，例如：在编码结束时更新一些流参数。 AV…

本文主要介绍音频AAC、视频H264和H265等编码格式的元数据，以及它们在MediaCodec中的处理逻辑和在封装容器中的存储逻辑。 audio object type是profile的索引，frequency index是采样率的索引，channel configurati…