前言
flv 是 flash video 的缩写&＃xff0c;是 Adobe Flash payler 支持的一种流媒体播放格式。flv 是一种层级格式&＃xff0c;除了一个 flv header 外&＃xff0c;剩下全是由 一个个 tag 组成。tag 是由 tag 头和 tag 数据组成。tag 类型分为音频、视频、脚本&＃xff0c;一共三种类型。每一种数据类型又有自己的 tag 头。本文下来就简单分析一下 flv 文件格式。
FLV 文件头格式
FLV 文件有 9 个字节的文件头&＃xff0c;文件以 3 字节签名 0x46、0x4C、0x 56 开始&＃xff0c;分别是 ‘F’、’L’、’V’ 三个字母的 ascii 编码。版本号是 1。文件头中还有 flag 标记&＃xff0c;表面是否有音频、视频 tag。
下来以音频、视频为例&＃xff0c;分析一下 FLV 格式的 header、tag。
音频 tag 格式
如上图&＃xff0c;除了 9 字节的公共文件头外&＃xff0c;body 部分就是一个个 tag 组成的。每一个 tag 都有 15 字节的 tag 头。字段说明如下&＃xff1a;
- PreviousTagSize&＃xff0c;是 4 字节长度&＃xff0c;表面之前的 Tag 的长度&＃xff0c;包含了 tag 头和 tag 数据。第一个 tag &＃xff0c;此值是 0。
- TagType&＃xff0c;是 1 字节长度。音频&＃xff1a;8&＃xff0c; 视频&＃xff1a;9
- DataSize , 是 3 字节长。flv tag 的数据长度&＃xff0c;其实如图里 audio tag 头及其数据长度。
- Timestamp&＃xff0c;是 3 字节长。时间戳&＃xff0c;貌似 flv 播放需要。
- TimestampExtended, 是对 Timestamp 长度的扩展&＃xff0c;当时间长度 3 字节不能表示的时候&＃xff0c;启用扩展字段。
- StreamID &＃xff0c;3 字节长&＃xff0c;都填 0.
flv tag 的 body 部分其实就是音频的 tag 部分了&＃xff0c;图中每一个字段都有简单说明。具体每一个参数都有很多取值&＃xff0c;取值的详细说明参考 [1] 中标明的 flv 规范音频 tag 部分。
对于 AACPacketType &＃61; 0 的情况&＃xff0c;音频数据是 AudioSpecificConfig 格式&＃xff0c;此格式在 ISO/IEC 14496-3 2009 中第一&＃xff0c;可惜下载不到此文档。可以参考 wiki 给的格式&＃xff1a;
Audio Specific Config:
5 bits: object type
if (object type &＃61;&＃61; 31)6 bits &＃43; 32: object type
4 bits: frequency index
if (frequency index &＃61;&＃61; 15)24 bits: frequency
4 bits: channel configuration
var bits: AOT Specific Config
如果是 AACPacketType &＃61; 1 的情况&＃xff0c;那么后续数据都是 AAC 格式了。
视频 tag 格式
视频 tag 格式和音频格式 flv 文件头、flv tag 头都相同&＃xff0c;不再说明。video tag 也不再详细说明&＃xff0c;可以参考 [1] 中标明的 flv 规范视频 tag 部分。
这里需要说明一下的是&＃xff0c;当 flv 包含的是 h264 的时候&＃xff0c;CodecID 值是 7。在 H264 视频流开始的第一个 NALU 数据&＃xff0c;需要发送 SPS、PPS 类型的数据。此时&＃xff0c;AVCPacketType 会填 0&＃xff0c;SPS/PPS 是包含在 AVCDecoderConfigurationRecord 结构中&＃xff0c;格式如下&＃xff1a;
aligned(8) class AVCDecoderConfigurationRecord {unsigned int(8) configurationVersion &＃61; 1;unsigned int(8) AVCProfileIndication;unsigned int(8) profile_compatibility;unsigned int(8) AVCLevelIndication;bit(6) reserved &＃61; ‘111111’b;unsigned int(2) lengthSizeMinusOne;bit(3) reserved &＃61; ‘111’b;unsigned int(5) numOfSequenceParameterSets;// SPS 个数for (i&＃61;0; i}
关于此格式&＃xff0c;详细参考 H.264-AVC-ISO_IEC_14496-15 5.2.4.1 节。
如果是后续的视频图像 slice &＃xff0c;那么 AVCPacketType 都会设置为 1。
总结
本文我们描述了 flv 文件头格式&＃xff0c;AAC 和 AVC 的 flv tag。如果以 flv 格式推送 rtmp 流&＃xff0c;AAC 和 AVC 都要加上 audio tag 和 video tag&＃xff0c;但是图中标明的FLV TAG 头没有包含。
本文算是 flv 格式学习的笔记、总结吧。flv 格式虽然结构简单&＃xff0c;但是也有很多字段&＃xff0c;每一个字段取值也有很多&＃xff0c;这些细节需要参考具体的规范。
如果想结合具体 flv 文件&＃xff0c;学习 flv 格式&＃xff0c;那么可以参考[2]中提到的文章&＃xff0c;作者分析的非常详细。
参考
[1] https://www.adobe.com/content/dam/acom/en/devnet/flv/video_file_format_spec_v10.pdf
[2] https://www.cnblogs.com/lidabo/p/9018548.html
[3] https://wiki.multimedia.cx/index.php/MPEG-4_Audio
京公网安备 11010802041100号