ts流解析规则Word格式文档下载.docx

1、描述单个媒体文件的长度。后面为媒体文件，如./0.ts 2、ts文件 ts文件为传输流文件，视频编码主要格式h264/mpeg4，音频为acc/MP3。 ts文件分为三层：ts层Transport Stream、pes层 Packet Elemental Stream、es层 Elementary Stream. es层就是音视频数据，pes层是在音视频数据上加了时间戳等对数据帧的说明信息，ts层就是在pes层加入数据流的识 别和传输必须的信息注： 详解如下 （ 1）ts层 ts包大小固定为188字节，ts层分为三个部分：ts header、adaptation field、payload。t

2、s header固定4个字节；adaptation field可能存在也可能不存在，主要作用是给不足188字节的数据做填充；payload是pes数据。ts header 同步字节，固定为0x47 8b sync_byte 传输错误指示符，表明在ts头的adapt域后由一个无用字节，通常都为0，这个字节算在adapt域长度1b transport_error_indicator 内 负载单元起始标示符，一个完整的数据包开始时标记payload_unit_start_indicator 1b 为1 传输优先级，0为低优先级，1为高优先级，通常取transport_priority 0 pid 1

3、3b 值pidtransport_scrambling_control 2b 表示未加密传输加扰控制，00adaptation_field_control 仅为无自适应域，保留；01是否包含自适应区，0011为仅含自适应域，含有效负载；10无有效负载； 为同时带有自适应域和有效负载。continuity_counter 4b 递增计数器，从0-f，起始值不一定取0，但必须是连续的 ts层的内容是通过PID值来标识的，主要内容包括：PAT表、PMT表、音频流、视频流。解析ts流要先找到PAT表，只要找到PAT就可以找到PMT，然后就可以找到音视频流了。PAT表的PID值固定为0。PAT表和PMT

4、表需要定期插入ts流，因为用户随时可能加入ts流，这个间隔比较小，通常每隔几个视频帧就要加入PAT和PMT。PAT和PMT表是必须的，还可以加入其它表如SDT（业务描述表）等，不过hls流只要有PAT和PMT就可以播放了。 ?PAT表：他主要的作用就是指明了PMT表的PID值。PMT表：他主要的作用就是指明了音视频流的PID值。音频流/视频流：承载音视频内容。adaption adaptation_field_length 1B 自适应域长度，后面的字节数 flag PCR 表示不包含0x40或PCR表示包含0x50取，节目时钟参考，用于恢复出与Program Clock Reference5

5、B PCR STC（System Time Clock）。编码端一致的系统时序时钟0xff 填充字节，取值xB stuffing_bytes 是节目时钟参自适应区的长度要包含传输错误指示符标识的一个字节。pcr 是递增的，因此可以将pcr、pts都是对同一个系统时钟的采样值，pcr考，、dts是可以播放的，但ipad值，音频数据不需要pcr。如果没有字段，其设置为dts不够的长的，表是没有adaptation fieldts流时PAT和PMT无法播放。vlc打包，通常加在一个adaptation field0xff即可。视频流和音频流都需要加度直接补 ts包不加。ts包和最后一个ts包里，中间

6、的帧的第一个 PAT格式PAT表固定为0x00 8b table_id 固定为1 section_syntax_indicator 1b 0 固定为zero 1b 11 固定为2b reserved 后面数据的长度 12b section_length 传输流ID，固定为0x0001 16b transport_stream_id 固定为11 2b reserved 版本号，固定为00000，如果PAT有变化则版本号加1 5b version_number 固定为1，表示这个PAT表可以用，如果为0则要等待current_next_indicator 1b 表PAT下一个0x00 固定为8b

7、section_number 0x00 固定为8b last_section_number 开始循环,0x0001时时表示这是NIT，节目号为节目号为0x000016b program_number PMT 表示这是111 固定为3b 值节目号对应内容的PID13b PID 结束循环 校验码前面数据的CRC3232b CRC32 格式PMTPMT表取值随意，0x02 8b 表示当前的PMT关联到的频道，取值0x0001 频道号码，16b program_number 版本号，固定为00000，如果PAT有变化则版本号加1 5b version_number 固定为1 1b current_ne

8、xt_indicator 固定为0x00 8b section_number 固定为0x00 8b last_section_number 固定为111 3b 指定为视频PID PCR（节目参考时钟）所在TS分组的PID，13b PCR_PID 1111 固定为4b 表示没有节目描述信息，指定为0x00012b program_info_length 开始循环h.264Audio还是其他数据，流类型，标志是Video还是8b stream_type 0x03 mp3编码对应编码对应0x0f，编码对应0x1b，aac111 PID 对应的与stream_type13b elementary_PI

9、D 表示没有描述信息，指定为0x00012b ES_info_length 结束循环CRC32校验码前面数据的 32b CRC32 （2）pes层 pes层是在每一个视频/音频帧上加入了时间戳等信息，pes包内容很多，我们只留下最常用的。开始码，固定为0x000001 3B pes start code 音频取值（0xc0-0xdf），通常为0xc0 stream id 视频取值（0xe0-0xef），通常为0xe0 后面pes数据的长度，0表示长度不限制， pes packet length 2B 只有视频数据长度会超过0xffff 通常取值0x80，表示数据不加密、无优先级、备份的数据 1

10、B flag 取值0x80表示只含有pts，取值0xc0表示含有pts和dts 1B flag 后面数据的长度，取值5或10 1B pes data length 值33bit5B pts dts 5B 值33bit pts是显示时间戳、dts是解码时间戳，视频数据两种时间戳都需要，音频数据的pts和dts相同，所以只需要pts。有pts和dts两种时间戳是B帧引起的，I帧和P帧的pts等于dts。如果一个视频没有B帧，则pts永远和dts相同。从文件中顺序读取视频帧，取出的帧顺序和dts顺序相同。dts算法比较简单，初始值 + 增量即可，pts计算比较复杂，需要在dts的基础上加偏移量。 音

11、频的pes中只有pts（同dts），视频的I、P帧两种时间戳都要有，视频B帧只要pts（同dts）。打包pts和dts就需要知道视频帧类型，但是通过容器格式我们是无法判断帧类型的，必须解析h.264内容才可以获取帧类型。举例说明： I P B B B P 读取顺序： 1 2 3 4 5 6 dts顺序：pts顺序： 1 5 3 2 4 6 点播视频dts算法：dts = 初始值 + 90000 / video_frame_rate，初始值可以随便指定，但是最好不要取0，video_frame_rate就是帧率，比如23、30。pts和dts是以timescale为单位的，1s = 90000

12、time scale , 一帧就应该是90000/video_frame_rate 个timescale。用一帧的timescale除以采样频率就可以转换为一帧的播放时长 点播音频dts算法：dts = 初始值 + （90000 * audio_samples_per_frame） / audio_sample_rate，audio_samples_per_frame这个值与编解码相关，aac取值1024，mp3取值一帧解码出来AAC。41000、24000是采样率，比如audio_sample_rate，1158是每声道1024个sample，也就是说一帧的时长为1024/sample_ra

13、te秒。所以每一帧时间戳依次0，1024/sample_rate，.，1024*n/sample_rate秒。直播视频的dts和pts应该直接用直播数据流中的时间，不应该按公式计算。（3）es层 es层指的就是音视频数据，我们只介绍h.264视频和aac音频。h.264视频： 打包h.264数据我们必须给视频数据加上一个nalu（Network Abstraction Layer unit），nalu包括nalu header和nalu type，nalu header固定为0x00000001（帧开始）或0x000001（帧中）。h.264的数据是由slice组成的，slice的内容包括：视频、sps、pps等。nalu type决定了后面的h.264数据内容。 SPS序列参数集 7 图像参数集PPS 8 分解符 9序列结束 10 码流结束 11 填充 12 保留 1323 未使用 2431