h.264 h.265 协议基本概念记录

区分一些概念

• MPEG-4 是一套用于音频、视频信息的压缩编码标准
• H.264，AVC，编码格式，是MPEG-4 的第10部分
• H.265，HEVC，编码格式，是MPEG-H的第2部分
• mp4，rmvb，mkv，avi是容器，是视频文件的封装格式，提供索引；

H.264

H.264视频码流由若干个GOP组成，GOP由1个I帧和多个P帧/B帧组成

几种帧类型：

• IDR帧：可以单独解码，会清空解码参数
• I帧：可以单独解码，不会清空解码参数
• P帧：前向参考编码帧，
• B帧：双向参考编码帧

每一帧又是由多个Nal单元组成（Nal Unit Header(起始码、Nal Type)、 Nal Unit Body(RBSP，Raw Byte Sequence Payload)）

Nal 类型有：SPS、PPS、I Slice（0x67）、P slice（0x65）、B slice

SPS：Sequence Paramater Set 序列参数集；主要记录了编码视频的的 Profile、level、图像宽高等。

PPS：Picture Paramater Set 图像参数集；主要记录编码数据所依赖的参数，如参考帧，图像序列计算方法等。

Islice/Pslice/Bslice：编码帧片数据；在编码I帧、P帧或者B帧的时候会将待编码的图像分成一个或多个Slice(片)，对每个Slice单独编码生成Slice编码数据；在多线程的时候多个Slice可以并行编码提高编码速度。

H.265

H.265比H.264多一个VPS（视频参数集）

码流结构一般如下：

启始码+VPS+启始码+SPS+启始码+PPS+启始码+SEI+启始码+I帧+启始码+P帧+启始码+P帧+…

VPS（视频参数集）NALU的头值为0x4001（十六进制），取出2-7位（40 & 0x7E）>>1 =32(十进制)

nalu头固定2字节 2到7位表示nalutype

SPS(序列参数集)NALU的头值为0x4201（十六进制），取出2-7位（42 & 0x7E）>>1 =33(十进制)

PPS(图像参数集)NALU的头值为0x4401（十六进制），取出2-7位（44 & 0x7E）>>1 =34(十进制)

SEI(补充增强信息)NALU的头值为0x4e01（十六进制），取出2-7位（4e & 0x7E）>>1 =39(十进制)

I帧 NALU的头值为0x2601（十六进制），取出2-7位（26 & 0x7E）>>1 =19(十进制)

P帧 NALU的头值为0x0201（十六进制），取出2-7位（02& 0x7E）>>1 =1(十进制)

参考

H.264和H.265（HEVC）深度解析及对比 - 知乎 (zhihu.com)

h264 - 搜索结果 - 知乎 (zhihu.com)