android视音频开发---视频格式nv21转换

引言

android 视音频操作一直是一个令安卓开发工程师感兴趣的技术，学习这方面的知识个人感觉还是蛮难的，本人也是在上家公司接触此类项目才知道的，之后通过看 雷晓华博士的博客来自学关于视音频方面的知识，现在勉强能做到视音频的简单直播推流，在此简单记录下

视频格式

在接触视音频之前，本人一直只知道视频格式有MP4，mov；音频也只听过mp3之类的

接触之后才知道还有：yuv，h264,h265，flv....

android视频采集的原始流，及用Camera采集的视频流就是yuv格式的，对于不同的手机供应商格式可能不同，单大部分都是nv21格式，及yuv420sp格式

什么是yuv格式：顾名思义就是有大量的y，u，v三个分量组成的视频格式

y分量表示视频的亮度，uv分量表示色度

yuv420 一帧数据表示y：u：v = 4:1:1

比如一段4x4分辨率的头像

其yuv420sp及nv21的数据原型是：

y1  y2    y3    y4

y5   y6     y7    y8

y9   y10   y11  y12

y13 y14   y15  y16

v1   u1     v2    u2

v3   u3     v4    u4

及y有4x4 = 16个字节长度

v在y数据完后紧跟着y数据，与u数据交替出现。

v、u长度都为 16/4 = 4。

将此数据转换成yuv420p即可保存为.yuv文件，并播放出来

yuv420p与yuv420sp格式差别：

yuv420p原始编码数据格式：

y1  y2    y3    y4

y5   y6     y7    y8

y9   y10   y11  y12

y13 y14   y15  y16

u1   u2

u3   u4

v1   v2

v3    v4

与yuv420sp相比，其y分量是相同的，uv位置不一样，如果将yuv420sp转换成yuv420p

其转换方法：

public static voidNv21ToI420(byte[] data, byte[] dstData, intw, inth) {

intsize = w * h;

// Y

System.arraycopy(data,0,dstData,0,size);

for(inti =0;i < size /4;i++) {

dstData[size + i] = data[size + i *2+1];//U

dstData[size + size /4+ i] = data[size + i *2];//V

}

}