视频的简单概念总结

几种常用视频压缩格式

• H.264:H.264上目前比较主流的压缩算法，像视频会议设备一般都采用这个编码格式。基础的H.264可以支持在1M带宽下传输720P30帧/秒的图像；H.264 HIGH PROFILE支持在512K带宽下传输720P30帧/秒的图像。
• H.265: H.265旨在在有限带宽下传输更高质量的网络视频，仅需原先的一半带宽即可播放相同质量的视频。压缩效率应该比H.264至少提高1倍。相比于H.264，通过H.265编码的视频大小将减少大约39-44%。
• MJPEG:M-JPEG源于JPEG压缩技术，是一种简单的帧内JPEG压缩，压缩图像质量较好，在画面变动情况下无马赛克，无法做到大比例压缩，网络传输时需要2M带宽，不大实用于视频图像的网络传输。
• MPEG:MPEG是压缩运动图像及其伴音的视音频编码标准，它采用了帧间压缩，仅存储连续帧之间有差别的地方 ，从而达到较大的压缩比。MPEG现有MPEG—1、MPEG—2和MPEG—4三个版本，以适应于不同带宽和图像质量的要求。

几种常见视频分辨率

• D1:（480i格式） 720×480（水平480线，隔行扫描），和NTSC模拟电视清晰度相同，行频为15.25kHz，相当于我们所说的4CIF（704×576）
• D2:（480p格式）720×480（水平480线，逐行扫描），较D1隔行扫描要清晰不少，和逐行扫描DVD规格相同，行频为31.5kHz
• D3:（1080i格式）1920×1080（水平1080线，隔行扫描），高清放松采用最多的一种分辨率，分辨率为1920×1080i/60Hz，行频为33.75kHz
• HD:高清 分辨率大于720p
• D4:（720p）280×720（水平720线，逐行扫描），虽然分辨率较D3要低，但是因为逐行扫描，市面上更多人感觉相对于 1080I（实际逐次540线）视觉效果更加清晰。不过个人感觉来说，在最大分辨率达到1920×1080的情况下，D3要比D4感觉更加清晰，尤其是文 字表现力上，分辨率为1280×720p/60Hz，行频为45kHz
• D5:（1080p）1920×1080（水平1080线，逐行扫描），目前民用高清视频的最高标准，分辨率为1920×1080P/60Hz,行频为67.5KHZ
• 2k:分辨率指屏幕横向像素达到2000以上，主流2K分辨率为2560x1440。国内数字影院放映机主要采用这种分辨率。
• 4k:4k就是4096×2160的像素分辨率，它是2K投影机和高清电视分辨率的4倍，属于超高清分辨率。在此分辨率下，观众将可以看清画面中的每一个细节，每一个特写
• 8k:7680x4320解像度作为国际的8K超高画质电视(SHV)标准，SHV作为超越现行数字电视的“超高精细影像系统

三种常见sensor接口

• MIPI：由arm牵头制定的标准，旨在将手机内部接口（摄像头、显示屏接口）统一化，减少手机设计的复杂度增加灵活性。比较成熟的有CSI（摄像头） 、DSI（显示屏）。
• LVDS：主要是想为设计人员解决 高速IO接口问题提供了新选择。低压查分信号传输，满足当今高性能数据传输应用的技术，传输电压可以低至2V。
• DC：采用并口接口。
  LVDS和MIPI主要区别：
• LVDS和MIPI接口区别：

1. LVDS接口只用于传输视频数据，MIPI DSI不仅能够传输视频数据，还能传输控制指令；
2. LVDS接口主要是将RGB TTL信号按照SPWG/JEIDA格式转换成LVDS信号进行传输，MIPI DSI接口则按照特定的握手顺序和指令规则传输屏幕控制所需的视频数据和控制数据。

图像像素格式的理解

• rawRGB：有时候也叫RGB_BAYER由于sensor每个点只能记录RGB一个分量的值，从sensor出来后的模拟量经过ADC转换成为数字量也仅仅是rawRGB，转化为RGB需要DSP的进一步操作
• RGB：RGB565，RGB888等不同格式，RGB思想就是将颜色分为RGB三原色，即只有三种色度，每种色度记录相应的亮度，即颜色深浅
• YUV：Y表示颜色的亮度，UV表示颜色的色度。与只有亮度的黑白图像兼容性很好，如果需要转化为黑白图像只需要保留Y分量即可。

YUV分类

YUV也分很多种，分为 packed 和 planar，有YUV420 、YUV422 ，有YUV420p 、YUV420sp。一下例子用2*2的4个像素点为例

• packed与planar：
  • packed：[Y1 U1 V1] [Y2 U2 V2] [Y3 U3 V3] [Y4 U4 V4] #更方便图片裁剪
  • planar ：[Y1 Y2 Y3 Y4] [U1] [V1] (YUV420) #更方便与黑白图片转换
• YUV420与YUV422：
  • YUV420：[Y1 Y2 Y3 Y4] [U1] [V1] #2*2的四个小方格里面对应4个Y分量，U、V分别只有一个。
  • YUV422：[Y1 Y2 Y3 Y4] [U1 U2] [V1 V2] #2*2的四个小方格里面对应4个Y分量，U、V分别只有两个。（YUYV、YUV422p）
• YUV420 planar与YUV420 semi planar：
  • YUV422 planar：[Y1 Y2 Y3 Y4] [U1 U2] [V1 V2]
  • YUV422 semi planar：[Y1 Y2 Y3 Y4] [U1 V1] [U2 V2]

图像采集的过程

数码相机是通过光学系统将影像聚焦在sensor成像元件CCD/ CMOS 上，通过A/D转换器将每个像素上光电信号转变成数码信号rawRGB，再经DSP处理成数码图像RGB图像，存储到存储介质当中。

sensor上每个像素只采集特定颜色的光的强度，因此sensor每个像素只能为R或G或B。
图像观看效果几个参数有：

• 分辨率
• pitch
• 观看距离