视频技术系列 - 2020年超高清视频技术创新实践

作者：中国移动李琳，咪咕灯塔团队

2020年在“超清视界，5G赋能”为主题的2020世界超高清视频（4K/8K）产业发展大会上，展示了5G&超高清领域的新技术，新产品，新应用。本文以此为基础看部分视听技术创新。

1. 采编播传统流程的创新

内容生成：HDR制作、超分、超帧、3D内容生产、内容编码等先进性和创新点。

内容传输：分享了多源P2P体系利用PCDN边缘节点实现节省TB级带宽，并分享了播放全流程网络调度资源分配的策略（4种类型网络资源起播阶段使用稳定可靠的CDN、PCDN，中后期使用SNP2P、P2P）。

播放呈现：主要突出云播放原彩技术，基于端侧GPU最大限度还原色彩。

场景应用

自由视角：摄像头超密可蝶形部署，超清画质，播放过程可自由选择视角动态流转效果。

VR直播：FOV2.0（4K终端8K内容播放，转头时延预测算法优化；编码压缩）；动态插帧（自动判别转头瞬间编码质量情况动态AI插帧，转头2帧之内把8K的前景流叠加上去，转头时延降低到150毫秒之内）。

AR河图：厘米级3D地图重建；高精度/全场景空间计算；AI 3D物体识别和建模；实现虚实无缝融合。

解决方案：从智慧场馆、云制播、到可靠传输端到端解决方案等。

湖南卫视《舞蹈风暴》(非直播)，采用蝴蝶型摄像头部署模型，可以实现视角感知上的高低起伏

中国体育《拳力联盟》系列赛直播，采用圆形摄像头部署模型

2. 内容创新

互动创新

芒果TV：互动剧系统（能玩的视频，形式介于视频游戏之间；互动视频编辑器，编辑视频，播放逻辑，交互形式，在线预览）、自由视角生产系统（和华为合作）、芒果VR（冗余优化）、动态全息光场采集系统（国内首个4K光场棚，自动3D模型重建）。

VR叙事：传统的全景叙事的方式优劣分析，提出交互叙事、智能叙事的方式，应用眼动追踪、生理反应等方式解决全景叙事当前的不足（信息遗漏）。

老内容挖掘创新

老片修复：上交和央视进行合作，用AI对红楼梦。西游记等经典的影像作品修复。

视频编解码：2K->4K、2D->3D、SDR->HDR 等内容上变换技术趋于成熟。

AI 对红楼梦的增强修复

3. 显示技术

XR：技术已经日趋成熟，逐步走入消费者市场。

VR：华为轻型 VR 眼镜可以做到 200g 重量。

部分国产 VR 头戴终端设备技术参数

AR：北理工大学教授分享了其，轻、清、真的技术实现及国内外获奖情况，并透漏后续可以实现AR眼镜和近视镜合一的技术，闪耀科技展示了其不到 100g 的 AR 眼镜实现。

裸眼3D：中山大学教授展示了其最新的实现，可以基于背光指向技术实现时空分原理的裸眼 3D 呈现能力。