杭州拍乐云科技8月16日正式发布国内首个应用在实时视频服务的低码高清编码引擎 Pano Venus。这是新一代视频编码标准 AV1 第一次在国内实时系统中的应用落地,用以取代现有的主流编码标准 H.264,是编码性能和编码速度的一次全新突破,真正开启高画质、低带宽、高性能、低时延的实时视频时代,为未来4K/8K、全景、VR等视频技术的大规模应用揭开序幕。
近日,拍乐云音视频实验室发布了国内首个应用在实时视频服务的低码高清编码引擎 Pano Venus。这是新一代视频编码标准 AV1 第一次在国内实时系统中的应用落地,用以取代现有的主流编码标准 H.264,是编码技术的一次全新突破,真正开启高画质、低带宽、高性能、低时延的实时视频时代,为未来4K/8K、全景、VR等视频技术的大规模应用揭开序幕。
视频编码性能和速度的一次大幅提升
Pano Venus 采用了先进的视频编码标准 AV1,经过算法和处理器特性相关的优化,性能有了极大幅度的提升,可以在全平台设备上将编码时延控制在毫秒级,完全满足实时视频通信的要求。同时,在相同的视频质量下,Pano Venus 的所需带宽相比主流采用 H.264 标准的编码引擎平均降低40% 到 70%,其所使用的编码器是目前已知的国内最快的 AV1 编码器。
随着移动互联网技术的蓬勃发展,视频数据在移动互联网流量中所占的比例越来越高,视频直播、视频点播、短视频、视频聊天,已经完全融入了每个人的生活。视频让我们更方便快捷地获取到大量信息,但视频的传输、存储也面临巨大的挑战。
从20世纪90年代以来,视频编解码技术一直是国内外研究的热点领域,它的主要作用是在可用的计算资源内,追求尽可能高的视频重建质量和尽可能高的压缩比,以达到带宽和存储容量的要求,保障用户高品质的视频体验。
对于实时音视频系统来说,提升视频压缩率有助于降低互联网线路的压力,节省用户在网络带宽、视频存储等方面的投入,还有助于在低带宽的场景下提供更好的画面质量。
Pano Venus 采用的 AV1 视频编码标准拥有丰富的编码工具支持,可以极大地提高视频的压缩比,节省大量带宽,同时,AV1 作为开源媒体联盟 AOM 制定的第一代标准,除了有非常好的生态支持,还提供了免费的专利政策,相比 H.265 / H.266 等知识产权政策不明确的视频标准,有巨大的优势。清晰明确的专利政策也是 AV1 在产业界被推崇的一大优势。
简而言之,Pano Venus 的技术价值聚焦两个点:大幅提升编码性能、大幅提升编码速度。
低码高清在实时视频系统中的首次应用
根据应用场景对时延和带宽的不同要求,拍乐云把视频低码高清技术应用分为三个级别:
1、非实时低码高清:应用于视频点播场景,对于编码无实时性要求,对时延要求低,对画质和带宽的要求高。
2、准实时低码高清:应用于视频直播场景,对于编码的实时性要求较高,一般运行在云端高性能服务器上,对画质和带宽的要求较高。
3、实时低码高清:应用于实时音视频场景,对于编码的实时性要求极高,通常在毫秒级别,运行的设备情况种类繁多、性能差异大,对低性能设备的支持难度非常大,对画质和带宽的要求较高。
目前国内的低码高清视频编解码技术主要应用于非实时和准实时场景,拍乐云此次推出的 Pano Venus 是针对实时视频服务场景,采用新一代视频编码标准 AV1。
AV1 技术由于存在运算复杂度过高的问题,目前在视频点播等领域有所应用,但在实时音视频领域未得到推广。
Pano Venus 正是解决了 AV1 在实时音视频领域的技术难题,通过深入分析AV1视频编码标准中的编码工具,创新地提出了多种加速编码的算法,使其能够在各种设备平台上以极小的运算开支进行视频通信,节省了大量传输带宽,减小了视频传输的时延,拓宽了 AV1 的应用范围,加速4K/8K、全景、VR等下一代视频实时通信产品的推广。
Pano Venus 诞生背后的故事
拍乐云在2019年成立之初就开始大力投入 AV1 视频编码器的开发工作,目标是研发一款针对不同编码场景,编码复杂度可自适应调整的实时编码器,为视频会议、社交娱乐、云游戏、在线教育等实时场景提供极致用户体验。
凭借在实时视频领域的多年深耕和对技术的匠心追求,拍乐云音视频实验室仅用两年时间就推出了 Pano Venus 的1.0版本。
拍乐云创始人赵加雨拥有18年视频会议与实时通信领域研发经验,曾担任思科 WebEx 美国架构师。核心技术合伙人中还有多位视频领域专家,在视频处理、视频压缩、视频传输等领域都有深厚的技术积累,有丰富的视频编解码经验,特别是实时通信场景下的视频编解码优化。
Pano Venus 是国内第一个落地实时场景的 AV1 视频编码引擎,实现同质量下的码率降低40%~70%,真正开启高画质、低带宽、高性能、低时延的实时视频时代。
对于拍乐云来说,Pano Venus 是拍乐云实时音视频技术的一个重要里程碑。
无限未来,将至已至。
拍乐云团队将继续推进 Pano Venus 编码引擎的深度优化,也会致力于人工智能在视频编码技术中的应用,结合人的主观视觉特性,全面提升用户的视频体验,开启下一个视频时代。