以NeRF为基础,专注高保真人头参数化模型HeadNeRF渲染更逼真

正如GAN一样,每个新的技术提出来后,后续研究者以此为基点延展开来,往往能创造出更新更大的成果,从而打开一个新视野空间。机智客觉得NeRF技术也是这样的基点技术,自从神经辐射场被提出后,为科研人员打开了一个新风向,后续的相关研究成果很鼓舞人心。此次专注于数字人方向的高保真人头参数化模型HeadNeRF又把这个技术应用提升到了一个新的高度。


说起数字人,想必大家都不陌生,很可能已经从短视频平台和媒体报道中领略到好几个虚拟人形象了。它们基本都是三维渲染的高清乱真形象,可以说,随着计算机图形学的发展,现在3D形象的建模渲染普遍达到了照片级别的逼真度。不过虚拟数字人渲染得再好,我们基本也都能分辨出来它们与真实拍摄的人的区别,


拿一张数字人和真实照片比较,我们多半分得清哪一张是真实拍摄的。即便足以乱真达到让我们真假难辨的程度,那建模和渲染的成本往往也非常高。毕竟现实物理世界中的复杂性,人体和物理环境的交互,不会那么容易被还原出来。而自从深度学习的NeRF技术提出后,虚拟还原现实,就又被提升到了一个新高度。


而HeadNeRF这个技术,则是建立在NeRF新型渲染模型的基础上的。HeadNeRF是一种基于 NeRF的高效全息人脸头部参数化模型,由来自中科大张举勇教授的课题组提出。顾名思义,HeadNeRF能实时地渲染高清图像级别的人脸头部,另外它也支持直接编辑调整渲染结果的多种语义属性,如身份、表情以及颜色外观等。


从成本上看,HeadNeRF比传统的耗费人力物力的三维网格建模、点云等技术消耗更低,当然目前只是研究阶段的demo,后续技术成熟完善后,应该有更大的优势。从效果上看,HeadNeRF渲染出来的高保真参数化人头模型,也比成熟的游戏引擎或3D软件渲染来得真实。机智客不由感慨,毕竟是深度学习神经网络,未来的元宇宙虚拟人新生态的构建,AI一定是一个基础设施,AI相关技术势必会为未来科技进步立下汗马功劳。


此次研究人员将HeadNeRF 的表示过程整体上通过conditional-NeRF 实现,同时也将NeRF体渲染与2D神经渲染相结合,以加速NeRF渲染速度。可以说AI再次为元宇宙虚拟人时代的到来添砖加瓦。AI已经给我们现有传统的技术、行业和产业带来了巨大的革新,而且这个革新还在一直进行着,这都是有目共睹的。

你可能感兴趣的:(以NeRF为基础,专注高保真人头参数化模型HeadNeRF渲染更逼真)