图:2022阿里云视觉计算私享会现场
5月11日,在“2022阿里云视觉计算私享会”上,NVIDIA 扩展现实高级业务开发&销售经理周锡健为大家带来了题为《设计到数字营销的最后一公里》的主题分享。以下内容根据他的演讲整理而成。
Omniverse 是 NVIDIA 的元宇宙解决方案。上图中心为虚拟世界 Omniverse,右边是不同的 Omniverse 版本,每个设计师、每个工厂、每个行业都有自己的虚拟世界。这些虚拟世界通过蓝色的 USD(皮克斯的通用数据结构)连接。
上图左侧为 Physical World(真实世界)和 Internet ,无论是虚拟世界还是真实世界,都通过 XML5 与 Internet 相连。
NVIDIA 近 20 年的成果都可以用在 Omniverse。上图下方挂了很多小星球,比如 Path Tracing、AI、MDL、Physics,有超过 150 个 NVIDIA 的 SDK 框架和解决方案都可以在 Omniverse 世界体验到。
上图中间戴头盔的就是 XR ,它是连接真实世界与虚拟世界的纽带。NVIDIA 将超级计算机变成了云原生系统,希望能够与数百万人一起共享 Omniverse,想让人们通过隧道进入、离开 Omniverse。而 AR 和增强现实就是AI 从 Omniverse 进入真实世界的方式,它能够做到叠加增强现实的效果。VR 是一个全沉浸式的底页,可以用来进入 Omniverse 的重构。
上图为 Omniverse 架构图,红框内为与 XR 相关的内容。左侧为 Omniverse 平台下可以进行协同的 DCC 软件,如果原先就支持 XR 输出,则在 Omniverse 同样也能够支持。另外, Omniverse 构建此类 APP 天生支持 VR 与 AR 的输出。XR 还可以通过 CloudXR 以微服务的方式为用户提供服务。
Omniverse XR 的 App 已于 2022 年 4 月上线,通过 App 即可实现 Omniverse AR 与 VR 的交互,可协作,高保真,且支持 XR 光线追踪。从 App store 下载 Omniverse XR Remote ,配合在电脑或工作站上 的Omniverse XR软件,即可快速实现 AR 的交互。
Omniverse 的 VR 的部分同样已于 4 月份发布。不仅支持一些熟悉的 VR 功能,比如真人比例放到沉浸场景、在 VR 里操纵物品及以上帝视角进行漫游等,最重要的功能是可以控制与修改场景光源,使之更加真实。
传统的工业流程非常需要这样的解决方案来提高效率、简化流程。通过传统的工作流做汽车的外观设计评审时,需要制作很多缩小的真实模型,还需要制作 1:1 的全尺寸模型,最后还需要对造型方案进行评审。完成以上所有步骤后才能进入工程阶段,进行结构等设计。
而加入 XR 后的工作流程,不再需要制作这么多不同比例的模型,只要在 VR 里就可以进行充分的外观评审,最后制作泡沫模型,即可进入工程的阶段。
得益于 Omniverse XR 能够支持光线追踪,这几年 VR/XR 在外观评审的工作流得以形成统一的解决方案。
解决方案由四个板块组成,包括 Omniverse 招牌的多人协同,以及 VR 设计与 MR 混合现实的交互,到最后以大屏的方式沉浸式展示,它已经可以作为成熟的项目来交付使用。
NVIDIA 的生态系统里有很多做二次开发的 ISV 与 Developer ,比如鞋服类从设计生产到数字营销的全产业链,且他们都有完整的用 Omniverse 与其他工具组成的整体解决方案。
上图为 CloudXR 架构图,各行各业比如建筑业、制造业、娱乐传媒、培训教育以及线下娱乐等,他们的 XR 内容都可以加载在任何地方的 NVIDIA RTX,比如公有云、私有云、工作站或笔记本电脑。其中阿里云已经可以部署 Cloud XR 的服务,带来沉浸式的 XR 体验。可以通过5G 网络、以太网或 WiFi 串流到这些 XR 设备。
上图右侧展示了非常庞大的设备,不仅包括常见的 AR 头盔和 VR 头盔,其中支持 ARCore 与 ARKit 的设备数量也非常庞大,活跃用户超过 10 亿。
上图展示了 CloudXR 解决方案从 2019 年 11 月 MWC 洛杉矶发布 SDK 1.0 版本到现在的进步。
北美的 AWS 、Azure、Google Cloud 已经在 marketplace 上线,国内阿里云也已经抢先实现部署。最新版本3.1.1可以支持 Bidirectional Audio(双向 Audio),有了语音的加持后,极大方便了人们在 XR 场景里做交互。预计年底的 4.0 版本将能够支持很多用户开发者和云服务商最喜欢的 Server API、OpenXR 以及 Linux support。
经过几年的发展,NVIDIA 也有了很多类型的合作伙伴,有头盔厂商,有 ISV /Developer ,还有 IaaS 层、 PaaS 层以及 VDI 层。
上图为NVIDIA 英国的合作伙伴 FACTORY42 制作的一个绿色星球数字博物馆,通过 5G 网络将数字内容传到一台三星手机,与真实的博物馆进行交互。
最后,NVIDIA 将与全球的伙伴一起,在 CloudXR 生态上做更多合作与优化。
点击这里,观看本次视觉计算私享会精彩回放。