随着元宇宙时代的到来,虚拟人产业正蓬勃发展。在自身能力不断提升的同时,Cocos 引擎也在技术和工具上不断探索创新,所以有了这套以 Cocos 引擎基础能力作为底座的虚拟角色专业解决方案。
不管是元宇宙的美好畅想还是乍一看魔法般神奇的语言大模型 ( LLM ) ,再好的产品呈现都需要良好创作内容的加持,而帮助快速孵化优秀内容才应该是 工具向产品 应该解决的问题。
为进一步降低创作门槛,提高开发效率, Cocos 虚拟角色研发团队针对行业痛点,推出了全新的无代码 3D 角色编辑器 Cocos Persona Editor,以及快速集成虚拟角色能力的开发工具 Cocos Meta SDK。
Cocos Persona Editor(以下简称 Persona)是一款面向普通用户的可视化 3D 虚拟角色生成工具,通过拖拽式操作实现快速角色创建。即使不具备相关专业技能,也能打造真实细腻的虚拟形象。
在功能方面,Persona 包含了 捏脸换装、动态捕捉、资产管理、场景管理、虚拟直播、 AIGC 等在内的虚拟角色必备 “全家桶”!
Persona 内置丰富多样的 3D 角色模板,帮助你快速生成需要的 3D 角色。
如果你已经有角色资产,可直接导入 Persona,然后进行简单适配就能实现模型的实时驱动,轻松打造属于你的专属虚拟角色!
Persona 不仅具备基础的捏脸和换装功能,还附带了丰富的可视化材质系统,让你可以轻松自定义角色外观,快速打造理想的虚拟形象。
可视化材质系统支持自由修改模型材质贴图,用户可以通过应用 Cocos 虚拟人专用 Shader 轻松实现精致 PBR 渲染效果。
Persona 中的材质系统还接入了 AI 技术,支持一键调用 stable diffusion 绘图服务,仅需文本描述即可生成2D图像,并直接应用于 Persona 中的 3D 模型上,帮助打造独特的个性化虚拟角色。
内测阶段仅支持用户自行部署的 SD 服务,未来将支持更多主流 AI 绘图服务
除了让虚拟角色拥有精美的外观,Persona 搭载的驱动功能还能赋予角色 “灵魂”,让每个 3D 角色都能活灵活现。
Cocos 自研的 AI 智能动态捕捉算法,精准还原真实面部动态表情。无需复杂昂贵外接动捕设备,1~2 台普通摄像头即可一键开启面部&全身实时动态捕捉。
Cocos 自研的骨骼动画重定向算法,兼容 Biped 等大部分人形动画骨骼;您可以自由导入骨骼动画 并转化为通用角色动作资源。为项目开发提供了极大的便利,让制作者无需再面对复杂的骨骼和动画脚本,避免反复修改调试。大大降低了制作难度,提高了效率。
低门槛的弹簧骨配置系统,能让新手用户轻松配置出拥有丝滑动态效果的发丝、裙摆。
在 Persona 内可以轻易通过拖拉拽快速构建 3D 场景,结合虚拟角色,就可以搭建你心中理想的小世界!
对于游戏开发者,可以通过在 Persona 中搭建 3D 场景,便捷实现游戏场景的原型设计,而后直接导出角色至本地工程。
对于虚拟UP主或虚拟IP运营方,可以将搭建的 3D 场景保存为直播间环境,使用内置的直播模式在不同直播场景间随意切换,丰富直播互动体验。助力虚拟 IP 运营,丰富个人直播体验!
对于视觉内容创作者,可以摆设道具、控制人物姿势,布置视角;通过截图或录制功能快速输出分镜草稿;辅助动画、脚本故事创作。为作品添砖加瓦!
无需额外开发即可在项目中快速集成 3D 虚拟角色能力。不论您是希望进行商业应用开发,还是游戏开发,选择集成 Meta SDK 都将是一个更加便捷高效的开发方案。
Cocos Meta SDK 搭载了包含捏脸换装、角色操控、表情动作播放、视觉面捕、口型驱动等高级虚拟角色功能。开发者无需重复开发这些通用能力,直接将精力放在内容创作与场景优化上,大幅提升开发效率。
同时,Cocos 是一个移动端优先的引擎,在移动端做了大量的技术优化,能在最小的算力范围内,达到最优的虚拟人效果,实现大多数低算力设备及操作系统的全面覆盖。
由 Persona 创建角色资源,导出并接入 Meta SDK,即可轻松构建各类个性化工程。Persona Editor + Meta SDK 强强联合,基本构成了元宇宙虚拟社交、数字人商业营销、游戏开发所需的全套技术解决方案。过去只能想象的场景,现在都可以通过这套组合拳实现。
Persona 编辑器及 Meta SDK 在设计上充分考虑了不同用户群体和应用场景的需求,提供了针对性功能,构建高效的协同创作环境。
降低 3D 项目开发难度:无需编程知识,就能在 Persona 内预览和调试 3D 渲染效果及动画组合,不同种类的创作者可以各司其职高效协作。
简化程序开发流程:Meta SDK 为程序员提供完整接口,可将精力集中在自己的开发领域,无需操心虚拟角色技术细节。
支持多样化需求:Persona 和 Meta SDK 可用于游戏开发、商业应用、IP 短视频、VR/AR 等领域,满足不同用户的虚拟角色创作需求。
虚拟互动直播 - Persona 编辑器的实时捕捉功能可以精准还原角色的面部和动作表现,直播环境自由创作,一键轻松开启直播间。
游戏、商业应用开发 - 通过 Cocos Meta SDK,开发者可以将 Persona 中的角色资产应用到游戏项目中,轻松实现交互式虚拟角色项目的开发。不论是小程序、桌面游戏 、手机应用 还是 车载程序,集成虚拟角色都不再是一大难题。
IP 短视频 - Persona 对通用骨骼动画格式提供了全面支持,加上完全可自定义的 3D 场景,可以大幅缩减短视频内容的制作时间。不论是分镜草稿、短视频素材都能轻松拿捏。
VR/AR 应用 - 结合 Cocos CreatorXR 可以帮助开发者毫不费力地将虚拟角色集成到 VR/AR 游戏或者应用中。
本次测试开放时间为 2023 年 8 月 10 日 至 8 月 25 日 ,面向所有用户开放申请,无名额限制,审核通过后即可进行下载体验。
下载并登录 Cocos Dashboard。
尚未注册 Cocos 账号的用户请先前往 Cocos 官网申请注册。
单击首页 Cocos Persona 标签页下的 【申请使用】 按键即可申请内测。请尽可能完整填写申请表单,能帮助您更快取得测试资格。请注意查收审核通知邮件;审核通过后您便可直接在 Cocos Dashboard 中安装并使用 Cocos Persona。
获取 Cocos Meta SDK:获得内测资格后,请进入 Cocos 商城 搜索并下载 Persona Plug-in 。在 Cocos Creator 内安装插件后即可下载 SDK 包体。
更多测试相关说明,请前往 Cocos 官网论坛查看,或添加下方内测交流群进行咨询。
Persona 内测交流群:
还在等什么? 快来申请测试名额, 感受前所未有的创作体验吧!
点击【阅读原文】,可进入虚拟角色官网页面。