如何使用 NVIDIA Omniverse 进行工作

描述

通过使用 NVIDIA Omniverse、Audio2Face 应用和 Epic Games 的虚幻引擎,3D 多面手和视频剪辑师加快了创建逼真数字人场景的工作流程。

灵感的来源难以追寻,其导向也不可预知。

Anderson Rohr 是一名身处巴西南部的 3D 多面手和自由视频剪辑师。十几年来,他一直在创作各种内容,包括婚礼视频、电影动画等。

在看到某位创作者使用 NVIDIA Omniverse 和由 AI 驱动的 Audio2Face 应用为一个科幻人物的脸部制作动画并配上声音后,Rohr 表示迫不及待地想要使用这项技术。

最终,Rohr 使用这项技术为 1960 年代克里登斯清水复兴合唱团(Credence Clearwater Revival)的曲目《Bad Moon Rising》制作了封面,并配上了使用自己声音进行的翻唱。

使用 Omniverse、Audio2Face 应用、RTXGI、虚幻引擎创建数字人

为了制作这段视频,Rohr 使用了搭载 NVIDIA GPU 的 NVIDIA Studio 系统。

Rohr 的艺术创作流程

在制作这个项目的过程中,Rohr 首先录制了自己的歌声,并在 Audio2Face 中打开该文件。

Audio2Face 应用在 Omniverse 中通过 NVIDIA AI 技术构建而成,只需一个旁白音轨或任何其他音源,就能立即为数字人生成富有表现力的面部动画。

然后,Rohr 手动为角色的眼睛、眉毛和脖子制作动画,并对场景的照明进行调整。

Rohr 表示:“NVIDIA Omniverse 能够帮助我为数字人制作更自然的效果并加快工作流程,让我可以将更多时间用于创作。”

在使用 Omniverse 之前,某些动画的渲染需要花费长达 300 小时。同时,Rohr 还面临着软件不兼容的问题,他表示这进一步减慢了他的工作速度。

而现在,凭借 Omniverse 及用于各种软件应用的连接器,Rohr 可以实时完成渲染。

他表示:“Omniverse 在没有大幅改变工作流程的前提下远远超出我的预期,我经常使用它,我希望我所创作的作品能够启发大家在虚拟制作、游戏、电影场景或任何其他创作项目中达到实时效果。”

通过 Omniverse,NVIDIA Studio 创作者可以使用经过优化的 RTX 加速硬件和软件驱动,以及先进的 AI 和模拟功能,为艺术创作锦上添花。

在这个视频中,Rohr 详细介绍了他如何使用 NVIDIA Omniverse 进行工作。

Anderson Rohr:认识 Omniverse

重磅!NVIDIA行业微站一睹为快!内容涵盖NVIDIA主要的12大行业方案,以及NVIDIA当期重点产品资料。关注“NVIDIA英伟达企业解决方案”微信公众号,点击菜单栏进入行业微站,或长按识别下方二维码直接访问。

原文标题:Omniverse 创作者使用 AI 创建具有歌唱功能的数字人场景

文章出处:【微信公众号:NVIDIA英伟达企业解决方案】欢迎添加关注!文章转载请注明出处。

  审核编辑:彭菁
 
打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分