COMPUTEX2023 | NVIDIA ACE 游戏开发版利用生成式 AI 使虚拟角色栩栩如生

描述

全新代工服务为云端及 PC 的游戏角色产生出定制化生成式 AI 模型

 

 

 

COMPUTEX2023 年 5 月 29 日NVIDIA 宣布推出全新定制 AI 模型代工服务 NVIDIA ACE 游戏开发版 (NVIDIA Avatar Cloud Engine (ACE) for Games),利用 AI 驱动的自然语言交互技术,为游戏中的非玩家角色(NPC)带来智能,从而改变游戏体验。


中间件、工具及游戏开发者可以使用 “ACE 游戏开发版 (ACE for Games)” 在他们的游戏和应用中建立和部署定制的语音、对话及动画 AI 模型。


NVIDIA 开发者与性能技术部门副总裁 John Spitzer 表示:“生成式 AI 将彻底改变玩家与游戏人物之间的互动方式,并极大地提高游戏沉浸感。基于我们在 AI 领域的专业知识,加上几十年来与游戏开发者合作的经验,NVIDIA 正率先在游戏中使用生成式 AI。”

 

率先在游戏中使用生成式 AI

 

在 NVIDIA Omniverse 的基础上,“ACE 游戏开发版 (ACE for Games)”为语音、对话和角色动画提供优化的AI基础模型,包括:

 

  • NVIDIA NeMo 大型语言模型(LLM):使用专有数据构建、自定义和部署语言模型。根据游戏故事的世界观及人物背景来定制调整 LLM,并且通过NeMo Guardrails 来保护对话不会出现产生相反效果或不安全的内容。

  • NVIDIA Riva:用于自动语音识别(ASR)及文本转语音,以启用实时语音对话。

  • NVIDIA Omniverse Audio2Face:用于配合语音音轨,实时为游戏角色创建脸部表情动画。Audio2Face 搭配用于虚幻引擎 5 的 Omniverse Connector,开发者可以直接将脸部动画添加到 MetaHuman 的角色上。

 

开发者可以整合整套 “NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)” 解决方案,或是单独使用自己需要的组件。

 

“Kairos” 让人一窥未来游戏发展的样貌

 

NVIDIA 和参与 NVIDIA Inception 计划的初创公司 Convai 合作,展示游戏开发者如何在不久之后使用 “NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)” 来构建 NPC。Convai 将 ACE 模块与他们的端到端实时虚拟人平台相集成,旨在为虚拟游戏开发尖端的对话式 AI。


在名为 Kairos 的演示中,玩家与拉面店老板 Jin 进行互动。Jin 虽然只是一个 NPC,却能在生成式 AI 的帮助下配合叙事背景,逼真回答自然语言的问题。欢迎观看这个由 Unreal Engine 5 使用最新光线追踪功能和 NVIDIA DLSS 渲染出的演示内容。


Convai 创始人兼首席执行官 Purnendu Mukherjee 表示:“Convai 通过使用 ‘NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)’,让我们的工具可以达到所需的延迟和绝佳要求,这样每个开发者便能以低成本的方式使用 AI 打造 NPC。

 

在本地或云部署 NVIDIA ACE 游戏模型

 

支持 “NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)” 的神经网络针对多项功能进行优化,在规模、性能和质量方面进行各种取舍。“ACE 游戏开发版 (ACE for Games)” 代工服务将协助开发者微调游戏模型,然后通过 NVIDIA DGX Cloud,GeForce RTX PC 或现场加以部署,以实时进行推理。


游戏中沉浸式互动性的交互对延迟有着极为严苛的要求,因此这些模型的延迟性能均调整到最佳状态。

 

生成式 AI 将改变游戏体验

 

游戏开发者与初创公司已在其工作流上使用 NVIDIA 生成式 AI 技术。

 

  1. 欧洲知名游戏开发者之一的 GSC Game World,将在即将推出的《潜行者 2:切尔诺贝利之心》(S.T.A.L.K.E.R. 2:Heart of Chornobyl)中采用 Audio2Face。

  2. 独立游戏开发者 Fallen Leaf 用 Audio2Face 来制作《索利斯堡》(FORT SOLIS)中角色的脸部动画,《索利斯堡》(FORT SOLIS)是一款以火星为背景的第三人称科幻惊悚动作游戏。

  3. 使用 AI 来制作虚拟角色的 Charisma.ai,通过 Audio2Face 来制作对话引擎中的动画。

 

欢迎了解更多使用 NVIDIA ACE 在 NVIDIA Omniverse 上构建的内容,以及 COMPUTEX 其他最新技术发展。

 

       点击 “阅读原文”,或扫描下方海报二维码观看 NVIDIA 创始人兼 CEO 黄仁勋为 COMPUTEX 2023 带来的主题演讲直播回放,了解 AI、图形及其他领域的最新进展!  

 


原文标题:COMPUTEX2023 | NVIDIA ACE 游戏开发版利用生成式 AI 使虚拟角色栩栩如生

文章出处:【微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。


打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分