中间件、工具及游戏开发者可以使用“ACE游戏开发版(ACE forGames)”在他们的游戏和应用中建立和部署定制的语音、对话及动画AI模型。
NVIDIA开发者与性能技术部门副总裁John Spitzer表示:“生成式AI将彻底改变玩家与游戏人物之间的互动方式,并极大地提高游戏沉浸感。基于我们在AI领域的专业知识,加上几十年来与游戏开发者合作的经验,NVIDIA正率先在游戏中使用生成式AI。”
率先在游戏中使用生成式AI
在NVIDIAOmniverse™的基础上,“ACE游戏开发版(ACE forGames)”为语音、对话和角色动画提供优化的AI基础模型,包括:
· NVIDIA NeMo™ 大型语言模型(LLM) :使用专有数据构建、自定义和部署语言模型。 根据游戏故事的世界观及人物背景来定制调整 LLM,并且通过NeMo Guardrails 来保护对话不会出现产生相反效果或不安全的内容。
· NVIDIA Riva :用于自动语音识别(ASR)及文本转语音,以启用实时语音对话。
· NVIDIA Omniverse Audio2Face : 用于配合语音音轨,实时为游戏角色创建脸部表情动画。 Audio2Face 搭配用于虚幻引擎 5 的 Omniverse Connector,开发者可以直接将脸部动画添加到 MetaHuman 的角色上。
开发者可以整合整套“NVIDIAACE 游戏开发版(NVIDIA ACE forGames)”解决方案,或是单独使用自己需要的组件。
“Kairos”让人一窥未来游戏发展的样貌
NVIDIA 和参与NVIDIAInception计划的初创公司Convai合作,展示游戏开发者如何在不久之后使用 “NVIDIAACE 游戏开发版(NVIDIA ACE forGames)” 来构建NPC。Convai将ACE模块与他们的端到端实时虚拟人平台相集成,旨在为虚拟游戏开发尖端的对话式AI。
在名为Kairos的演示中,玩家与拉面店老板Jin 进行互动。Jin 虽然只是一个NPC,却能在生成式AI的帮助下配合叙事背景,逼真回答自然语言的问题。欢迎观看这个由 UnrealEngine 5 使用最新光线追踪功能和NVIDIADLSS 渲染出的演示内容。
Convai 创始人兼首席执行官PurnenduMukherjee 表示:“Convai通过使用 ‘NVIDIAACE 游戏开发版(NVIDIA ACE forGames)’,让我们的工具可以达到所需的延迟和绝佳要求。这样每个开发者便能以低成本的方式使用AI打造NPC。”
在本地或云部署NVIDIA ACE 游戏模型
支持“NVIDIAACE 游戏开发版(NVIDIA ACE forGames)” 的神经网络针对多项功能进行优化,在规模、性能和质量方面进行各种取舍。“ACE 游戏开发版(ACE forGames)”代工服务将协助开发者微调游戏模型,然后通过NVIDIADGX™ Cloud,GeForceRTX™ PC 或现场加以部署,以实时进行推理。
游戏中沉浸式互动性的交互对延迟有着极为严苛的要求,因此这些模型的延迟性能均调整到最佳状态。
生成式AI将改变游戏体验
游戏开发者与初创公司已在其工作流上使用NVIDIA生成式AI技术。
· 欧洲知名游戏开发者之一的 GSC Game World,将在即将推出的《潜行者2:切尔诺贝利之心》(S.T.A.L.K.E.R. 2: Heart of Chornobyl)中采用Audio2Face。
· 独立游戏开发者 Fallen Leaf 用 Audio2Face 来制作《索利斯堡》(FORT SOLIS)中角色的脸部动画,《索利斯堡》(FORT SOLIS)是一款以火星为背景的第三人称科幻惊悚动作游戏。
· 使用AI来制作虚拟角色的 Charisma.ai,通过Audio2Face来制作对话引擎中的动画。
欢迎了解更多使用NVIDIA ACE在NVIDIA Omniverse上构建的内容,以及台北国际电脑展其他最新技术发展。
(8191903)
相关教程
2023-05-30
2023-05-29
2023-05-29
2023-05-01
2023-05-02
2023-05-28
2023-05-08
2023-05-22
2024-04-21
2023-12-12
2024-11-18
2024-11-18
2024-11-16
2024-11-16
2024-11-15
2024-11-14