Convai 使用新的 NVIDIA ACE 技术,将通过生成式 AI 的进一步进步来提升 AI NPC。 他们最初的演示以栩栩如生的拉面店和人物 Jin 和 Kai 为特色,令人印象深刻。 现在,Convai 正在揭示人工智能驱动的角色技术的新阶段。 这项创新使角色能够在游戏中与玩家进行真实的对话,从而增强玩家互动。
随着对话、感知和动作生成方面增强功能的推出,Convai 在创造沉浸式游戏体验方面取得了重大进展。 这些发展预示着玩家与游戏环境和角色互动方式的变革性飞跃,标志着 AI NPC 技术的显着进步。
CES 2024 公告:最有趣的产品
Convai 通过 NVIDIA ACE 迎接 AI NPC
NVIDIA ACE 代表了游戏技术的突破性一步。 想象这样一个场景:玩家可以与游戏中的非玩家角色 (NPC) 进行智能、无脚本且动态的对话。 这些 NPC 将拥有不断发展的个性、准确的面部动画以及用玩家的母语进行互动的能力。 得益于生成式人工智能技术,这一概念正在成为现实。
在 COMPUTEX 2023 上,NVIDIA 通过适用于游戏的 NVIDIA Avatar Cloud Engine (ACE) 宣布了 NPC 的未来。 NVIDIA ACE for Games 是一项定制的 AI 模型铸造服务,旨在通过将非可玩角色与 AI 驱动的自然语言交互相结合来彻底改变游戏。 这一发展有望改变游戏体验,使与游戏角色的互动更加真实和身临其境。
生成式人工智能有可能彻底改变玩家与游戏角色的互动性,并显着提高游戏的沉浸感。 凭借我们在 AI 方面的专业知识以及数十年与游戏开发者合作的经验,NVIDIA 正在引领生成式 AI 在游戏中的使用。
-John Spitzer,NVIDIA 开发人员和性能技术副总裁
面向开发者的 NVIDIA ACE
NVIDIA ACE for Games 正在为中间件、工具和游戏开发人员整合先进的 AI 功能铺平道路。 通过该平台,他们可以在其软件和游戏中构建和部署定制的语音、对话和动画人工智能模型,并可跨云和 PC 环境访问。
NVIDIA ACE for Games 中集成的优化 AI 基础模型包括:
- NVIDIA NeMo:这提供了基础语言模型以及模型定制工具,使开发人员能够进一步完善模型以适应他们的游戏角色。 这种可定制的大语言模型 (LLM) 有助于创建独特的角色背景故事和个性,专为开发人员的游戏世界量身定制。 NeMo Guardrails 还允许开发人员为 NPC 设置可编程规则,确保玩家交互与场景环境一致。
- 英伟达 Riva:它扩展了自动语音识别 (ASR) 和文本转语音 (TTS) 功能,促进与 NVIDIA NeMo 集成的实时语音对话。 这有利于玩家和游戏角色之间的无缝交互。
- NVIDIA Omniverse Audio2Face:Audio2Face 是一项出色的功能,它仅通过音频源即可为游戏角色生成富有表现力的面部动画。 借助虚幻引擎 5 的 Omniverse 连接器,开发人员可以直接向 MetaHuman 角色添加面部动画,从而显着增强游戏中的真实感和表现力。
NVIDIA ACE for Games 的这些组件代表了游戏开发的重大飞跃,提供了用于创建更真实和交互式游戏体验的工具。 该工具套件强调了 NVIDIA 通过创新 AI 应用推动游戏行业发展的承诺。
NVIDIA ACE 是如何工作的?
NVIDIA ACE for Games 的运作方式展示了其卓越的功能,并让我们得以一睹游戏中 NPC 开发的未来。 为了说明这一点,NVIDIA 与 Convai 合作,Convai 是 NVIDIA Inception 初创公司,致力于在游戏和虚拟世界中创建和部署 AI 角色。 这种合作伙伴关系有助于优化 ACE 模块并将其集成到 Convai 平台中。
Kairos 演示是 NVIDIA ACE for Games 的展示,它利用了各种 NVIDIA 技术:
借助 NVIDIA ACE for Games,Convai 的工具可以实现所需的延迟和质量,从而以经济高效的方式为几乎所有开发人员提供 AI 不可玩角色。
——Purnendu Mukherjee,Convai 创始人兼首席执行官
NVIDIA Riva 用于语音转文本和文本转语音功能,NVIDIA NeMo 为对话式 AI 提供支持,Audio2Face 用于基于语音输入的 AI 驱动的面部动画。 这些模块无缝集成到 Convai 服务平台中,然后与虚幻引擎 5 和 MetaHuman 集成,最终创建了拉面店场景中的角色 Jin。
该场景与 Jin 一起由 NVIDIA Lightspeed Studios 的美术团队精心制作,并在虚幻引擎 5 中完全渲染。渲染利用 NVIDIA RTX 直接照明 (RTXDI) 进行光线追踪照明和阴影,并使用 DLSS 来优化帧速率和图像质量。
Jin 和他的拉面店的实时演示不仅展示了 GeForce RTX 显卡、NVIDIA RTX 技术和 NVIDIA ACE for Games 的功能,还展示了利用这一突破性技术的游戏的未来潜力。