Convai 使用新的 NVIDIA ACE 技术，将通过生成式 AI 的进一步进步来提升 AI NPC。 他们最初的演示以栩栩如生的拉面店和人物 Jin 和 Kai 为特色，令人印象深刻。 现在，Convai 正在揭示人工智能驱动的角色技术的新阶段。 这项创新使角色能够在游戏中与玩家进行真实的对话，从而增强玩家互动。
随着对话、感知和动作生成方面增强功能的推出，Convai 在创造沉浸式游戏体验方面取得了重大进展。 这些发展预示着玩家与游戏环境和角色互动方式的变革性飞跃，标志着 AI NPC 技术的显着进步。
CES 2024 公告：最有趣的产品
Convai 通过 NVIDIA ACE 迎接 AI NPC
NVIDIA ACE 代表了游戏技术的突破性一步。 想象这样一个场景：玩家可以与游戏中的非玩家角色 (NPC) 进行智能、无脚本且动态的对话。 这些 NPC 将拥有不断发展的个性、准确的面部动画以及用玩家的母语进行互动的能力。 得益于生成式人工智能技术，这一概念正在成为现实。
在 COMPUTEX 2023 上，NVIDIA 通过适用于游戏的 NVIDIA Avatar Cloud Engine (ACE) 宣布了 NPC 的未来。 NVIDIA ACE for Games 是一项定制的 AI 模型铸造服务，旨在通过将非可玩角色与 AI 驱动的自然语言交互相结合来彻底改变游戏。 这一发展有望改变游戏体验，使与游戏角色的互动更加真实和身临其境。
生成式人工智能有可能彻底改变玩家与游戏角色的互动性，并显着提高游戏的沉浸感。 凭借我们在 AI 方面的专业知识以及数十年与游戏开发者合作的经验，NVIDIA 正在引领生成式 AI 在游戏中的使用。
-John Spitzer，NVIDIA 开发人员和性能技术副总裁
面向开发者的 NVIDIA ACE
NVIDIA ACE for Games 正在为中间件、工具和游戏开发人员整合先进的 AI 功能铺平道路。 通过该平台，他们可以在其软件和游戏中构建和部署定制的语音、对话和动画人工智能模型，并可跨云和 PC 环境访问。
NVIDIA ACE for Games 中集成的优化 AI 基础模型包括：
- NVIDIA NeMo：这提供了基础语言模型以及模型定制工具，使开发人员能够进一步完善模型以适应他们的游戏角色。 这种可定制的大语言模型 (LLM) 有助于创建独特的角色背景故事和个性，专为开发人员的游戏世界量身定制。 NeMo Guardrails 还允许开发人员为 NPC 设置可编程规则，确保玩家交互与场景环境一致。
- 英伟达 Riva：它扩展了自动语音识别 (ASR) 和文本转语音 (TTS) 功能，促进与 NVIDIA NeMo 集成的实时语音对话。 这有利于玩家和游戏角色之间的无缝交互。
- NVIDIA Omniverse Audio2Face：Audio2Face 是一项出色的功能，它仅通过音频源即可为游戏角色生成富有表现力的面部动画。 借助虚幻引擎 5 的 Omniverse 连接器，开发人员可以直接向 MetaHuman 角色添加面部动画，从而显着增强游戏中的真实感和表现力。
NVIDIA ACE for Games 的这些组件代表了游戏开发的重大飞跃，提供了用于创建更真实和交互式游戏体验的工具。 该工具套件强调了 NVIDIA 通过创新 AI 应用推动游戏行业发展的承诺。
NVIDIA ACE 是如何工作的？
NVIDIA ACE for Games 的运作方式展示了其卓越的功能，并让我们得以一睹游戏中 NPC 开发的未来。 为了说明这一点，NVIDIA 与 Convai 合作，Convai 是 NVIDIA Inception 初创公司，致力于在游戏和虚拟世界中创建和部署 AI 角色。 这种合作伙伴关系有助于优化 ACE 模块并将其集成到 Convai 平台中。
Kairos 演示是 NVIDIA ACE for Games 的展示，它利用了各种 NVIDIA 技术：
借助 NVIDIA ACE for Games，Convai 的工具可以实现所需的延迟和质量，从而以经济高效的方式为几乎所有开发人员提供 AI 不可玩角色。
——Purnendu Mukherjee，Convai 创始人兼首席执行官
NVIDIA Riva 用于语音转文本和文本转语音功能，NVIDIA NeMo 为对话式 AI 提供支持，Audio2Face 用于基于语音输入的 AI 驱动的面部动画。 这些模块无缝集成到 Convai 服务平台中，然后与虚幻引擎 5 和 MetaHuman 集成，最终创建了拉面店场景中的角色 Jin。
该场景与 Jin 一起由 NVIDIA Lightspeed Studios 的美术团队精心制作，并在虚幻引擎 5 中完全渲染。渲染利用 NVIDIA RTX 直接照明 (RTXDI) 进行光线追踪照明和阴影，并使用 DLSS 来优化帧速率和图像质量。
Jin 和他的拉面店的实时演示不仅展示了 GeForce RTX 显卡、NVIDIA RTX 技术和 NVIDIA ACE for Games 的功能，还展示了利用这一突破性技术的游戏的未来潜力。
