NVIDIA发布首个数字人设备端小语言模型，提升游戏角色的对话能力

2024 年 8 月 20 日 作者 Jason Paul 分享

2024 年 8 月 20 日，德国科隆，Gamescom——NVIDIA 宣布首款数字人小语言模型将在由西山居游戏开发的全新多人机甲游戏《解限机》(Mecha BREAK)中演示，这一功能旨在使游戏角色栩栩如生，为 GeForce RTX™ AI PC 玩家提供更具活力、更身临其境的游戏体验。

全新本地模型名为 Nemotron-4 4B Instruct，它提升了游戏角色的对话能力，使其能更直观地理解玩家并做出自然回应。

NVIDIA 消费级 AI 业务副总裁 Jason Paul 表示：“我们优化了 ACE 技术，使其能直接在 GeForce RTX AI PC 和笔记本电脑上运行，从而大幅提升开发者在《解限机》(Mecha BREAK) 等次世代游戏中部署最先进数字人的能力。”

专为角色扮演游戏设计的小语言模型

NVIDIA Nemotron-4 4B Instruct 可提供更好的角色扮演、检索增强生成 (RAG) 和功能调用能力，使游戏角色能更准确地理解玩家指令、回应玩家并执行更准确的相关操作。

NIM 优化了显存占用率，能提供更快的响应速度，为开发者利用超过1亿台GeForce RTX驱动的PC和笔记本电脑提供途径。

该模型是 NVIDIA ACE 的一部分，NVIDIA ACE是一套由生成式AI驱动的数字人技术，提供语音、智能和动画功能。Nemotron-4 4BInstruct 可作为 NVIDIA NIM™ 提供，让游戏开发者在云端或设备端部署。

首款展示 ACE NIM 微服务的游戏

由金山公司旗下西山居游戏开发的《解限机》(Mecha BREAK)首次展示了由 ACE 支持的游戏交互— 在设备端运行的 NVIDIA Nemotron-4 4B Instruct NIM。NVIDIA Audio2Face-3D NIM 以及 Whisper 模型可在设备端运行面部动画和语音识别。ElevenLabs 通过云为游戏角色提供语音支持。

在 Demo 中，NVIDIA ACE 和数字人技术使玩家能与机械师 NPC 互动，该角色可帮助玩家从各种机甲中进行选择，以满足玩家的游戏风格或团队需求，协助进行外观定制，就如何最好地准备庞大的战斗机器提供建议。

西山居游戏首席执行官郭炜炜表示：“我们很高兴在《解限机》(Mecha BREAK) 中展示 ACE NIM 的强大潜力，利用 Audio2Face 和 Nemotron-4 4B Instruct 大幅提升游戏沉浸感。”

完美世界游戏探索最新的数字人技术

NVIDIA ACE和数字人技术持续扩大游戏行业影响力。

全球游戏发行商和开发者完美世界游戏 (Perfect World Games) 正利用全新AI视觉功能推进其 NVIDIA ACE 和数字人技术Demo《传奇》(Legends)。在 Demo 中，角色 “云霓”可以使用由 ChatGPT-4o 支持的 PC 摄像头识别现实世界中的玩家和物体，为游戏体验增添一个增强现实层。这些功能将PC游戏的沉浸感和可访问性提升到全新水平。