NVIDIA发布首个数字人设备端小语言模型 nvidia发展史
首款基于最新 Nemotron-4 4B NIM的游戏公开了,来自西山居游戏的《解限机》(Mecha BREAK)
2024年8月20日,德国科隆,Gamescom——NVIDIA公布首款数字人小语言模型将在由西山居游戏开发的最新多人机甲游戏《解限机》(Mecha BREAK)中示范,这一功能旨在使游戏人物栩栩如生,为GeForce RTX™ AI PC玩家提供更具活力、更身临其境的游戏尝试。
最新本地模型名为 Nemotron-4 4B Instruct,它提高了游戏人物的对话能力,使其能更直观地领会玩家并做出天然答复。
NVIDIA消费级AI业务副总裁Jason Paul表示:“大家优化了ACE技术,使其能直接在GeForce RTX AI PC和笔记本PC上运行,从而大幅提高开发者在《解限机》(Mecha BREAK)等次世代游戏中部署最先进数字人的能力。”
专为人物扮演游戏设计的小语言模型
NVIDIA Nemotron-4 4B Instruct 可提供更好的人物扮演、检索增强生成(RAG)和功能调用能力,使游戏人物能更准确地领会玩家指令、答复玩家并执行更准确的相关操作。
NIM 优化了显存占用率,能提供更快的响应速度,为开发者利用超过1亿台GeForce RTX驱动的PC和笔记本PC提供途径。
该模型是NVIDIA ACE的一部分,NVIDIA ACE是一套由生成式AI驱动的数字人技术,提供语音、智能和动画功能。Nemotron-4 4BInstruct可作为NVIDIA NIM™提供,让游戏开发者在云端或设备端部署。
首款展示 ACE NIM 微服务的游戏
由金山企业旗下西山居游戏开发的《解限机》(Mecha BREAK)第一次展示了由 ACE 支持的游戏交互-- 在设备端运行的 NVIDIA Nemotron-4 4B Instruct NIM。NVIDIA Audio2Face-3D NIM以及Whisper模型可在设备端运行面部动画和语音识别。ElevenLabs通过云为游戏人物提供语音支持。
在Demo中,NVIDIA ACE 和数字人技术使玩家能和机械师NPC互动,该人物可帮助玩家从各种机甲中进行选择,以满足玩家的游戏风格或团队需求,协助进行外观定制,就怎样最好地准备庞大的战斗机器提供提议。
西山居游戏首席执行官郭炜炜表示:“大家很高兴在《解限机》(Mecha BREAK)中展示ACE NIM的强大潜力,利用Audio2Face和Nemotron-4 4B Instruct大幅提高游戏沉浸感。”
最佳全球游戏寻觅新鲜的数字人技术
NVIDIA ACE和数字人技术持续扩大游戏行业影响力。
全球游戏发行商和开发者最佳全球游戏(Perfect World Games)正利用最新AI视觉功能推进其NVIDIA ACE 和数字人技术Demo《传奇》(Legends)。在Demo中,人物 “云霓”可以运用由ChatGPT-4o支持的PC摄像头识别现实全球中的玩家和物体,为游戏尝试增添壹个增强现实层。这些功能将PC游戏的沉浸感和可访问性提高到最新水平。
了解有关 NVIDIA ACE的更多信息,下载 NIM,开始构建由生成式AI驱动的游戏人物。
关于NVIDIA
NVIDIA(NASDAQ: NVDA)是加速计算领域的全球领导者。
本篇文章的创作者为七彩光，转载请注明出处
决定因素词：
- 收藏：