NVIDIA发布首个数字人设备端小语言模型,提升游戏角色的对话能力

发布时间:2024-08-21  

2024 年 8 月 20 日 作者 Jason Paul 分享

2024 年 8 月 20 日,德国科隆,Gamescom——NVIDIA 宣布首款数字人小语言模型将在由西山居游戏开发的全新多人机甲游戏《解限机》(Mecha BREAK)中演示,这一功能旨在使游戏角色栩栩如生,为 GeForce RTX™ AI PC 玩家提供更具活力、更身临其境的游戏体验。

全新本地模型名为 Nemotron-4 4B Instruct,它提升了游戏角色的对话能力,使其能更直观地理解玩家并做出自然回应。

NVIDIA 消费级 AI 业务副总裁 Jason Paul 表示:“我们优化了 ACE 技术,使其能直接在 GeForce RTX AI PC 和笔记本电脑上运行,从而大幅提升开发者在《解限机》(Mecha BREAK) 等次世代游戏中部署最先进数字人的能力。”

专为角色扮演游戏设计的小语言模型

NVIDIA Nemotron-4 4B Instruct 可提供更好的角色扮演、检索增强生成 (RAG) 和功能调用能力,使游戏角色能更准确地理解玩家指令、回应玩家并执行更准确的相关操作。

NIM 优化了显存占用率,能提供更快的响应速度,为开发者利用超过1亿台GeForce RTX驱动的PC和笔记本电脑提供途径。

该模型是 NVIDIA ACE 的一部分,NVIDIA ACE是一套由生成式AI驱动的数字人技术,提供语音、智能和动画功能。Nemotron-4 4BInstruct 可作为 NVIDIA NIM™ 提供,让游戏开发者在云端或设备端部署。

首款展示 ACE NIM 微服务的游戏

由金山公司旗下西山居游戏开发的《解限机》(Mecha BREAK)首次展示了由 ACE 支持的游戏交互— 在设备端运行的 NVIDIA Nemotron-4 4B Instruct NIM。NVIDIA Audio2Face-3D NIM 以及 Whisper 模型可在设备端运行面部动画和语音识别。ElevenLabs 通过云为游戏角色提供语音支持。

在 Demo 中,NVIDIA ACE 和数字人技术使玩家能与机械师 NPC 互动,该角色可帮助玩家从各种机甲中进行选择,以满足玩家的游戏风格或团队需求,协助进行外观定制,就如何最好地准备庞大的战斗机器提供建议。

西山居游戏首席执行官郭炜炜表示:“我们很高兴在《解限机》(Mecha BREAK) 中展示 ACE NIM 的强大潜力,利用 Audio2Face 和 Nemotron-4 4B Instruct 大幅提升游戏沉浸感。”

完美世界游戏探索最新的数字人技术

NVIDIA ACE和数字人技术持续扩大游戏行业影响力。

全球游戏发行商和开发者完美世界游戏 (Perfect World Games) 正利用全新AI视觉功能推进其 NVIDIA ACE 和数字人技术Demo《传奇》(Legends)。在 Demo 中,角色 “云霓”可以使用由 ChatGPT-4o 支持的 PC 摄像头识别现实世界中的玩家和物体,为游戏体验增添一个增强现实层。这些功能将PC游戏的沉浸感和可访问性提升到全新水平。

文章来源于:21IC    原文链接
本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。

我们与500+贴片厂合作,完美满足客户的定制需求。为品牌提供定制化的推广方案、专属产品特色页,多渠道推广,SEM/SEO精准营销以及与公众号的联合推广...详细>>

利用葫芦芯平台的卓越技术服务和新产品推广能力,原厂代理能轻松打入消费物联网(IOT)、信息与通信(ICT)、汽车及新能源汽车、工业自动化及工业物联网、装备及功率电子...详细>>

充分利用其强大的电子元器件采购流量,创新性地为这些物料提供了一个全新的窗口。我们的高效数字营销技术,不仅可以助你轻松识别与连接到需求方,更能够极大地提高“闲置物料”的处理能力,通过葫芦芯平台...详细>>

我们的目标很明确:构建一个全方位的半导体产业生态系统。成为一家全球领先的半导体互联网生态公司。目前,我们已成功打造了智能汽车、智能家居、大健康医疗、机器人和材料等五大生态领域。更为重要的是...详细>>

我们深知加工与定制类服务商的价值和重要性,因此,我们倾力为您提供最顶尖的营销资源。在我们的平台上,您可以直接接触到100万的研发工程师和采购工程师,以及10万的活跃客户群体...详细>>

凭借我们强大的专业流量和尖端的互联网数字营销技术,我们承诺为原厂提供免费的产品资料推广服务。无论是最新的资讯、技术动态还是创新产品,都可以通过我们的平台迅速传达给目标客户...详细>>

我们不止于将线索转化为潜在客户。葫芦芯平台致力于形成业务闭环,从引流、宣传到最终销售,全程跟进,确保每一个potential lead都得到妥善处理,从而大幅提高转化率。不仅如此...详细>>