COMPUTEX—2024年6月2日—NVIDIA宣布全面推出NVIDIA ACE生成式AI微服务,以加速新一代数字人的发展,并将在平台上推出全新的生成式AI突破。客户服务、游戏和医疗保健领域的公司率先采用ACE技术,以简化在客户服务、远程医疗、游戏和娱乐领域创建、动画化并操作栩栩如生的数字人的过程。
NVIDIA ACE数字人生成式AI套件现已全面推出,包括以下内容:
全新推出的技术包括:
NVIDIA创始人兼首席执行官黄仁勋表示:“数字人将为各行各业带来革命性变革。NVIDIA ACE为我们的开发者生态提供多模态大语言模型和神经图形领域的突破,使我们更接近意图驱动的计算未来,即与计算机的交互将像与人类的互动一样自然。”
数字人进驻一亿台RTX AI PC
NVIDIA已将ACE作为NIM微服务提供给开发者在数据中心运行。现在,NVIDIA正在打造ACE PC NIM微服务,可以部署在装机量达到一亿台的RTX AI PC和笔记本电脑上。
这包括NVIDIA的首个小语言模型(SLM) -- NVIDIA Nemotron-3 4.5B,该模型专门用于在终端设备上运行,具有与在云端运行的大语言模型(LLMs)相似的精度和准确性。Nemotron-3 4.5B 小语言模型(SLM)现已进入抢先体验阶段。NVIDIA Audio2Face和NVIDIA Riva ASR的设备端模型也将很快推出抢先体验版。
全新的NVIDIA AI Inference Manager (AIM)应用开发工具包简化了ACE在PC上的部署过程。它以统一格式为PC预先配置必要的AI模型、引擎和依赖包,同时在PC和云端之间完美调度AI推理操作。
与Inworld AI合作开发的最新版Covert Protocol技术Demo在COMPUTEX演示。通过在 GeForce RTX PC上本地运行Audio2Face和Riva ASR,该演示使玩家能够通过对话来互动,并影响数字人非玩家角色(NPC)的行为,以完成任务。
最新ACE技术扩展数字人生态规模
NVIDIA正与Aww Inc.、戴尔科技、Gumption、Hippocratic AI、英业达、掌趣科技、完美世界游戏、Reality Arts、甲尚科技、ServiceNow、Soulbotix、数字栩生和UneeQ等公司的开发者合作,利用ACE开发各种应用。
Aww Inc. — 位于日本的领先虚拟人技术开发公司Aww Inc.在2018年推出了首个虚拟名星Imma。此后,Imma在50多个国家成为主要全球品牌的代言人。现在,Aww Inc.计划利用ACE Audio2Face微服务进行实时动画制作,为用户提供更好的互动交流体验。
完美世界游戏 — 游戏开发者和发行商完美世界游戏公司在其全新的神话荒野风格的Legends技术演示Demo中采用了ACE。玩家可以与逼真的 AI NPC 用英语和普通话完全互动。利用NVIDIA Audio2Face NIM,可实时生成与角色声音响应相符的逼真的面部动画。
掌趣科技 — 掌趣科技和悠米互娱联合推出的 Code Z 是一款 AI 游戏创作平台,能够利用 AI 技术减少创作开放世界游戏所需的资源,让个人和小型团队也能制作大型游戏。Code Z 基于“Faith Framework”AI 机器学习训练系统,让创作者无需编写任何代码,即可快速生成 3D 游戏场景和数字素材。此外,它还能让创作者创建和训练高度个性化的 AI 数字人,实现动态互动和沉浸式体验。Code Z 采用了 Audio2Face 和 DLSS,使 AI 数字人能够在与玩家实时对话时生成丰富的表情,并实现实时口型同步。
英业达 — 正在大力投资AI领域的科技公司英业达使用NVIDIA Audio2Face NIM增强其VRSTATE平台的医疗保健AI客户端。集成NVIDIA Audio2Face NIM可以提供更具吸引力和安抚性的虚拟咨询体验。英业达将在COMPUTEX期间展示一款可以帮助患者获取健康信息的AI客户端。
ServiceNow — 用于协助企业业务转型的AI平台ServiceNow,近期在其Now Assist Gen AI Experience中展示ACE NIM的生成式AI服务客户端演示,突显数字化身在零售、旅游等行业提升客户和员工互动的潜力。
戴尔科技 — 在上个月的Dell Technologies World上推出用于制作数字助手的最新解决方案Dell Generative AI Solutions。该解决方案使企业能够利用智能数字助理,通过自然对话的形式与零售、医疗保健和客户服务等各行各业的客户进行互动。
NVIDIA在COMPUTEX 2024为数字人初创企业喝彩
NVIDIA艺术团队使用基于ACE的生成式AI工具,包括Synthesia和Hour One,制作了一个“digital Jensen”化身,该化身由文字生成的视频制作而成。这款多语言化身以他独特的声音和风格为特色,使用ElevenLabs的专有AI语音技术生成普通话和英语的声音。NVIDIA还与专注于AI语音技术的NVIDIA Inception成员Voicemod合作,为NVIDIA创始人兼首席执行官黄仁勋主题演讲的谢幕曲进行创作。
ACE NIM现已推出
用于服务器部署的NVIDIA ACE NIM微服务(包括Riva和Audio2Face)现已投入生产,可添加NVIDIA AI Enterprise应用,供开发者获得企业级的支持服务。现可点击注册以获取在RTX AI PC上运行的ACE NIM微服务的抢先体验版。
玩了三年Phigros,我彻底爱上了这款音乐节奏游戏作为一个玩了三年Phigros的老玩家,今天想和大家好好聊聊这款让我痴迷的音乐节奏游戏。如果你是个音游爱好者,那它绝对不容错过。先说玩法,Phigros最独特的就是它的谱面非定型。一般音游判定线固定,玩久了就会觉得单调。但Phigros不一样,它的判定线能在画面里上下左右移动、旋转,甚至消失。这就像你在玩游戏的时候,整个游戏规则都在不断变化,特别刺激。在玩《Spasmodic》这首歌时,后期判定线会快速旋转,音符也跟着疯狂下落,那种手忙脚乱又让人兴奋的感觉,真的太爽了。而且游戏里有4种音符,Tap、双押/多押、Hold、Flick ,每种操作都不同,组合起来就特别考验玩家的反应和手速 ,玩起来特别上头。游戏里的音乐那叫一个丰富,电子、流行、古典,各种风格都有。像《Chronostasis》这种电子风的曲子,节奏强烈,玩的时候感觉自己像在未来世界穿梭;《Stasis》这种古典与电子结合的,又能让你感受到不一样的音乐魅力。而且每首曲子都有独特的节奏,对应不同难度的谱面,不管你是新手还是大神,都能找到适合自己的挑战。我刚玩的时候,就被《Another Me》吸引了,那旋律和节奏,让我一下子就沉浸在游戏里,玩了一遍又一遍。从视觉体验来说,Phigros做得也相当出色。游戏里的插画都是请知名插画师画的,风格多变,和音乐搭配得恰到好处。比如《Clock Paradox》这首歌的背景,是一个充满科技感的时钟世界,随着音乐节奏,时钟指针跳动,整个画面特别有氛围感。还有魔王曲,不仅难度高,曲绘和动画更是做得超精致,像《Retribution ~ Cycle of Redemption ~》,演奏时的特效和画面,真的会让你感受到那种魔王降临的压迫感,打完一曲特别有成就感。再讲讲游戏的难度设计,真的是循序渐进又充满挑战。新手可以从简单的曲子开始,慢慢熟悉玩法和节奏。等你觉得自己有进步了,就可以挑战更难的谱面。而且每个难度都有不同的评级,想要拿到高评级,就得不断练习,提升自己的操作水平。我记得为了在《望影の方舟Six Gravity》这首歌拿到S评级,我练习了好几个星期,那种不断挑战自我、突破极限的感觉,是很多游戏给不了的。Phigros完全免费,没有内购收费物品,它是靠售卖周边和玩家捐赠来维持运营的,真的是一款用爱发电的良心游戏。虽然它也有一些小缺点,像有时候判定会有点迷,偶尔还会出现卡顿的情况,但这些都不影响它成为一款优秀的音游。如果你还没玩过Phigros,强烈推荐你去试试,相信你也会爱上这款独特的音乐节奏游戏 。