NVIDIA發布數字人微服務 為制作生成式AI數字化身鋪平未來之路
【TechWeb】6月3日消息，NVIDIA宣布全面推出NVIDIA ACE生成式AI微服務，以加速新一代數字人的發展，并將在平臺上推出全新的生成式AI突破。客戶服務、游戲和醫療保健領域的公司率先采用ACE技術，以簡化在客戶服務、遠程醫療、游戲和娛樂領域創建、動畫化并操作栩栩如生的數字人的過程。
NVIDIA ACE數字人生成式AI套件現已全面推出，包括以下內容：
● NVIDIA Riva ASR，TTS和NMT — 用于自動語音識別、文本到語音轉換和翻譯。
● NVIDIA Nemotron LLM — 用于語言理解以及根據上下文生成回復。
● NVIDIA Audio2Face — 根據音軌制作栩栩如生的面部動畫。
● NVIDIA Omniverse RTX — 用于實時路徑追蹤以制作逼真的皮膚和毛發。
全新推出的技術包括：
● NVIDIA Audio2Gesture — 用于根據音軌生成肢體手勢，即將推出。
● NVIDIA Nemotron-3 4.5B — 一種全新的小語言模型 (SLM)，專為低延遲、本地端RTX AI PC推理而設計。
NVIDIA創始人兼首席執行官黃仁勛表示：“數字人將為各行各業帶來革命性變革。NVIDIA ACE為我們的開發者生態提供多模態大語言模型和神經圖形領域的突破，使我們更接近意圖驅動的計算未來，即與計算機的交互將像與人類的互動一樣自然。”
數字人進駐一億臺RTX AI PC
NVIDIA已將ACE作為NIM微服務提供給開發者在數據中心運行。現在，NVIDIA正在打造ACE PC NIM微服務，可以部署在裝機量達到一億臺的RTX AI PC和筆記本電腦上。
這包括NVIDIA的首個小語言模型(SLM) -- NVIDIA Nemotron-3 4.5B，該模型專門用于在終端設備上運行，具有與在云端運行的大語言模型(LLMs)相似的精度和準確性。Nemotron-3 4.5B 小語言模型(SLM)現已進入搶先體驗階段。NVIDIA Audio2Face和NVIDIA Riva ASR的設備端模型也將很快推出搶先體驗版。
全新的NVIDIA AI Inference Manager (AIM)應用開發工具包簡化了ACE在PC上的部署過程。它以統一格式為PC預先配置必要的AI模型、引擎和依賴包，同時在PC和云端之間完美調度AI推理操作。
與Inworld AI合作開發的最新版Covert Protocol技術Demo在COMPUTEX演示。通過在 GeForce RTX PC上本地運行Audio2Face和Riva ASR，該演示使玩家能夠通過對話來互動，并影響數字人非玩家角色(NPC)的行為，以完成任務。
最新ACE技術擴展數字人生態規模
NVIDIA正與Aww Inc.、戴爾科技、Gumption、Hippocratic AI、英業達、掌趣科技、完美世界游戲、Reality Arts、甲尚科技、ServiceNow、Soulbotix、數字栩生和UneeQ等公司的開發者合作，利用ACE開發各種應用。
Aww Inc. — 位于日本的領先虛擬人技術開發公司Aww Inc.在2018年推出了首個虛擬名星Imma。此后，Imma在50多個國家成為主要全球品牌的代言人。現在，Aww Inc.計劃利用ACE Audio2Face微服務進行實時動畫制作，為用戶提供更好的互動交流體驗。
完美世界游戲 — 游戲開發者和發行商完美世界游戲公司在其全新的神話荒野風格的Legends技術演示Demo中采用了ACE。玩家可以與逼真的 AI NPC 用英語和普通話完全互動。利用NVIDIA Audio2Face NIM，可實時生成與角色聲音響應相符的逼真的面部動畫。
掌趣科技 — 掌趣科技和悠米互娛聯合推出的 Code Z 是一款 AI 游戲創作平臺，能夠利用 AI 技術減少創作開放世界游戲所需的資源，讓個人和小型團隊也能制作大型游戲。Code Z 基于“Faith Framework”AI 機器學習訓練系統，讓創作者無需編寫任何代碼，即可快速生成 3D 游戲場景和數字素材。此外，它還能讓創作者創建和訓練高度個性化的 AI 數字人，實現動態互動和沉浸式體驗。Code Z 采用了 Audio2Face 和 DLSS，使 AI 數字人能夠在與玩家實時對話時生成豐富的表情，并實現實時口型同步。
英業達 — 正在大力投資AI領域的科技公司英業達使用NVIDIA Audio2Face NIM增強其VRSTATE平臺的醫療保健AI客戶端。集成NVIDIA Audio2Face NIM可以提供更具吸引力和安撫性的虛擬咨詢體驗。英業達將在COMPUTEX期間展示一款可以幫助患者獲取健康信息的AI客戶端。
ServiceNow — 用于協助企業業務轉型的AI平臺ServiceNow，近期在其Now Assist Gen AI Experience中展示ACE NIM的生成式AI服務客戶端演示，突顯數字化身在零售、旅游等行業提升客戶和員工互動的潛力。
戴爾科技 — 在上個月的Dell Technologies World上推出用于制作數字助手的最新解決方案Dell Generative AI Solutions。該解決方案使企業能夠利用智能數字助理，通過自然對話的形式與零售、醫療保健和客戶服務等各行各業的客戶進行互動。
NVIDIA在COMPUTEX 2024為數字人初創企業喝彩
NVIDIA藝術團隊使用基于ACE的生成式AI工具，包括Synthesia和Hour One，制作了一個“digital Jensen”化身，該化身由文字生成的視頻制作而成。這款多語言化身以他獨特的聲音和風格為特色，使用ElevenLabs的專有AI語音技術生成普通話和英語的聲音。NVIDIA還與專注于AI語音技術的NVIDIA Inception成員Voicemod合作，為NVIDIA創始人兼首席執行官黃仁勛主題演講的謝幕曲進行創作。
ACE NIM現已推出
用于服務器部署的NVIDIA ACE NIM微服務（包括Riva和Audio2Face）現已投入生產，可添加NVIDIA AI Enterprise應用，供開發者獲得企業級的支持服務。現可點擊注冊以獲取在RTX AI PC上運行的ACE NIM微服務的搶先體驗版。（新喀鴉）
