🟩NVIDIA Developer Blog•較早收集於 31m
使用 NVIDIA ACE SDK 構建裝置端 AI 夥伴
💡了解如何使用 NVIDIA 新 SDK 在 Unreal Engine 5 中直接部署低延遲的裝置端 AI 角色。
⚡ 30-Second TL;DR
有什麼變化
推出用於 Unreal Engine 5 的 NVIDIA ACE Game Agent SDK
為什麼重要
此發布降低了遊戲開發者將生成式 AI 角色直接整合至引擎的門檻，無需完全依賴雲端推論。這標誌著現代遊戲正轉向更具響應性且注重隱私的 AI NPC。
下一步行動
從 NVIDIA Developer 入口網站下載最新的 NVIDIA ACE Game Agent SDK，並在您的 Unreal Engine 5 專案中製作本地 AI NPC 原型。
誰應關注：Developers & AI Engineers
關鍵要點
- •推出用於 Unreal Engine 5 的 NVIDIA ACE Game Agent SDK
- •支援裝置端 AI 角色開發以降低延遲
- •與 NVIDIA RTX 渲染及 DLSS 技術深度整合
🧠 深度解析
背景與延伸：來自公開資料，非原文內容。引用 17 個來源。
🔑 增強重點摘要
- •NVIDIA ACE Game Agent SDK 是一個輕量級的 C/C++ 代理框架，提供 Agent、Chat 和 RAG API，用於將 NPC 連接到遊戲狀態、情境知識和模型驅動的動作。
- •該 SDK 包含針對 Unreal Engine 5 的專用插件，涵蓋 Audio2Face-3D（面部動畫）、ASR（自動語音識別）、LLM（大型語言模型）和 TTS（文本轉語音），這些插件均為裝置端、RTX 優化，並捆綁了 MIT 許可下的即用型模型。
- •底層的 NVIDIA In-Game Inferencing (NVIGI) SDK 是一個 GPU 優化的插件式推論管理器，可將 AI 推論直接整合到 C++ 遊戲和應用程式中，支援多種推論後端（GPU、NPU、CPU），並利用計算圖形 (CIG) 技術實現高效的 AI 推論與渲染任務並行。
- •NVIDIA ACE 已在實際遊戲中應用，例如《絕地求生：大逃殺》(PUBG: BATTLEGROUNDS) 中的 AI 隊友「Ally」和《全軍破敵：法老》(Total War: PHARAOH) 中的情境感知 AI 顧問，展示了裝置端 AI 在動態遊戲體驗中的實際應用。
- •NVIDIA ACE 微服務，包括 Nemotron-3 4.5B SLM（小型語言模型）、Audio2Face 和 Riva ASR，正擴展部署到全球 1 億台 RTX AI PC 和筆記型電腦上，部分模型已進入搶先體驗或普遍可用階段。
🛠️ 技術深入
- NVIDIA ACE Game Agent SDK 是一個輕量級的 C/C++ 代理框架，專為無縫、原生遊戲內整合而設計。
- 該 SDK 提供三個核心 API 類別：Agent API（有狀態，驅動多步驟、工具輔助推理）、Chat API（無狀態，直接控制推論）和 RAG API（實現語義、詞彙和混合知識檢索）。
- Unreal Engine 5 插件包括：
- Audio2Face-3D：用於從音訊即時生成面部表情和動畫。
- ASR（自動語音識別）插件：包含一個即用型英語語言模型。
- LLM（大型語言模型）插件：提供本地、低延遲的文本生成和函數調用功能。
- TTS（文本轉語音）插件：包含高品質、即用型語音。
- 這些插件是本地、RTX 優化的工作流程，捆綁了即用型模型，並受 MIT 許可證約束。
- NVIDIA In-Game Inferencing (NVIGI) SDK 是一個 GPU 優化的插件式推論管理器，用於將 AI 推論直接整合到 C++ 遊戲和應用程式中。
- NVIGI 利用計算圖形 (CIG) 技術，實現 AI 推論與渲染任務的高效並行。
- 它支援跨不同硬體加速器（GPU、NPU、CPU）的所有主要推論後端。
- ACE 利用 NVIDIA AI 模型，如 Riva（ASR、TTS）、NeMo（LLM、情境感知）和 Omniverse Audio2Face。
- 提及的特定模型包括 Nemotron-3 4.5B SLM（專為裝置端對話推論設計的小型語言模型，具有 INT4 量化功能） 和 Mistral-Nemo-Minitron 系列（8B、4B 和 2B 參數模型，用於角色扮演、RAG 和函數調用，兼容多供應商 GPU/CPU）。
- 即時 NPC 對話需要至少 45-50 TOPS 的 NPU 性能，整個管線（語音識別、語言模型推論、語音生成和動畫）的總延遲預算為 300 毫秒。NVIDIA ACE 處理 NPC 對話的時間少於 300 毫秒。
- 該 SDK 是開源且完全可定制的解決方案。
- ACE NIMs（NVIDIA 推論微服務）設計用於在雲端或 PC 上運行。
🔮 前景展望AI analysis grounded in cited sources
遊戲中的非玩家角色 (NPC) 將變得更加動態和沉浸式，能夠進行更自然的對話和適應性行為。
NVIDIA ACE SDK 透過裝置端 AI 實現低延遲的語音識別、語言理解和面部動畫，使 NPC 能夠即時感知、推理和行動，打破傳統腳本限制。
裝置端 AI 處理將成為遊戲開發的關鍵趨勢，尤其是在需要即時互動和個性化體驗的場景中。
ACE SDK 專為裝置端推論優化，利用 RTX GPU 的硬體加速能力，確保 AI 模型在遊戲中高效運行，降低對雲端服務的依賴並減少延遲。
遊戲開發者將能夠更輕鬆地整合複雜的 AI 功能，從而加速創新並創造全新的遊戲類型。
ACE Game Agent SDK 提供 C/C++ 框架和 Unreal Engine 5 插件，簡化了 ASR、LLM、TTS 和 Audio2Face 等 AI 微服務的整合，並提供開源、可定制的解決方案。
⏳ 時間線
2023-05
NVIDIA 在 COMPUTEX 2023 宣布推出 NVIDIA ACE for Games，旨在透過 AI 驅動的自然語言互動為 NPC 帶來智慧。
2024-06
NVIDIA 宣布 ACE 生成式 AI 微服務普遍可用，並推出 ACE PC NIM 微服務，用於部署在 RTX AI PC 上。
2024-10
NVIDIA ACE 數位人類 AI 技術作為 Unreal Engine 5 插件推出，提供 Audio2Face-3D、ASR、LLM 和 TTS 插件。
2025-01
NVIDIA 在 CES 2025 推出 NVIDIA ACE 自主遊戲角色，並展示其在 PUBG: BATTLEGROUNDS 和 Inzoi 等遊戲中的應用。
2025-02
NVIDIA 推出 In-Game Inferencing (NVIGI) SDK，簡化 ACE 模型在 C++ 遊戲中的整合。
2026-06
NVIDIA 在 Unreal Fest 2026 宣布擴展其在 Unreal Engine 5 中的 RTX 整合，推出全新的 ACE Game Agent SDK，用於構建裝置端 AI 夥伴。
📎 來源 (17)
Factual claims are grounded in the sources below. Forward-looking analysis is AI-generated interpretation.
📰
AI 週報
閱讀本週精選 AI 大事摘要 →
👉相關動態
AI 策展新聞聚合。所有內容版權歸原始發布者所有。
原始來源： NVIDIA Developer Blog ↗
每週 AI 簡報
每週一封，可隨時退訂。