NVIDIA推出AI遊戲助理「Project G-Assist」!將能幫助玩家掌握遊戲、調整硬體性能

輝達(NVIDIA)執行長黃仁勳,近日來台參加 Computex 2024 與演講, 提到了重點的 AI 伺服器、數位人類、機器人趨勢等,更讚「台灣是無名的英雄,卻是世界的支柱」。期間還公開了 GeForce RTX AI PC 最新體驗,其中就包括了 AI 遊戲助理「Project G-Assist」,協助玩家夠快速掌握遊戲。

(圖源:NVIDIA)
(圖源:NVIDIA)

根據 NVIDIA 官方說明,Project G-Assist 可以為 PC 遊戲及應用程式提供環境感知協助功能。提到 AI 助理將會改變人們在玩遊戲及使用應用程式時的體驗,從提供遊戲策略和分析多人遊戲重播,到即時協助處理複雜的創意工作流程。Project G-Assist 讓人們能夠一窺未來的發展走向。

並說明 PC 遊戲存在著許多複雜的機制來讓玩家探索和掌握,即便是最投入的玩家,依然需要花費大量的時間與精力才成完成挑戰。而 Project G-Assist 主旨就是利用生成式 AI,讓玩家們嫺熟掌握各種遊戲知識。

Project G-Assist 會接收玩家通過語音或文字輸入的內容,以及遊戲畫面裡的語境脈絡資訊,並透過 AI 視覺模型運行這些資料。這讓模型可以增強語境脈絡感知,同時強化與某個遊戲知識資料庫連結的大型語言模型(LLM)針對特定應用程式的理解能力,接著生成出以文字或語音形式為玩家們專門打造的相關回應內容。

並舉例了由遊戲開發商 Studio Wildcard 推出的《方舟:生存升級》(ARK: Survival Ascended)作為技術展示。Project G-Assist 可以幫助回答有關生物、物品、傳說、目標、大魔王等方面的問題,全都是根據玩家過程提供的專屬回答,甚至還能依照玩家的硬體調整出最佳的畫面設定,安全的進行超頻,或是在保持效能目標的同時智能的降低耗電量。

此外針對開發者部分,NVIDIA 提到將推出 NVIDIA ACE 數位人平台的首項用於 PC 的 NVIDIA NIM 推論微服務,現在將能透過預先建構好的推論微服務容器 NVIDIA NIM 用於 RTX AI PC 和工作站,讓開發者能夠將部署時間從原本的數週縮短到幾分鐘。NVIDIA NIM 可在裝置本機端運行高品質的推論,用於理解自然語言、語音合成、臉部動畫等。

並在今年 Computex 2024 上,NVIDIA 與 Inworld AI 合作開發的 Covert Protocol 技術展示內容,將會是首次展示 NVIDIA ACE NIM 用於 PC 上的成果,展示在裝置本機端運行的 NVIDIA Audio2Face™ 及 NVIDIA Riva 自動語音辨識技術。

同時 NVIDIA 也和微軟合作,幫助開發者將全新的生成式 AI 功能用到 Windows 原生和網路應用程式裡,提供更方便開發的 API,讓開發者能夠取得由 GPU 加速的小型語言模型(SLM),並利用由 Windows Copilot Runtime 支援可以在終端裝置(個人電腦等個人設備,非雲端伺服器)的檢索增強生成(RAG)功能。

NVIDIA RTX GPU 及其他硬體廠商的 AI 加速器將加速執行這些 AI 功能,橫跨廣大的Windows 生態系統,為終端使用者提供快速又靈敏的 AI 使用體驗。API 開發者預覽版預計 2024 年晚些推出。

並且 NVIDIA 推出的 RTX AI 工具套件,將會幫助開發者在 PC 上最佳化及部署 AI 模型,通過使用 QLoRa 工具自訂模型和 NVIDIA TensorRT 模型最佳化工具提高效能,減少 RAM 消耗,並提高模型效能達四倍。

RTX AI 加速技術應用上,NVIDIA 將 RTX AI 加速技術加入創作者、模組製作者和影音愛好者所使用的應用程式內,像是最受歡迎的 Stable Diffusion 使用者介面之一 Automatic1111 獲得 TensorRT 的 RTX 加速技術。以及即將在本週支援的 ComfyUI,與目前版本相比,效能提升高達 60%,與 MacBook Pro M3 Max 相比,效能提高了七倍。

同樣的 RTX Remix 則是提供給模組製作者,能力用該平台將全光線追蹤技術、NVIDIA DLSS 3.5 和精準符合物理原則的材質,重製經典的 DirectX 8 和 DirectX 9 遊戲。NVIDIA 也在去年對 RTX Remix Runtime 進行開源,允許模組製作者擴大遊戲相容性與提高渲染能力。