生成式AI技術對於遊戲產業不僅止於美術領域，NVIDIA也希冀大型語言模型LLM能為遊戲的NPC角色賦予更逼真的互動體驗，並自2023年的Computex開始展示NVIDIA ACE數位人技術，一路自單一的NPC角色、NPC彼此之間的互動到透過一台搭載RTX顯示卡的電腦單機進行展演；而NVIDIA在Gamescom 2024攜手近未來科幻機甲遊戲Mecha Break進行展示，首次在商業遊戲環境展示結合NVIDIA ACE與數位人的NPC技術，並藉由全新的Nemotron-4 4B Instruct模型在裝置端直接執行流暢的對話。
▲最新的ACE NIM將語言模型提升至Nemotron-4 4B
在此次的展演，NVIDIA宣布利用NVIDIA ACE NIM微服務提供在裝置端的生成式AI NPC互動體驗，NVIDIA ACE整合多個數位人所需的元素，包括具備與因與翻譯的NVIDIA Riva，大型語言模型Nemotron，以及提供人物角色臉部表情的Audio2Face-3D，其中將ACE NIM的大型語言模型升級到Nemotron-4 4B Instruct，Nemotron-4 4B Instruct是專為邊際推論打造的大型語言模型，不須連接到網路即可在GeForce RTX AI PC裝置執行，且仍能進行豐富的語言理解與互動
在此次與Mecha Break的展示當中，活用OpenAI的開源語音辨識模型Whisper與ElevenLabs的文字轉語音功能，並輔以Nemotron-4 4B的大型語言模型推論與Audio2Face-3D人物表情效果。在此次的展示，與會者能與Mecha Break的NPC交流，NPC將幫助玩家依據遊戲玩法、組隊需求打造合適的機器人。
