NVIDIA RTX 的 NVIDIA Studio 將獲 AI 新應用,秋季免費推出 NVIDIA Broadcast 與 Omniverse Machinima

2020.09.02 01:16PM
照片中提到了BROADCAST、NVIDIA、V MICROPHONE,跟英偉達、英偉達有關,包含了小工具、顯卡、圖形處理單元、GeForce

雖然回到兩年前 NVIDIA 發表 Turing 圖靈架構時,外界不少聲浪指出 NVIDIA 不該把寶貴的電晶體空間塞入前景與應用在消費娛樂皆不明確的 Tensor Core ,然而在兩年的持續耕耘與實驗,包括實驗性的 DLSS 、 RTX 語音降噪等技術展演, DLSS 2.0 帶來大幅的視覺效果與運算性能提升也證實 AI 對遊戲能帶來莫大的幫助。

照片中提到了MAGIC OF DEEP LEARNING、CHARACTER CONCEPTING、AUDIO TO FACIAL ANIMATION,跟英偉達有關,包含了介紹、黃健森、顯卡、GeForce

▲深度學習與 AI 在各領域逐漸發威

隨著越來越多準專業級創作者開始採用消費級的 GeForce RTX 顯示卡,也促使 NVIDIA 攜手專業軟體開發商把 AI 技術導入應用,藉由此次 RTX 30 系列發表, NVIDIA 也宣布把 DLSS 技術導入專業設計軟體,首批採用 DLSS 的專業軟體包括 D5 Render 和 SheenCity Mars ,藉由 DLSS 技術能夠降低運算負擔,加速 3D 場景與效果的渲染。

NVIDIA Studio 新增免費應用  NVIDIA Broadcast 與 Omniverse Machinima

照片中提到了BROADCAST、4 MICROPHONE、e SPEAKERS,跟英偉達有關,包含了電腦牆紙、產品、屏幕截圖、牌、牆紙

 NVIDIA Broadcast 可藉由 AI 進行去背、合成與語音降噪

照片中提到了MACHINIMA、Use of real-time computer graphics、engines to create cinematic productions,包含了中世紀建築、顯卡、英偉達、圖形處理單元、安培

▲ Omniverse Machinima 可藉由 AI 技術輕鬆創作動畫短片

NVIDIA 在此次 RTX 30 發表也宣布為 RTX Studio 增加兩項基於 AI 的新技術,包括 NVIDIA Broadcast 與 Omniverse Machinima ,前者是針對廣播、直播提供基於 AI 的去背與語音降噪,後者則透過 AI 技術與 Omniverse 平台的免費資源,用以創作 3D 動畫短片。

NVIDIA Broadcast 透過 AI 技術,把先前技術展演的 AI 語音降噪與 AI 去背技術整合成一套介面,透過單一控制面板進行麥克風智慧降噪、虛擬背景與網路攝影機的自動取景。尤其網路攝影機自動取景技術對單人作業的直播主相當有幫助,此技術可自動判讀人物並進行追蹤,啟動後可自動追蹤人物的移動進行數位裁切,只要在攝影機能夠拍攝的範圍內,皆可利用數位裁切方式使人物永遠在畫面的中間,縱使轉身取物也可如追焦一樣。

Omniverse Machinima 技術應用先前發表的 Omniverse 協作平台,創作者拍攝自己的臉部頭像後,結合 AI 的動作預測與 3D 頭像自動產生,搭配可偵測聲音自動轉換成臉部表情的 Audio2Face 技術,再利用 Omniverse 大量的材質與資源,創作出置身遊戲世界的動畫短片。

資料來源