NVIDIA 在 GTC 大會宣布兩項服務，其一是影像協作平台 Omniverse 將開放公開測試，以及推出基於 NVIDIA GPU 與 AI 技術的雲影像 AI 平台 NVIDIA Maxine ； Omniverse 在今年 5 月公開，可提供即時的線上共享協作，而 NVIDIA Maxine 則是透過基於雲端的 GPU AI 技術，使包括即時視訊等影像串流可在線上進行增強與加入各式特效。
Omniverse Open Beta 申請頁面： Omniverse
Omniverse Open Beta 將在今年秋季正式開放，以基於 NVIDIA RTX 技術提供 3D 模擬協作平台，並具備物理與 3D 效果，此平台能夠使開發者與設計師透過遠端服務在同一個工作環境進行同步協作，如建築師與業者透過 Omniverse 即時調整溝通，動畫師以及導演進行 3D 場景調整與編修，或是自動技術開發者在 Omniverse 同時觀看與調整自動駕駛，將多人 3D 內容協作變成如多人線上同步編輯文件一樣容易。
Omniverse 採用與 NVIDIA 長年合作的 Pixar / 皮克斯的通用場景敘述( USD ) 作為基礎，並結合 NVIDIA 在包括渲染、物理、材質與 3D 產業的工作軟體為基礎，提供一套完整且可跨軟體整合的通用線上協作平台。
目前包括 Erisson 、英國建築與工程公司 Fost + Partners ， ILM (光魔)等 40 家以上的企業已經搶先使用。 Ericsson 利用 Omniverse 的可視化與模擬技術，提供對真實世界建築模型的 5G 網路架設的模擬；Fost + Partners 則將 Omniverse 用以協作建設； ILM 利用 Omniverse 提供動畫與特效工作流的整合，改善跨團隊動畫與特效的工作流程。
Omniverse 獲得軟體業界重量級廠商支持，包括 Adobe、Autodesk、Bentley Systems、Robert McNeel & Associates 及 SideFX 等，而 Blender 也與 NVIDIA 合作加入通用場景敘述技術功能，使其軟體能與 Omniverse 整合。
▲ NVIDIA Maxine 透過在雲端以 GPU AI 加速，提供更高品質與更豐富的影像串流服務
NVIDIA Maxine 是一相基於雲服務的影像增強功能，透過與包括 Google Cloud 、 AWS 、騰訊雲、 ORACLE 、 Microsoft Azure 等合作，藉由雲端的 GPU 進行各式 AI 串流影像強化，使參與視訊會議的使用者不須擁有效能強大的電腦，能藉由雲服務的 GPU 提供包括凝視校正、解析度提升、降噪、臉部照明、變臉等功能。
此項技術透過雲服務上 NVIDIA GPU 的 AI 影像壓縮技術，使用於串流的影像僅有標準 H.264 影像頻寬的 1/10 ，能夠減少視訊會議、串流影片對服務商的流量負擔，同時亦可透過 AI 影像強化、 AI 補幀等技術，使頻寬有限的使用者端能夠呈現高品質且流暢的視訊串流內容。
另外，借助 NVIDIA 研究團隊透過對抗生成網路/ GAN 的研究成果， NVIDIA Maxine 還可自動進行臉部辨識後把人物臉部置中，以及透過凝視校正把畫面中人眼的焦聚調整到像是與對方交談；此外 NVIDIA Maxine 也提供像是 3D 虛擬替身、聲音聚焦等機能，透過結合 NVIDIA Jarvis SDK 的對話式 AI ，還可在服務中整合 AI 模型進行語音辨識，藉此產生對話紀錄、即時字幕、翻譯等功能。
▲透過整合 Javis 自然語言 AI ， Maxine 甚至能在雲端即時產生字幕與進行翻譯
透過基於雲運算的 NVIDIA Maxine ，串流服務業者能夠減少使用者客戶端的硬體需求，把複雜的影像強化、語音辨識等透過雲伺服器進行，同時還可提供更高品質的視訊會議與串流影像內容。
NVIDIA Maxine 提供豐富的開發套件整合，包括用於語音辨識的 Javis ，還包括 NVIDIA DeepStream 高吞吐量音訊與影像串流 SDK 與用於高效能深度學習推理的 NVIDIA TensorRT SDK ，同時強調用於 NVIDIA Maxine 的 AI 音訊、影像、自然語言功能的 AI 是在 NVIDIA DGX 以數十萬小時進行訓練。
NVIDIA 也開始邀請包括電腦視覺 AI 開發者、軟體合作夥伴、新創公司與開發影像與音訊 app 與服務的開發商加入 NVIDIA Maxine 的早期體驗服務。 NVIDIA Maxine
