統括 AR 、 VR 與 MR 的 XR 雖然至今已有許多產品上市,不過對許多消費者多半在體驗消費級的 XR 裝備後就不見得會繼續嘗試,然而在產業面,這類 XR 設備的應用潛力仍相當被看好;隨著低延遲、高頻寬的 5G 技術將在全球陸續開通,高通也在今年的 Snapdragon 技術高峰會第三日發表支援 5G 技術的 Snapdragon XR2 5G 。
在 Snapdragon XR2 5G 推出後,將定位在提供極致的 XR 與網路連接體驗的平台,既有的 Snapdragon XR1 則將定位在提供高品質一體式 XR 體驗的平台。
▲ Snapdragon XR2 5G 平台除了性能提升外,最重要的是可支援 5G 網路
▲ Snapdragon XR2 5G 平台是高通針對 XR 設備一次大幅度的硬體更新
高通 Snapdragon XR2 5G 平台將具備五大特質,包括視覺、音訊、互動、 AI 與 5G 連接能力;相較當前廣泛被使用在 VR 、 AR 一體設備的 Snapdragon 835 / Snapdragon XR1 , Snapdragon XR2 5G 將帶來 2 倍的整體運算性能, 4 倍的影像頻寬、 6 倍影像解析度、 11 倍的 AI 性能,並結合 5G 提供增強與高速、低延遲的網路體驗。
▲ Snapdragon XR2 5G 可支援雙眼 3K 90FPS 影像輸出
▲ Snapdragon XR2 5G 具備 8K 60FPS 影像解碼能力
同時, Snapdragon XR2 5G 將具備強大的視覺運算性能,其圖形性能提升 1.5 倍的像素速率與 3 倍的紋理處理性能,可提供雙眼 3K x 3K 90FPS 的影像輸出,同時具備眼球追蹤的視覺聚焦與可變速率著色技術;另外可提供 8K 60P 、 4K 120P 影像解碼,與支援 HDR10 、 HDR10+ 標準,同時可支援 120Hz 更新率,能夠搭配高更新率顯示器提供流暢的顯示效果。
▲支援 7 個攝影機可提供更好的環境視覺與臉部、手部動作追蹤
▲ Snapdragon XR2 5G 也提供沉浸的 3D 音效與 AI 語音辨識
為了使體驗更沉浸, Snapdragon XR2 5G 也具備進階的追蹤式 3D 音訊;另一個提升互動體驗的關鍵,則是 Snapdragon XR2 5G 具備獨立的視覺處理器,可支援高達 7 具相機鏡頭,並透過低延遲通道將感測器的影像數據傳輸到平台,高通舉例可在外側配備左右各兩具相機做為環境影像、空間測距與 26 點的手部動作偵測,內部的三具攝影機則可提供如瞳孔追蹤、表情認知等,使操作者在 XR 世界的互動更逼真、直覺,並可用於 XR 環境重建逼真的個人 Avatar 。
▲ AI 技術提供豐富的機器視覺與語音辨識應用
至於 AI 技術在 Snapdragon XR2 5G 平台的意義又更為重要, AI 能夠做為如空間認知、物件辨識、情境辨識、空間定位、深度認知、手勢偵測、語意辨識等功能;最終是 5G 連網技術的優勢, 5G 不僅提供行動寬頻連接,並藉由低延遲特色,可用於串流高畫質的影像、互動遊戲內容,實現無所不在的網路連接。
▲ Niantic 技術長表示將與高通針對 XR 平台進行長期深度合作
▲展示 Snapdragon XR2 5G 於 MR 視訊會議的應用
寶可夢 Go 開發商 Niantic 也到場暢談 XR 的未來,並宣布將與高通進行長期的深度合作,基於高通 XR 參考設計與 Niantic 在 XR 的開發技術,創造更多 XR 應用;高通也在最後邀請合作夥伴展示基於 Snapdragon XR2 5G 的 XR 會議應用,透過多具攝影機捕捉操作者的動作與神情,並藉由 3D 與空間偵測,以 AR 的方式呈現會議的物體,並可藉由手勢與 3D 物體互動,使身處不同空間的會議參與者宛若置身同一會議室一樣進行討論、互動。
1 則回應