當前許多 AAA 遊戲的畫面已經越來越逼真,有時候不仔細看還會以為是真實場景,不過畢竟遊戲受限物理特性、材質貼圖、特效表現方式、硬體運算效能,多少還是會察覺是遊戲而非真實畫面,不過在 AI 技術的加持之下,未來的遊戲體驗恐怕會有更接近真實的效果。 Intel 的研究團隊在 Eurographics 2021 發表了一項影像 AI 研究成果,以 2013 推出至今仍相當受歡迎的 GTA 5 / 俠盜獵車手 5 作為示範,利用 AI 技術把原本就相當炫麗的遊戲畫面進一步提升到接近真實世界的實景效果。
Intel 實驗室使用的技術稱為 Enhancing Photorealism Enhancement (增強型照片仿真),透過機器學習的方式進行畫面的影像強化,透過學習真實世界的影像反過來為遊戲中的影像進行重新處理,使原本的遊戲畫面更貼近真實攝影機所拍攝的畫面。
▲ Cityscape 為學習藍本的結果有類似於電影般的灰色調
Intel 使用 Cityscape 以及 Mapillary Vistas 所提供的城市 3D 影像資料庫做為內容學習,這兩項城市 3D 影像數據庫皆可提供學術研究等非商業行為免費使用。 Intel 幫這些數據資料的建築物、車輛、路面、人、號誌等進行標註,以作為 AI 的機械學習的註記。
▲ Mapillary Vistas 為學習基礎的模型效果較像是使用手機、相機錄影的結果
不過 Intel 的研究也顯示不同的資料源也會產生不同的結果,透過 Cityscape 為基礎的模型產生的畫面呈現類似電影般的影像結果,景物的細節略為模糊,玻璃的反射效果被增強,同時也呈現電影般的灰色調。至於使用 Mapillary Vistas 資料庫的模型則是會使效果像是現代相機或是手機拍攝較為明亮的畫面。
當然對於新的遊戲,這些效果應該可以透過材質貼圖與視覺效果達到相近的效果,不過這項 AI 技術的價值則是為舊遊戲提供全新的視覺體驗,若比較過此次示範的影片效果與原本 GTA 5 的差別,應該不難感受到這款上市已經近 10 年的遊戲還有如此大的改變。不過若從遊戲開發者的角度,或許這項技術在開發階段也有助於使用較簡單的模型與貼圖使 AI 產生逼真的材質庫也不一定。