NVIDIA 示範利用 AI 技術將 60fps 影片變成順暢自然的超高速慢動作影片

2018.06.19 03:49PM
Car, Personal luxury car, Sport utility vehicle, Mid-size car, Compact car, City car, Autocross, Motor vehicle, Family car, Executive car, MANUAL SLOM012.5% SPEEDSUPER SLOMO240 FPS, MANUAL, SLOM0, 12.5, SPEED, SUPER, SLOMO, 240, FPS, car, motor vehicle, road, vehicle, transport, mode of transport, luxury vehicle, racing, driving, family car, MANUAL SLOM012.5% SPEEDSUPER SLOMO240 FPS, 汽車,個人豪華車,運動型多功能車,中型車,緊湊型車,城市車,越野車,機動車,家用車,行政車,MANUAL SLOM012.5%SPEEDSUPER SLOMO240 FPS,MANUAL,SLOM0,12.5,SPEED,SUPER ,SLOMO,240,FPS,汽車,汽車,道路,車輛,運輸,運輸方式,豪華車,賽車,駕駛,家用車,MANUAL SLOM012.5%SPEEDSUPER SLOMO240 FPS

現在不少電影、廣告甚至生活紀錄都會使用超級慢動作捕捉精彩一瞬間,現在也有不少手機標榜具備這樣的功能,不過礙於處理性能、儲存容量等種種因素,也不太可能把影片全部使用高速攝影拍攝,並僅將需要的部分使用超級慢動作播放,故多半在廣播或是運動賽事轉播的慢動作是把一般錄影機拍攝的影片放慢,但畫面就顯得不自然,有時候也不夠快。

不過現在 AI 技術也有助於使這類將低禎數影片轉化為高品質的高速慢動作影片, NVIDIA 研究人員藉由 Tesla V100 GPU 搭配基於 cuDNN 的 PyTorch 深度學習框架與捲積神經網路結構,利用高達一萬片以上的 240fps 慢動作影片做為學習藍本,做為將一般影片轉化為超級慢動作影片的深度學習模型。

而實際的成效也相當驚人,培訓後的模型能夠自然地為每一 Frame 之間插入適宜的影像,讓一般速度的影片轉為慢動作影片也能自然不延遲。

新聞來源: NVIDIA

9 則回應

  • 這以前就有了但是是先讀取好播放,非這技術是"即時"完成
    硬體越來越強大了
    2018-06-20
  • 複雜流體類細節的補幀就不太理想了
    (如最後氣球、果凍兩個影片)
    可惜了原本很立體的細節
    2018-06-20
  • AMD早就可以補偵了
    2018-06-20
  • 這不就跟AMD的補禎差不多
    2018-06-19
    • 差很多 這個已經幾乎直接算出來物件 而非單純補禎出來的色塊線條
      2018-06-19
  • 業障補格!
    2018-06-19
  • Kayden Tan
    2018-06-19
    • Niama, see la, nvidia also want to break Video market
      2018-06-19
  • 那還算影片嗎? 還是已經是動畫?
    2018-06-19