英偉達AI新玩法:將30fps慢動作視頻變成240fps
- 來源:網(wǎng)絡(luò)
- 作者:Deego
- 編輯:Deego
英偉達嘗試使用AI技術(shù)將低幀數(shù)的視頻變成每秒240幀慢動作視頻,預(yù)計將會在存儲容量有限的手機中應(yīng)用這樣的技術(shù)。
創(chuàng)建流暢的慢動作視頻需要短時間捕捉多幀畫面,如果錄的幀數(shù)不夠,那么最終的慢動作視頻看起來會很不流暢,大多數(shù)人并沒有昂貴的高速相機,不過英偉達試圖用AI技術(shù)來解決這個問題。
芯片設(shè)計商英偉達的新研究通過深度學(xué)習(xí)將每秒30幀的視頻變成每秒240幀慢動作。AI系統(tǒng)會查看兩個不同的幀,然后通過跟蹤從一幀到下一幀的對象移動來填充中間幀,并且能夠產(chǎn)生非常準(zhǔn)確(不完美)的結(jié)果。
“雖然現(xiàn)在已經(jīng)可以用手機拍攝每秒240幀的視頻,但以高幀率記錄所有內(nèi)容是不切實際的,因為它需要大容量的存儲器,而且對于移動設(shè)備而言功耗很大,”研究人員在一篇論文中寫道,“出于這些原因和其他原因,從現(xiàn)有視頻中生成高質(zhì)量的慢動作視頻非常令人感興趣。”
但這種技術(shù)也有限制。首先,研究人員必須訓(xùn)練他們的深度學(xué)習(xí)系統(tǒng)來處理特定類型的素材。因此,為了獲得汽車在水中滑行的慢速視頻,他們必須首先用相似的鏡頭進行訓(xùn)練。另外,這種技術(shù)不能產(chǎn)生無限數(shù)量的中間幀。沒有數(shù)據(jù),計算機就不可能預(yù)測真實世界物體的運動和行為。但是,英偉達的系統(tǒng)可以產(chǎn)生多達7個中間幀,足以創(chuàng)造不錯的慢動作。
預(yù)計不久的將來,手機相機中會出現(xiàn)類似的功能。
玩家點評 (0人參與,0條評論)
熱門評論
全部評論