AIで既存の動画からスローモーション映像を生み出す:NVIDIAブログ

cropped-logo_data1-32x32-449622ca518e516c1682d44a0dd426466825a7ae

NVIDIA の研究者チームが、30 フレーム/秒の動画から高品質なスローモーション動画を生成することができるディープラーニング ベースのシステムを開発したという。

研究論文では、「人生には、わが子が初めて歩いた瞬間、スケートボードの高難度トリックが決まった瞬間、犬がボールをキャッチした瞬間など、肉眼ではっきりととらえることが難しく、スローモーションで撮影したくなる記念すべき瞬間が幾度も訪れる。

携帯電話で 240 フレーム/秒の動画を撮影することは可能だが、すべてを高フレーム レートで撮影するとモバイル デバイスのメモリを圧迫し、バッテリーを大量に消費するため現実的でない」と説明。

この研究によって、撮影された映像からスローモーション動画を生成できるようになるという。

チームは、NVIDIA Tesla V100 GPU と cuDNN アクセラレーテッド PyTorch ディープラーニング フレームワークを使用して、日常やスポーツに関する活動を 240 フレーム/秒で撮影した 11,000 本を超える動画に基づきシステムのトレーニングを行った後、その畳み込みニューラルネットワークに追加フレームを予測させた。

また、システムの精度の検証には別のデータセットを使用した。その結果、低フレームレートで撮影された動画をより滑らかで鮮明なものにすることができたという。

同チームは、「私たちの手法では、空間的にも時間的にも整合のとれた中間フレームをいくつも生成できます。このマルチフレーム アプローチは、最新のシングル フレーム手法よりも一貫して優れています」と報告している。

また、この研究を実証するため、チームは「The Slow Mo Guys」 (主演のギャビン・フリー (Gavin Free) 氏とその友人のダニエル・グルッチー (Daniel Gruchy) 氏が手掛ける、スローモーションを使ったサイエンス & テクノロジエンターテイメントで人気の YouTube シリーズ) から一連のクリップを用い、さらに低速の動画を制作した。

この手法では、「人生の最も大切な瞬間が含まれる日常の動画」を撮影して低速で再生し、お気に入りの映画のようなスローモーション シーンに仕立てることが可能で、緊張感や強調、期待感を加えることができるという。

【関連リンク】
エヌビディア(NVIDIA)

  • このエントリーをはてなブックマークに追加

関連記事

話題をチェック

  1. 600x601x20170822nana.jpg.pagespeed.ic.u5ed1iTQeL-e5b3de5c391c8e3805df72a8cdb3da051ece71fa

    ANA、機内食総選挙2017の結果発表 和食は牛すきやき丼、洋食はビーフシチューとオムライス

    Sponsored link  機上ӗ…
  2. MIT-Instant-Retouch-TA-12db540ca97a6020f2db78ca5b27647ac89d2f28

    機械学習を用いれば、写真が「撮影する前」からプロ仕様の美しさに──グーグルとMITがアルゴリズムを開発

    NEWS 2017.08.22 TUE 08:00マサチ&…
  3. GettyImages-496380034-e1503241697905-b18cea347ee2933a806af5a4adfa2f3d9569add1

    「世界共通のインターネット」を巡る、グーグルとカナダ最高裁との闘い

    NEWS 2017.08.21 MON 07:00カナダ&…
ページ上部へ戻る