土屋 志高, 板摺 貴大, 夏目 亮太, 山本 晋太郎 (早稲田大学), 加藤 卓哉 (株式会社エクサウィザーズ / 早稲田大学), 森島 繁生 (早稲田大学)

画像と音を用いた動画生成の一般化

Visual Computing 2019, 優秀研究発表賞

http://cgvi.jp/info/bestpapers/#vc2019

gtunes music v9 다운로드

本研究では, 一枚の画像と数秒の音から, 画像の見た目を保持したまま, 音に連動した動画の生成手法を提案する.従来の音からの動画生成では, スピーチの口や楽器演奏の腕のように各対象で音に関係するキーポイントを抽出する必要があり, 花火のように形が大きく変化する対象には適用できなかった.提案手法では, 画像を直接生成ネットワークで学習を行うことにより, 画像から特定のキーポイントを抽出することなく動画生成が可能である.従来手法で扱われていた人の口や姿勢だけでなく, 特徴点の設計が困難である花火や海に対しても動画生成が可能であるかの実験を行った.

Download the Kakao tv video 인터스텔라 Bikelash Download parrot photos