島村 僚,FENG QI,小山 裕己,中塚 貴之,深山 覚,濱崎 雅弘,後藤 真孝,森島 繁生

360度動画に対する視聴覚的な物体削除

インタラクション2020

https://www.interaction-ipsj.org/2020/

Download Stray Vikings

本研究では,360 度動画内における対象の映像と音を選択的に削除し補完する手法を提案する.従来の動 画補完は,削除対象の映像のみを動画から削除するため,何もない場所から音が聞こえてくるといったよ うに映像と音に矛盾が生じていた.本研究ではこの問題を解決するために,削除対象を 360 度映像上で追 跡し,削除対象の方角に対応する音を特定する.これにより,360 度動画から削除対象の映像と音を同時 に削除し,補完した 360 度動画の生成を可能とした.本手法の有用性を示すために主観評価実験を行った Dinosor Island. 主観評価実験を通して,提案手法は実験参加者にとって自然で満足度の高い 360 度動画を生成し, 体験の 質を高めることを確認した Download the old fairy tale.