映像を変えるAI

Google Researchとイスラエルの
The Hebrew University of Jerusalemに
所属する研究者らが発表した論文
「Dreamix: Video Diffusion Models are
General Video Editors」は、テキストに
応じた動画編集ができる拡散モデルを
提案した研究報告だそうです。

テキストから画像を生成する拡散モデルと
同様に、テキストから動画への変換モデルも
近年提案されている。
だがテキストに応じて動画編集できる
拡散モデルは現状ではほとんどないそうです。

　この研究では、入力動画をテキストプロンプトで
高度に編集できる拡散モデルを用いた手法
「Dreamix」を提案する。

動画とプロンプトが与えられると、Dreamixは
被写体のテクスチャやサイズ、色、姿勢、
カメラのポーズ、背景などをテキストに応じて
忠実に再現しながら動画を編集し、
時間的に一貫した新しい映像を
作成するそうです。

テキストで動画を作成できるのすか。
すごいですね。
AIがどんどん進化していきます。
どうなるのでしょうかね。