小太郎ぶろぐ

文章からオブジェクトを生成し、文章の通りのカメラワークで映像を生成するAI「Phenaki」のデモ映像。

猫の写真を元に、「猫の目にズームイン」「肉球でカメラに触れる」「大あくびをする」といった指示で映像を作れる他、長い文章から長い映像も違和感なく生成できる。

2個目のツイートは2分の動画を生成したもの。

ツイートの下に元になった文章をDeepLで翻訳したものを置くけど、ほぼほぼ文章通りの映像で凄すぎる。