「同じときに撮ったと思われる別の写真も動画変換してみました。プロンプトはどちらも同じで、「a girl is on a train」だけ」
「友人とおしゃべりしているという設定で、「a girl is talking with her friend on a moving train」と、背景が移動し、なおかつ視線が友人(カメラ)に向いていることを想定したものです。」
「Dream Machineで生成できる動画は5秒のみ。それ以上伸ばすためには最後のフレームをアップロードしてまた生成するといった、たいへん面倒な作業が必要です。」
もうSoraは不要なのか。動画生成AIの新基準、Luma AI「Dream Machine」をサブスクしてわかった「ハリー・ポッターに出てくるような魔法」の使いこなし術(CloseBox) | テクノエッジ TechnoEdge https://www.techno-edge.net/article/2024/06/14/3468.html
「振り返ったり立ち上がったりと大きな動きがついてしまうと、顔自体が本人と変わってしまうことが多いです。これは、学習データが欧米人に偏っているためと思われます。」
「対処方法としては、視線ができるだけ動かないようにプロンプトの工夫をすることですが、それだと動きが全くないものになりがちという問題はあります。」
「視線を動かさない方法として筆者は、「~ is looking at me」「~ is staring at the viewer」といったプロンプトを使っています。これに、親しみを込めてというニュアンスを加えて「~ is looking at me affectionately」と加えたりすると、動きが大きくなって別人化したりするので、注意が必要です。」
もうSoraは不要なのか。動画生成AIの新基準、Luma AI「Dream Machine」をサブスクしてわかった「ハリー・ポッターに出てくるような魔法」の使いこなし術(CloseBox) | テクノエッジ TechnoEdge https://www.techno-edge.net/article/2024/06/14/3468.html