[Luma Dream Machine]動画生成も興味深い...

動画生成を行える人工知能「Luma Dream Machine」を試してみた。動画生成はOpen AIも既に臨床段階に入っている分野だ。あと１年もすれば、『水滸伝』を作家ひとりで映像ドラマ化出来るような時代も来るのではないかと面白がっている。

動画生成テスト①「スウィーニー・トッド」：

『水滸伝』の「人肉饅頭」に関連して取り上げた映画『スウィーニー・トッド』のイメージ画像をDALL-Eで生成してもらい、こちらをLuma Dream Machineで動画化した。

↓

↓

↓

細かい点では顔や持っている物が変化するなど気になる点があるが、「トッドがぶつぶつと何かを言いながら部屋の隅へ向かう」という場面の全体的な整合性は保てている。

動画生成テスト②「武松と虎が激しく戦う」：

『水滸伝』前半部、屈指の名場面のひとつの「武松と虎との激闘」。ChatGPTにプロンプト（指示文）を考えてもらい、これをLuma Dream Machineで動画化した。

Create a video depicting an intense battle scene between Wu Song and a ferocious tiger in the Chinese classic 'Water Margin.' The setting is a dense forest on a mountain. Wu Song, a muscular and brave warrior dressed in traditional Chinese clothing, wields a wooden staff with great skill and determination. The tiger, a large and powerful beast with menacing eyes and sharp claws, charges at Wu Song with fierce roars. The scene should show the dynamic and violent clash between Wu Song and the tiger, with quick and powerful movements, intense expressions, and dramatic tension. Include details of the surrounding forest, the rugged terrain, and the intense atmosphere of the battle.

↓

↓

↓

人間と虎がごっちゃに交じり合っていて訳が分からないが、カットや演出、背景の描き方などの側面的な要素は、映像作品としての躍動感を見事に演出できているから驚きだ。効果音や背景音楽などが入れば更に迫力が増す。

動画生成テスト③：『罪と罰』でロージャと金貸し女のアリョーナが会話する

次はドストエフスキー『罪と罰』からロージャと金貸し女のアリョーナが会話をする場面を描いて貰った。原作ではこの会話は２度登場して、２度目はアリョーナが殺害される。私は１度目を想定した。原作はお互いに立って話していたが、以下の動画では座って話す場面となった。

Create a video depicting a tense conversation between Raskolnikov and the old pawnbroker from Dostoevsky's 'Crime and Punishment.' The setting is the pawnbroker's dimly lit, cluttered apartment in 19th-century St. Petersburg. Raskolnikov, a young, pale, and nervous student, is dressed in worn-out clothing and appears deeply troubled. The old pawnbroker, a shrewd and greedy woman with sharp features, is sitting behind a small table cluttered with various items. The scene should capture the psychological tension between the characters as Raskolnikov nervously negotiates the pawn of his items, while the pawnbroker scrutinizes him with suspicion. Include close-ups of their expressions, the dim lighting, and the oppressive atmosphere of the room.

↓

↓

↓

ロージャの手元に若干の違和感を覚える。また、原作は夏の設定であるので背後の窓に霜が降りているのはおかしい。これはプロンプトの設定が曖昧であったからだろう。全体としては舞台背景や人物の表情など、表現したい内容はかなり忠実に再現しているように感じる。実に興味深い。

※画像：DALL-E

※動画：Luma Dream Machine