すべてのカテゴリ

AIに歌を覚えさせるのではなく、曲に乗って見える設計図を先に作るAI動画でMVやダンス動画を作る時、意外と難しいのが「音楽と動きのズレ」です。映像としては綺麗にできている。キャラクターも悪くない。でも、音楽に乗って見えない。この違和感があるだけで、一気に「AIっぽい」「なんかズレてる」という印象になってしまいます。最近、バレーボール応援ソングのSNS向け動画を制作する相談がありました。目的は、若い人たちが真似して投稿したくなるような、実写風のダンス・応援動画を作ること。最初はシンプルに、AI動画で女性が曲に合わせて踊る映像を作ればいけると思っていました。でも実際に試すと、ここがかなり難しい。40秒前後をシームレスに見せる。歌のリズムにダンスを合わせる。さらに歌に口の動きまで合わせる。この3つを同時に満たそうとすると、現状のAI動画ではかなり厳しいです。人物が途中で変わる。背景が微妙に動く。手の動きが崩れる。口の動きが歌詞と合わない。ダンスのタイミングが曲からズレる。つまり、AIにそのまま「この曲に合わせて踊って」と頼むだけでは、安定して狙った動画にはなりません。そこで気づいたのが、AIに歌を覚えさせるのではなく、人間側で先に“音ハメ設計図”を作る必要があるということです。AIに曲を覚えさせるのは難しいAI動画生成では、プロンプトに「音楽に合わせて踊る」「リズムに乗る」と書くことはできます。ただ、それだけで実際の楽曲の拍や歌詞に完全同期してくれるわけではありません。特に難しいのが、完璧なリップシンクです。歌詞の一音一音に対して、口の開き方を合わせるのはかなり不安定です。さらにダン