存在しないダンスも作れる AIによる振り付けの実力
この方法を使えば、ダンス動画も作れるだろうと考えました。実際に作成したのが、以下の動画です。下がBlender MCPを通じて作成したプリビズ動画で、上がそれを下敷きにして、Seedance 2.0で作成した動画です。リファレンスとして、キャラクターと背景の4枚の画像を与えています。元となるキャラクターは前後がわかるようにと指示し、アニメーションやカメラワークも、Fable 5に検討させています。
△Blenderで作成したプリビズを使ったダンス
この手法は、Ryo@AI動画×AIツール紹介さんが公開している方法を参考にしています。
Fable 5にダンス動画の制作パイプラインを任せてみた。
— Ryo@AI動画×AIツール紹介 (@ryo05m) July 12, 2026
①Seedream 5 Proでキャラ設計
②Blenderでマネキンに15秒踊らせる
③動きとカメラをSeedance 2.0に参照
プロンプトでは出しにくい動きがそのまま映像になる。振付のBlenderコードも含めて全部Fable 5。おかげで3D制作環境が一気に整ってきた✨ pic.twitter.com/Vx6LsdtBF6
この手法のメリットは、存在しないダンスを自由に作成できることです。一方で、課題は、3Dモデルの作成時と同じで、bpy(Blender Python)を使ってダンスを設計しているために、単純なモーションになりがちです。筆者の例では、バク転を入れるように指示したのですが、その後の足の動きが不自然です。Seedance 2.0に対し、元動画の動きを参照する度合いを弱めるよう指示することで対策はできるのですが、そうすると、元動画との一致度は下がっていきます。この辺は、バランスを探る必要があります。
他のアプローチとしては、人間のダンスを撮影した動画を参照する方法があります。Blenderには、ポーズ推定の「DW Pose」の利用を可能にするアドオンがあり、それを組み込むことで、動画に登場する人物の動きを推測できます。それで人間の動きを解析させ、3Dモデルのモーションデータとして変換・補正して、キャラクターに適用する手法です。
作例では、以前、Sora2を使って作成したダンス動画の動きを解析させ、プリビズ化しました。VRMのキャラクターを使ってそのモーションを当ててみました。モーションをVRMのリグに適用する過程でスカートが崩れていますが、モーションの理解には都合がいいため、そのまま使っています。そして、Seedance2.0のリファレンスとして使いました。手のひらに動きがないなど、まだまだ改善の余地はありますが、一定の成果は得られています。
△モーション抽出した動画。Seedance 2.0(上)、Sora2の動画(左下)、Blenderプリビズ(右下)
本記事はアフィリエイトプログラムによる収益を得ている場合があります

この連載の記事
-
第164回
AI
AIはすでに、私たちの心を内部で再現しているのかもしれない -
第163回
AI
無料の画像生成AI「Krea 2」が話題 実写もアニメもこなす新勢力 -
第162回
AI
ローカルAIで“しゃべる推理ゲーム”を作ったら、思ったよりちゃんとゲームになってきた -
第161回
AI
わずか3日で停止された新AI「Claude Fable 5」は何がすごかったのか -
第160回
AI
寝不足になるほど面白い ローカルAIと音声合成をつないだら、キャラが普通にしゃべり始めた -
第159回
AI
AIを使える人と使えない人で、とんでもない差が出ると実感した理由 -
第158回
AI
SDXLの次はこれ? アニメ特化のローカル画像生成AI、驚きの実力 -
第157回
AI
AIだけでゲームは作れるのか? Codexに7本作らせて見えた実力と限界 -
第156回
AI
ChatGPTの画像生成AIは本当に最強か Nano Bananaと比べて見えた“弱点” -
第155回
AI
非エンジニアが数百万円級のツールを開発 画像&動画生成AIツールがゼロから作れた話 - この連載の一覧へ






