使い分け戦略:FunControl×S2Vで制作を最適化
FunControlとS2Vの2つのモデルは、Bilibiliなど中国のSNSコミュニティでは高い期待を集めています。ミュージックビデオなどの動画をより作りやすくなったと考えられているためです。キャラクターがカメラから離れたカットではFunControlを使い、近い重要なカットではS2Vを使ってリップシンクを使うといった使い方ができるのではと提案されています。
Wan2.2シリーズは描画能力の高さは評価を得ていますが、生成時間が5秒を基準に学習がなされています。そのため、Wan2.2で最終フレームを指定していても、5秒を超えると、最初のフレームに画像を戻そうという動きが自然に出てきます。そのためWan2.1でも、5秒単位でカットを切り替えて全体のビデオをとしてつなぐという方法が取られてきたのです。
しかし、FunControlはそうした制約を崩してくれます。S2Vを短めのカットでつなぐ形でリップシンクした状態を組み合わせることで、実用的なレベルにすることができるのではというわけです。
Wanシリーズの評判は高く、2月にWan2.1を公開して以来、7月末にはHuggingFaceと中国ModelScopeを中心に累計約500万ダウンロードだったのが、8月27日には、約690万ダウンロードに達したと明らかにしています。この1ヵ月の急増分は、新たに登場したWan2.2シリーズの影響が大きいといえるでしょう。
Wan2.2シリーズは無料で公開されているものの、ハイエンドのローカルPCであっても、品質と生成時間で考えると、サイズの大きなモデルであり、多くのユーザーはクラウドで利用することになるでしょう。アリババはAPI収入を見込んでの展開を進めていると考えられます。一方で、ライセンス条件は使いやすいApache-2.0を採用し、使用時に厳しい制約もないため、高い支持を集めています。ユーザーコミュニティ形成で優位に保つことで、改良を積極的にする先端のユーザーイノベーションを取り込めると同時に、国際展開を有利に進めようという意図を感じます。
本記事はアフィリエイトプログラムによる収益を得ている場合があります

この連載の記事
-
第177回
AI
AIに「法隆寺の五重塔」を作らせてみた 修正を重ねてたどり着いた驚きの完成度 -
第176回
AI
無料ツールとAIでMV制作が激変 After Effectsまで自動操作できた -
第175回
AI
AIが人間のようにゲームをプレイ 話題の「Jev」を試してわかったこと -
第174回
AI
AIでMVを作るのは想像以上に大変だった 制作34時間、繰り返した“ダメ出し”でわかったこと -
第173回
AI
OpenAI「Astra」は何でもできる、だからこそ“プロの指示”が必要になる -
第172回
AI
ついにAIキャラクターと“ビデオチャット”へ 「MiniMax H3」がリアルタイム生成に接近 -
第171回
AI
5秒の動画を3秒で出せる 動画生成AI「MiniMax H3」が爆速に進化 -
第170回
AI
「うわ、すげえ!」Unreal EngineをCodexに操作させたら制作の常識が変わった -
第169回
AI
もはやローカル動画生成AIの枠におさまらない。MiniMax H3の奥が深すぎる -
第168回
AI
とんでもない動画生成AIが出てきた 無料で試し放題の「MiniMax H3」を徹底検証 -
第167回
AI
“Fable級が無料”は本当か AI市場を震撼させた「Kimi K3」を試した結果 - この連載の一覧へ





