白黒デプス動画駆動 · 自前モデルによる女装展示ワークフロー

Wanワークフローファッション画像から動画7秒
まず対象となるダンス動画を白黒のデプス動画に変換し、次に自分だけのモデルキャラクターカードを生成する。最後に一行のプロンプトで、モデルに動きだけを学ばせ、元映像の人物やシーンは学ばせないようにして、純白背景での女装展示を行う。元の投稿は三段階のワークフローだが、実際にモデルに与えるプロンプトはたった一文だけである。
PROMPT · 動画生成プロンプト
AIで作ってみる
女性ファッションの展示動画を生成する。人物は参照画像1を使用し、背景は純白にすること。動画は人物のダンスの動きだけを参照し、その白黒映像や人物のアイデンティティ、元のシーンは参照しないこと。
✍️ 編集部の解説

このプロンプト自体は一文だけで非常に薄いが、本当の工夫はワークフローの分割にある:ポーズ・動きのデータと最終的な画面上のアイデンティティを、モデルに二段階に分けて与えている。まずデプス動画で純粋な動きの骨格だけを抽出し、元映像の人物とシーンの情報を消し去る。そうすることで、3段階目のプロンプトは「肯定的な指定+否定的な除外」による一度の絞り込みだけで済む。「Aだけを参照し、B、Cは参照しない」というように、一文の中にホワイトリストとブラックリストを両方詰め込む書き方は、画像から動画への生成が脱線するのを防ぐ最も手軽な方法であり、ショットの細部を積み上げるよりも効く。なぜなら動きはすでにデプス動画によって固定されており、プロンプトは学習してはいけないものを名指しで除外する役割だけを担えばよいからだ。

より細かい制御をしたい方へ:編集部による拡張参考版(原文プロンプトではありません):
4つのステップに分解する: 1. 構図:人物は中央に立つか、ゆっくり回転してドレスの全身を見せる。カメラは固定するか、非常にゆっくり寄せる。元動画のカメラアングルには追従しない。 2. 照明:純白の背景に、柔らかく均一なスタジオライトを当てる。四方から補助光を入れて影を消し、生地の質感とシルエットを際立たせる。 3. 動きのテンポ:参照するダンスの動きの長さと転換点に合わせるが、動きの幅はやや控えめにして、スカートの揺れがはっきり見え、ブレないようにする。 4. 締め:最後の一拍は全身のシルエットがはっきり見えるポーズで止め、展示の決めカットとする。
AIで作ってみる
ワークフロープロンプト
PROMPT · プロンプト全文
AIで作ってみる
1. 対象となる動画を見つけて白黒のデプス動画を生成する。このステップは非常に速く、codexに生成してもらうか、pythonスクリプトを書いてもらってもよい。 2. 自分自身のモデルを生成する。できればキャラクターカード形式が望ましいが、単一画像でも構わない。 3. プロンプトで動画を生成する:女性ファッションの展示動画を生成する。人物は参照画像1を使用し、背景は純白にすること。動画は人物のダンスの動きだけを参照し、その白黒映像や人物のアイデンティティ、元のシーンは参照しないこと。
✍️ 編集部の解説

このブロックは三段階のワークフローそのものであり、実際の役割分担は前半の二段階にある:まず対象動画を白黒のデプスマップに変換し、動きの骨格情報だけを残す。人物とシーンの情報はデプス情報によってすべて消え去り、このステップはcodexにスクリプトを書かせて自動化することもでき、人手を介する必要すらない。次に自分自身のモデルを個別に生成する(キャラクターカードが望ましいが単一画像でも可)ことで、「誰が演じるか」と「どう動くか」を完全に切り離している。三段階目こそが実際に動画モデルへ渡されるプロンプトであり、たった一文で済むのは、前の二段階ですでにロックすべき情報をすべてロックしてあるからだ。このように「データ準備はワークフロー側で行い、プロンプトは仕上げだけを担う」という階層的な考え方は、一文にすべての制約を詰め込もうとするより安定する。

AIで作ってみる
関連作品
׋›
↑