目次
ダンス動画からキャラクターを動かすには、キャラクター画像と利用許可のある演技動画をキャラクターから動画へに追加します。動画が動きを、画像が新しい演者を提供します。先にキャラクター用リグを作る必要はありません。
これは見た目のスタイル変換ではなく、動作転写です。新しいキャラクターが参照動画の動きを明瞭に再現できるかを見ます。
参照動画は、キャラクターから動画へが追う演技を提供します。ダンサーの体の動き、タイミング、カメラ構図、場面との位置関係が含まれます。
キャラクター画像は見た目を提供し、顔、髪、体の比率、衣装、全体の画風を定義します。
結果を診断するときは、2つの役割を分けて考えます。
キャラクター画像を変えても、参照動画で隠れている足は現れません。ダンス動画を変えても、細部が多すぎる衣装は簡潔になりません。
キャラクターから動画へは動画から動画とも異なります。元の演者を別の画風にするなら動画から動画、別のキャラクターに動かせるならキャラクターから動画へを使います。
1人のダンサーが頭から足まで見える短い動画を使います。固定カメラで、カットのない1フレーズなら確認しやすくなります。
キャラクターから動画へはMP4、MOV、AVIに対応しています。選んだモデルが長い生成に対応していても、最初は6～10秒の区間を使います。
横への一歩、腕を払う動き、半回転、最後のポーズなど、重要な動作を1つ選びます。
音を消して元動画を見ても、体のシルエットから流れが分かる状態が理想です。
アップロード前に遮蔽を確認します。
これらの動作が禁止されているわけではありません。生成キャラクターが動くために必要な情報が隠れるという意味です。
自分で撮影したもの、ライセンスを得たもの、再利用の許可を得たダンスを使います。公開されているTikTok、Reel、YouTube動画でも、自動的に再利用権が付くわけではありません。
顔、手、脚、足が判別できる画像を使い、手や靴が画面端に触れないよう体の周囲に余白を残します。
自然な立ち姿はシルエットを分離しやすくします。腕を胴体から少し離し、両足を見せます。
服が簡潔なら追う細部も減ります。ゆるいストラップ、重なったアクセサリー、複雑な柄、非常に長い髪は動作中に変わることがあります。
画像のクロップをダンスに合わせます。太ももで切れたポートレートでは、足さばきが重要な参照動画に必要な全身デザインを提供できません。
依頼制作した絵、手描き素材、マスコット、自分が権利を持つ画像を使えます。AI生成画像は必須ではありません。
新しいベースが必要ならDomoAI テキスト→画像生成を使います。次のプロンプトは全身の元画像用であり、動作生成用ではありません。
採用したキャラクター画像をAssetsに保存し、最初の動作転写を評価する間は変えないでください。
体の比率が大きく違うと、同じ動きでも見え方が変わります。ちびキャラは現実的なダンサーより脚が短く、頭が大きくなります。
参照動画の動きは使われますが、新しい体は別のシルエットでその動きを表現します。深い横移動も、短い脚のキャラクターでは小さく見える場合があります。
生成前に次を比較します。
解剖学的に完全一致させる必要はありません。デザインがダンスの見え方をどこで変えるかを把握します。
最初のテストでは、演者に比較的近い体型のキャラクターを選び、極端なデフォルメは2回目以降に試します。
開始ポーズも比較します。正面向きのキャラクターが、横向きから始まる参照動画に入る場合があります。近い向きから始めると、冒頭フレームの変化を減らせます。
キャラクターから動画へを開き、利用許可のある演技とキャラクター画像を追加します。実際の企画に合わせてモデル、長さ、比率、解像度、音声、Subject Onlyを選びます。
Seedance 2.0、Seedance 2.0 Fast、DomoAI 2.4.1を利用できます。SeedanceはByteDanceのモデルで、DomoAIがAPIを統合しています。
Seedanceモードは4～15秒、480P、720P、1080Pに対応します。DomoAI 2.4.1は1回の生成で最長30秒です。
短い動画から始めます。6～10秒の参照なら、長い振り付けより1つの動作を比較しやすくなります。
主な演者だけを変え、背景を元動画に近く保ちたい場合はSubject Onlyを使います。背景が完全に変わらない保証はありません。
最初の確認では主要入力を固定します。キャラクター、参照動画、モデル、クロップ、Subject Onlyを同時に変えないでください。
結果全体を通常速度で再生し、参照動画と生成版の同じ動作を比較します。
横移動、腕のスイープ、回転、最後のポーズが判別できるか、1つの具体的な質問で確認します。
次に変える入力は、問題の発生元で決まります。表を使って最初の確認対象を選びます。
これは優先順位であり、結果の保証ではありません。生成ごとに差はあります。
意味のある入力を1つだけ変え、同じ瞬間を再比較します。5項目を変えると、結果に影響した選択が分からなくなります。
参照動画では動きが見えているのに、デザインで表現できない場合はキャラクター画像を変えます。
体が切れている、腕と胴体が重なる、靴が不明瞭、服が関節を隠すといった状態が目印です。顔が極端な1方向からしか描かれていない場合も、回転で崩れやすくなります。
キャラクターの同一性は保ち、試行ごとに再設計するのではなく、明瞭な元ポーズや広いクロップを作ります。
ブランド用の固定デザインがある場合は、アニメーション用画像だけを整理します。公式衣装を保ちながら、重なりを分け、シルエットを明瞭にできます。
重要な動きが隠れる、ぼける、切れる、速い編集に押し込まれている場合は参照動画を変えます。
新しいキャラクター画像でも、画面に映っていない足さばきは復元できません。元素材で交差した手足を分離することもできません。
同じ振り付けを固定カメラで再撮影します。速度が問題なら演技自体を自然に遅くします。アップロード尺に合わせるためだけに再生速度を変えないでください。
1人のダンサーを画面内に収め、動作の途中でカットせず、最後のポーズを終えられる余白を残します。
転写が整ってから編集ソフトで媒体向けに仕上げます。9:16または16:9へ切るのは、必要な動きがクロップ後も見えることを確認してからです。
トレンド向けならAIダンスのワークフローも試せます。動きが整ってから動画アップスケーラーを使います。
アップスケールは細部を改善できますが、抜けた回転、隠れた足、壊れた手の接触は戻せません。
はい。キャラクターから動画へはキャラクター画像と参照動画を使うため、先にボーンリグを作る必要はありません。
DomoAIは元の動きを保つ機能として説明しています。実際には体の比率や生成された細部で見え方が変わるため、動画全体を確認してください。
脚と足が重要なら全身画像を使います。寄りのジェスチャーには寄り画像も使えますが、映っていない衣装や靴は定義できません。
Subject Onlyは変更を主な演者に集中させ、背景を元動画に近く保てますが、ピクセル単位で同一になる保証はありません。
壊れた細部を隠す、または矛盾させる入力を替えます。動きが不明瞭なら参照動画、クロップ、比率、デザインの問題ならキャラクター画像を変えます。
動きは動画から、演者は画像から来ます。役割を分ければ、再試行の診断がしやすくなります。
キャラクターから動画へを開き、利用権のある短い動きを1つ試してください。
最近の記事
