自分を撮影せずに作るダンスリール
話題の振り付けとあなたの写真があれば、縦型のリールが完成します。モーション動画がフォーマットを決め、キャラクターはあなたから生まれます。そのまま投稿するか、Montageノードで音楽を追加してください。
ダンス動画と全身写真があれば、Kling 3.0 Motion Controlが写真の人物にそのまま振り付けを踊らせます。顔も服装もそのまま。同じダンスを2つのキャラクターで再現。ワークフロー全体をアカウントなしで確認できます。
本物のワークフロー、本物の結果。自由に移動・ズームできます。
このワークフローを使う実際のワークフロー:ダンス動画をMediaノードに、2枚の全身写真をそれぞれ別のノードに配置し、Kling 3.0 Motion Controlに設定した2つのVideoノードが、動画をビデオポートから、各キャラクターを画像ポートから受け取ります。
概要
モーション転送とは、動画の動きを別の誰かに与えることです。ダンサーが撮影した振り付けと、あなたの全身写真があれば、生成された動画はあなたが彼女とまったく同じように踊っている様子を、あなたの顔、あなたの服装、元の動画の構図で映し出します。エフェクトプラットフォームがmotion transferやGenjutsuという名前で提供しているものです。
Kling 3.0 Motion Controlに設定したVideoノードは2つの入力を受け取ります:モーション動画とキャラクター画像です。出力の長さは動画の長さと同じで、最大30秒。料金はファイルで計測されたその動画の秒数に応じて課金されます。記述する必要はなく、プロンプトは任意で、背景の設定にのみ使われます。
デモでは、同じ振り付けで2つのキャラクターを踊らせています:全身写真とコレクションフィギュアです。全身が写ったキャラクター画像であれば何でも使えます。AIで生成した肖像画、マスコット、ゲームキャラクターなど。
モーション動画を見つける、または撮影する
1人だけの全身が映った、カット無しの動画で、正面または斜め45度、落ち着いた背景で撮影します。リール用なら3~10秒あれば十分です。デモではKlingで生成したダンスを使用しています。
全身写真を撮る
正面を向いて立ち、腕は体の横に、頭から足まで全身が入った、シンプルな背景の写真を用意します。動画の最初のポーズに近い姿勢だと、モデルが正しくスタートしやすくなります。
両方をノードに接続する
動画をビデオポートへ、写真を画像ポートへ接続します。ノードが動画を計測し、クリックする前に720pまたは1080pでの正確な料金を表示します。
生成してから、キャラクターを変更する
キャラクターは動きをそのまま再現します。別の人物にする場合は、写真だけを差し替えてください。モーション動画はそのまま接続を保持します。
同じキャンバスを、別の用途に合わせて調整。各バリエーションは、プロンプトを2〜3行変えるだけです。
話題の振り付けとあなたの写真があれば、縦型のリールが完成します。モーション動画がフォーマットを決め、キャラクターはあなたから生まれます。そのまま投稿するか、Montageノードで音楽を追加してください。
全身が描かれた無地背景のマスコットが、撮影されたダンスを再現します。アニメーターなしで、人間の動きをブランドキャラクターに与えられます。線や色使いはイラストのままです。
デモの2つ目の例がこちらです。コレクションフィギュアが台座から降りて踊ります。物体、おもちゃ、置物など、両腕と両脚があるものならすべて対応できます。
1本のモーション動画、1人につき1枚の写真、1人につき1つのノード:同じ振り付けを10人の同僚が実行し、つなぎ合わせたチームビデオを作成できます。
モーション転送はどんな動きにも対応します。ランウェイの歩き方、手を振る動作、製品デモンストレーション、スポーツの動作など。ファッションウォークのデモは良いモーション動画になります。
自分でその動作を演じて撮影し、Imageノードで全身のキャラクターを生成し、そのキャラクターにあなたの動きを与えます。あなたが演じ、そのキャラクターが登場するという仕組みです。
モデルは1つの骨格しか追跡できません。2人のダンサーがいると、誤った選択をしたり混ざったりします。始めから終わりまで、1人の全身だけを映してください。
キャラクターは全身である必要があります。モデルは脚と足を動かすためにそれらが必要です。上半身だけの写真では、下半身が無理に創作されてしまいます。
写真では腕を組んでいるのに、動画の始めでは腕を上げている、というような場合、最初の数フレームがぎこちなくなります。腕を体の横に垂らした、自然なポーズで始めると、きれいにスタートします。
動きは動画から来るもので、テキストからではありません。プロンプトは背景設定、光、カメラの動きに使います。空欄のままにするのが最良の選択であることが多いです。
いいえ、ダンスはモーション動画から来るもので、あなた自身が踊る必要はありません。全身写真を用意すれば、モデルがあなたにその振り付けを実行させます。
はい、キャラクターは写真から与えられ、動画は動きのみを与えます。顔、髪型、服装は写真のものがそのまま維持されます。
ビデオ構図では30秒、画像構図では10秒までです。それより長い動画は生成前に拒否され、課金は発生しません。まずMontageノードで動画を切り詰めてください。
はい、ノードのスイッチでモーション動画の音声を保持できます。それ以外の場合は、Montageノードでお好きな音楽を追加してください。
料金はモーション動画の長さに応じて、秒単位、720pまたは1080pで決まり、動画が接続され次第、ボタンに表示されます。技術的な失敗の場合は返金されます。
権利をお持ちであれば、技術的には可能です。最も安全なのは、自分でその動作を撮影する、またはデモのようにキャンバス上でモーション動画を生成することです。
ビデオ構図では、出力はモーション動画の構図とセットをそのまま引き継ぎ、あなたのキャラクターがその中に配置されます。写真の背景を残したい場合は、10秒までの画像構図を選んでください。
Wan 3.0は動画からインスピレーションを得て生成されるショットを導きますが、モーション転送はフレームごとに動きを正確に再現し、あなたのキャラクターに反映させます。正確な振り付けが必要な場合はこちらを使ってください。