AIで3Dプレビズを実写映像に変える

グレーのプレビズは、ビデオポートを通じて2つのSeedance 2.5ノードに送られ、同じカメラワークのまま、2つの異なる世界の実写映像として戻ってきます。ワークフローはここで確認できます。アカウント登録は不要です。

3Dスタジオからエクスポートした6秒のグレーのプレビズを、メディアノードにドロップしたものインタラクティブデモ

本物のワークフロー、本物の結果。自由に移動・ズームできます。

このワークフローを使う

実際のワークフロー:3Dスタジオからエクスポートした6秒のプレビズを、2つのSeedance 2.5ノードのビデオポートに接続し、ノードごとに1つの世界を割り当てています。2本の映像はどちらもデモから出力されたもので、カメラはプレビズから来ています。

概要

ご用意いただくもの
動画1本 · テキストまたはブリーフ
ワークフローの成果物
動画2本(12秒・720p・16:9)
キャンバスの構成
6個のノードを4本の接続でつないだ構成
使用モデル
Seedance 2.5
1回のフル実行のコスト
約288クレジット($3.46)
アカウント
デモはアカウントなしでご覧いただけます。生成には無料アカウントが必要です(試用クレジット付き)

プレビズとは、灰色の形で表した自分のショットのことです:カメラ、その軌道、タイミング、それぞれの要素の位置。プレビズは眺めるものではなく、フレーミングについて何も新たに考える必要がないよう、ビデオモデルに渡すためのものです。このワークフローはまさにその受け渡しです:プレビズがビデオポートから入り、最終カットが出てきます。

落とし穴は一文に収まりますが、本当に重要なのはそれだけです:指示文には、カメラの動き、フレーミング、速度、リズムをコマごとに「保つ」こと、そして変えるのは世界の見た目だけであることを書かなければなりません。それがないと、モデルはフレームを再構成し、別の動きを考え出してしまい、プレビズが終わらせるはずだったくじ引きに戻ってしまいます。

第二のルールは、あまり明らかではありません:ビデオモデルは、灰色の立方体が何を表しているのか分かりません。デモの2つの指示文はどちらも、すべての形に名前を付けています。赤い球体は熱気球、白い形は海鳥です。プレビズは3Dプレビズスタジオから作られており、そこではシーンを構築し、クレジットを1つも使わずにエクスポートできます。2つのショットを合わせて288クレジットかかります。

デモの実際のレンダリング結果

これらは上記ワークフローの生成ファイルであり、モデルが出力したものをそのまま、加工なしで掲載しています。出発点がある場合はそれも表示しています。

出発点

エクスポートしたプレビズ

レンダリング結果

スチームパンク調の夕暮れのレンダリング:塔の間への同じプッシュ、革と真鍮の気球、フレームを横切る海鳥Seedance 2.5で生成
夜明けのドキュメンタリー調レンダリング:ガラスの都市、冷たい霧、赤いナイロンの気球とカモメ、プレビズと同一のカメラSeedance 2.5で生成

対象となる方

欲しいショットが既に決まっていて、正しいフレーミングを得るために何度も生成をやり直すことに疲れた、監督、広告制作者、AI映像作家の方々。

ご用意いただくファイル

4秒から30秒のプレビズmp4で、1コマあたり407,696ピクセル以上のもの:3Dプレビズスタジオからのエクスポートはそのまま使用できます。

手順

  1. 1

    3Dでショットを組む

    3Dプレビズスタジオで、セット、登場人物、カメラ、軌道を設定し、mp4をエクスポートします。ここまではすべて無料です:クレジットを消費するのはビデオのレンダリングだけです。

  2. 2

    プレビズをビデオポートに接続する

    開始画像には接続しないでください。ビデオポートこそが、プレビズを書き換え対象のソースに変えるものです。開始画像を使うと、モデルはmp4を写真として読み込んでしまい、ショットが最初からやり直しになります。

  3. 3

    フレームの再構成を禁止する

    そのままコピーすべき一文はこちらです:カメラの動き、フレーミング、速度、リズムをコマごとに保ち、変えるのは世界の見た目だけにすること。

  4. 4

    灰色の形すべてに名前を付ける

    赤い球体は熱気球、白い形は鳥です。これらの文がなければ、モデルは正体を識別できていない立体の周りに世界を描いてしまい、物体は何にでも変わってしまいます。

バリエーションと活用例

同じキャンバスを、別の用途に合わせて調整。各バリエーションは、プロンプトを2〜3行変えるだけです。

撮影不可能な広告

都市の塔の間を飛ぶ熱気球を撮影した映像:このショットは288クレジットで済み、ヘリコプター、パイロット、そして決して間に合わない飛行許可の代わりになります。

同じショットを複数の雰囲気で

クライアントが3つのアートディレクションで迷っている場合:プレビズは1つ、指示文を3つ、最終カットも3つ。カメラは3つの間で1ピクセルも動かないので、比較できるのは本当に雰囲気だけです。

編集で足りないつなぎのショット

すでに撮影した2つのシーケンスの間に、1ショットが足りない場合。プレビズが正確な長さとカメラの軸を固定し、レンダリングした映像はつなぎ目を見せずにはめ込まれます。これは自由な生成ではほとんど実現できません。

プロデューサーに見せるアニマティック

重要なシーンを1つ実際にレンダリングすれば、どんな絵コンテにも勝ります:決定権者は光、スケール、タイミングを実際に見ることができ、想像する必要があるのはまだ書かれていない部分だけになります。

短編映画の冒頭ショット

冒頭のショットは、10回もやり直すことになるものです。3Dで組んでから一度だけレンダリングすれば、10回試すより安く済み、あとは短編映画のワークフローが物語の残りを引き継いでくれます。

身振りこそが重要なとき

保つべきものがカメラではなく身体の動きである場合は、写真を踊らせるを使えば、参照映像の身振りをキャラクターに転写できます。これはこの仕事のもう半分にあたります。

よくある失敗

フレームの再構成を禁止しないこと

これは、3D作業のすべてを無駄にしてしまう間違いです。カメラ、フレーミング、タイミングを固定する一文がなければ、モデルは自由に振る舞います:広げたり、遅くしたり、別の動きを考え出したりして、プレビズは何の役にも立たなくなります。

プレビズを開始画像に接続すること

その場合、mp4は画像として読み込まれ、ショットは画像からビデオへの生成に戻ってしまい、動きは失われます。既存のビデオを書き換える作業として認識させられるのは、ビデオポートだけです。

灰色の形に名前を付けないこと

ビデオモデルは、赤い球体が熱気球であるとは推測してくれません。名前を付けなければ、形は単なる色のパッチになったり、周りに描かれる世界の中に消えてしまったりします。

30秒のプレビズをエクスポートすること

ソースの長さはすべて課金対象になり、ショットが長くなるほど、モデルが逸脱する機会も増えます。6秒から10秒であれば1つのアイデアに収まり、そのアイデア分の料金しかかかりません。

おすすめモデル

よくある質問

デモのプレビズはどこから来ていますか?

Imaginodeの3Dプレビズスタジオからです:鳥と気球のシーンをブラウザ上で作り、mp4としてエクスポートし、6秒に切り取っています。3Dソフトは不要で、この部分でクレジットは一切消費していません。

なぜ14秒ではなく6秒なのですか?

入力ビデオはその長さをそのまま押し付けるからです:ソースの長さがそのまま料金になります。6秒であれば1ショットあたり144クレジットですが、まったく同じデモを14秒で行うと336クレジットかかってしまいます。

カメラの動きは本当に保たれていますか?

デモの2つのショットどちらも、塔の間へのプッシュ、気球が通過するタイミング、羽ばたきはプレビズと同じコマに収まっています。変わるのは質感だけです:一方は真鍮、もう一方はガラスと冷たい霧です。

2つのレンダリングにはいくらかかりますか?

288クレジットで、720pの6秒ショット1本あたり144クレジットです。別の指示文で1つの世界だけをやり直す場合は、144クレジットしかかかりません。

どの作業にどのモデルを使えばいいですか?

Seedance 2.5は渡したビデオを「書き換え」ます。これがこのページで紹介している方法です。Wan 3.0はビデオを単なる参照として扱い、長さとフレーミングの制御を保ちます。Kling 3.0 Motion Controlは、正確な身振りをキャラクターに転写します。

3Dソフトの使い方を知っておく必要がありますか?

いいえ。3Dプレビズスタジオはブラウザ上で動作します:シーンを説明し、マウスでカメラを配置し、エクスポートするだけです。これはワークフローの無料部分であり、同時に最終カットの出来を決める部分でもあります。

出力フォーマットはどうなりますか?

プレビズのフォーマットに従います:ビデオを入力すると、プロバイダーは長さ、アスペクト比、解像度を自分で指定することを受け付けず、出力はソースに従います。デモでは1280×720のmp4を入力し、1280×720で出力されます。

レンダリングには音声が付いていますか?

いいえ、両方のノードで音声はオフになっています:無音のプレビズはモデルに渡せる音がありません。音楽や効果音は、たとえばビデオに音を付けるを使って後から追加します。

AIで3Dプレビズを実写映像に変える

このワークフローを使う

無料アカウント、クレジットカード不要。ワークフローは入力済みの状態でキャンバスに開きます。