フレームから動画を作るAI
2枚の画像から、1本のクリップ。開始フレームと終了フレームを設定すれば、その間をつなぐ動きをモデルが生成します。最後の構図は、モデルが流れ着いたものではなく、あなたが選んだものになります。
- 開始・終了フレームを自分で指定
- 予測しやすく再現できるトランジション
- 同じフレームを使えばループに
- 生成した静止画でも撮影した写真でも
最初と最後のフレームからの生成のしくみ
このモードでは、プロンプトの代わりにアートディレクションを行います。シーンを頼むのではなく、その前後を挟む2枚のフレームを渡し、中間をモデルに解かせるのです。
- 01
始まりのフレームを選ぶ
クリップの始まりとなる静止画をアップロードするか生成します。ここでは解像度より構図が重要です。このフレームに写っているものが動画の最初の瞬間になり、モデルがそれを再解釈することはありません。
- 02
終わりのフレームを選ぶ
クリップがたどり着くべき静止画を追加します。2枚の差が大きいほどモデルが創作する部分が増え、中間がさまよいやすくなります。小さく意図的な変化がいちばん自然に見えます。
- 03
被写体ではなく動きを説明する
このモードのプロンプトは、AからBへどう移るかについて書きます。カメラのプッシュ、振り向く動き、回転する商品、変化する光。被写体はすでにフレームで決まっています。
プロンプトではなく、前後を挟んでショットを作る理由
終わり方があらかじめ決まる
テキストから動画では、最後のフレームはモデルが流れ着いた構図になります。前後を挟めば最終フレームは自分で決めたものになり、クリップを別の映像につなぐ必要がある場合に効いてきます。
きれいなループ
最初と最後のフレームに同じ画像を使えば、クリップは始まった場所に戻ります。目に見える継ぎ目のないループを作るいちばん素直な方法です。
2つのショット間のトランジション
あるクリップの最後のフレームと次のクリップの最初のフレームを使い、それをつなぐ動きを生成します。上に重ねるエフェクトではなく、映像の一部としてのトランジションです。
商品の回転と見せ場
正面から斜め45度へ、閉じた状態から開いた状態へ、空から満杯へ。2枚のフレームが動きの両端を固定するので、商品は最後まで商品のままです。
手持ちの静止画を活用
写真、レンダリング、スクリーンショット、画像スタジオで生成した画像など、どれもフレームとして使えます。ひとつのツールの中で作る必要はありません。
比較しやすい再生成
両端が固定されているので、同じ2枚を別のプロンプトで再生成しても変わるのは動きだけです。動きの試行錯誤が、ただの引き直しではなく本当の実験になります。
前後を挟む手法が真価を発揮する場面
ループ背景
サイトのヘッダーや配信のオーバーレイで、目に見える継ぎ目なく延々と流し続けるための環境映像。
ビフォー・アフター
部屋、顔、服、グラフなど、ペアで意味を持つ2つの状態を、ひと続きの変化としてアニメーション化します。
ロゴとタイトルの動き
ブランドマークがロックアップに収まり、編集のほかの部分が想定するちょうどのフレームで終わります。
マッチカット
韻を踏む2つの構図を、クロスディゾルブではなく生成した動きでつなぎます。
商品の回転
カタログの2つのアングル間をコントロールされた回転でつなぎ、ほかで使っているメイン画像でショットが終わります。
絵コンテからアニマティックへ
キーフレームとして描いた絵コンテの間の動きを生成し、クライアントにタイミングを見せられます。
モデルが実際につなげられる2枚のフレームの選び方
フレームから動画でよくある失敗は、変化を求めすぎることです。開始フレームが夜の屋外のワイドショットで、終了フレームが屋内の顔のクローズアップだとしたら、それをつなぐ連続した動きは存在しません。するとモデルはカット、モーフィング、にじみのどれかを作り出しますが、どれも望んだものではありません。2枚のフレームをひとつのカメラワーク、ひとつの動作の両端として扱えば、結果は破綻しません。
中間を自然に見せるのは、意図した変化以外のすべての一貫性です。照明、レンズ、色味、背景を2枚で揃え、動くべきものだけを変えてください。2枚の静止画の出どころが違う場合、たとえば一方が撮影で一方が生成なら、生成前に数分かけて一貫性を整える価値があります。そうしないと、モデルはクリップ全体を2つのルックの折り合いをつけることに費やしてしまいます。
もうひとつの調整手段は長さです。よく似た2枚のフレームの間を4秒で生成すれば、ゆっくりとコントロールされた動きになります。同じ2枚でも12秒にすると、頼んでいない動きをモデルが加える余地が生まれます。結果が間延びしていると感じたら、プロンプトを書き直すよりクリップを短くするほうが、たいていは良い解決策です。
最後に、フレームはアンカーであって、スタイルを縛る拘束具ではないことを覚えておいてください。動きの感じ方は引き続きプロンプトで決まります。フレームがまったく同じでも、手持ちのゆらぎと固定のドリーは別の依頼です。決める前に、同じ2枚を2〜3通りで生成してみる価値があります。
最初と最後のフレームに関するよくある質問
- フレームは2枚とも必要ですか？
- いいえ。最初のフレームだけなら通常の画像から動画と同じように動作し、終わり方はモデルに任されます。2枚目のフレームがあることで、コントロールされた動きになります。最後の構図が重要なときは必ず追加してください。
- 2枚のフレームのサイズが違っても大丈夫ですか？
- アスペクト比は揃えてください。形が合わない場合は、選んだ出力比率に合わせてトリミングまたはレターボックス処理され、たいていは一方のフレームの一部が知らないうちに切り捨てられます。
- 継ぎ目のないループはどう作りますか？
- 両方のフレームに同じ画像を使ってください。クリップはその構図から離れて戻ってくるので、目に見えるカットなしに繰り返し再生できます。
- どのモデルが対応していますか？
- このモードは開始画像と終了画像を受け付けるモデルでのみ提供され、フォームにはそれらだけが表示されます。使いたいモデルが見当たらない場合は、そのモデルがまだこの機能に対応していないということです。
- テキストから動画より料金は高いですか？
- いいえ。料金はほかの生成と同じく、モデル、長さ、解像度で決まります。フレーム自体に費用はかかりません。