要点
まず、実際に何が不安定なのかを見極める
動きは無視して、クリップを一度見てください。同じ顔の形、生え際、年齢が変わるなら、それは本人性のずれです。顔は認識できるのに、肌の質感、ジュエリー、背景の線、光がフレームの間で脈打つなら、それはちらつきです。カメラの動きの間にフレーム全体が歪むなら、それは幾何学的な不安定さです。これらのカテゴリーには別々の修正が必要です。ずれには強い元の本人性、ちらつきには細かいディテールの削減、幾何学的な歪みにはよりシンプルな動きや構図です。すべての問題をちらつきと呼ぶと、的外れな層を直しかねない場当たり的なプロンプトの修正に陥ります。
最も強い元フレームから始める
画像から動画は、最初のフレームの長所と曖昧さの両方を引き継ぎます。ぼやけた顔、切れた手、映り込んだ横顔、細かい柄があると、モデルが被写体を再構築する方法がいくつももっともらしく生まれ、その選択は時間とともに変わりうるのです。最終的なアスペクト比で、被写体が背景から分離し、重要な特徴がはっきり見える鮮明な元画像を使ってください。動きの生成が弱い静止画を補修してくれるとは期待しないでください。必要なら、先に開始フレームを生成または編集し、画像として承認してから、動かしてください。
画像と衝突するプロンプトの指示を取り除く
よくある画像から動画のプロンプトは、見た目の描写をすべて繰り返したうえで、気づかないうちに元の画像と矛盾しています。髪の長さ、照明の方向、衣装の細部、カメラアングルが違うといった具合です。するとモデルは、見ているものと読んでいるものの間を行き来します。プロンプトを動き、表情、カメラまで削ってください。見えている属性を変える必要があるなら、その変更だけを書き、ずれのリスクが高まることを受け入れてください。複数の外見の変更に大きなカメラの動きが加わると、元のフレームを動かすのではなく、実質的に新しい生成になります。
バージョンと選択肢
- 失敗を、本人性のずれ、局所的な質感のちらつき、フレーム全体の幾何学的な歪みのいずれかに分類します。
- 元画像を、意図する出力のアスペクト比で、鮮明でクロップされていないフレームに差し替えます。
- 元の画像と重複または矛盾する外見の描写を取り除きます。
- 動きの振れ幅を下げ、1つの連続した動作の間、顔が見えるようにします。
- 解像度や尺を上げる前に、利用できる最短の尺でテストします。
- 控えめな試行が2回失敗したら、同じリクエストを繰り返さず、テンプレートかモデルファミリーを変更します。
根拠とガイド
ディテールを足す前に、動きを減らす
大きな首振り、素早い回転、突然の遮蔽、急なカメラのオービットは、元にない視点をモデルに作り出させます。作り出されたそれぞれの視点が、顔や衣装を違うように作り直す機会になります。動きの振れ幅を下げ、顔が見える状態を保ち、急な方向転換を1つの連続した動作に置き換えてください。モデルにモーション強度のコントロールがあるなら下げます。ない場合は、プロンプトで目に見える抑制を示してください。「わずかな首振り」「穏やかな髪の動き」「ゆっくりプッシュイン、被写体は静止」のようにです。品質を上げる言い回しを追加する前に、安定性が改善することが通常です。
クリップを短くして、蓄積したずれの位置を探る
本人性の誤りは時間とともに複利で増えます。最初の3秒は安定していて、最後の2秒が不安定なら、プロンプトは問題なく、そのショットが保てる範囲を尺が超えているだけかもしれません。利用できる最短のテストを生成してください。それが機能したら、慎重に延ばすか、きれいな最終フレームを次の開始フレームとして使ってクリップをつなげます。長いレンダリングを繰り返すより安く、診断にも役立ちます。解像度は見える細部を改善できますが、すでに変わってしまった本人性は直りません。最初に調整すべきコントロールは、尺と動きです。
テンプレートやモデルを変えるべきタイミング
テンプレートは、ワークフロー、プロンプトのパターン、モデルを組み合わせたものです。同じ元画像で控えめな動きにしても2回の試行で不安定さが残るなら、動きの要求が少ないか、別のモデルファミリーを使う別のテンプレートに切り替えてください。まったく同じリクエストを繰り返しても、同じ弱点を再びサンプリングするだけです。シンプルなベースラインのテンプレートを1つ用意して比較します。それで被写体が保たれるなら、元のエフェクトは元画像やモデルに対して欲張りすぎです。どのモデルでもずれるなら、これ以上クレジットを使う前に、開始画像とプロンプトの矛盾のチェックに戻ってください。
