映像から物体を消す — ローカルで、クラウドではなく

短い答え

動画から物体を消すには、その物体に印を付け、隠れていた部分を前後のフレームからインペインティングのモデルに作り直させます。動く物体にはダイナミック追跡除去、止まっている物体には静止物体除去を使います。仕上がりは、その後ろをカメラが映していたかどうかで決まります。人混み、繰り返しのタイル、細い棒は今も難しいケースです。ローカルでは AIオブジェクト除去 を使います。

まず、撮ったショットから何を消したいかを決めます。画面を横切る歩行者、自転車、車は動的な作業で、1 つのコマで対象に点を打てば、トラッキングがマスクを追わせます。ゴミ箱、置かれた看板など動かないものは静的な作業で、その範囲を指定して、後ろにあったものを補完で作り直します。消すのではなく差し替えたいなら、もう一度消去するのではなく指定物体の背景置換を使ってください。

まず動的か静的かを選ぶ

• フレームを横切る歩行者、自転車、車 → ダイナミック追跡除去。1フレームに点を置き、トラッカーがマスクを運ぶ。
• 止まった箱、看板、固定の雑物 → 静止物体除去。領域をスタンプし、埋めに後ろを組み立て直させる。
• クイック修復、標準修復、高品質修復は同じレール上です。上の段はそのマークにより多くの時間を使います。書き出しを積む前にプレビューします。

マークは素材のなかの物体——指させる人物か小道具——でなければなりません。その対象に点を置き、マークを横切るところで無料の 1・3・5 秒プレビューを見てください。そこで埋めが持つなら、自分の GPU で書き出しを積んでください。

埋めが借りられるもの

• 埋めが塗るのは、隣接ピクセルが支えられる質感か、物体がどいたあとに近いフレームが実際に見せた質感
• 群衆、繰り返すタイル、細い棒はまだ難しい。マスクは保てても、埋めに安定して借りるものがない
• 物体が背景を長く隠す区間は、短い横断より難しい

ショットのあいだ誰かがずっとほかにはない看板の前に立っていると、借りてこられるきれいな部分がなく、埋めた部分は推測になります。1 秒・3 秒・5 秒の無料プレビューでは、被写体がマークした範囲を横切る区間を見てください。1 コマだけなら穴がふさがって見えても、次のコマで穴が広がっていくことがあります。広がるなら、書き出す前にマスクを再生成するか、レベルを変えてください。そのコマをビフォーアフターとして扱わないでください。

邪魔の消し方

1. 合う作業台を開き、自分で撮ったクリップを読み込む
2. 点でマークする。マスクが這うなら作り直し、いちばん難しい区間で1秒・3秒・5秒をプレビューする
3. 被写体がマークを横切るあいだ埋めが持つときだけ、このマシンで書き出す

書き出し、変換、ファイル修復、リンクからのファイルダウンロードには、サインインと有料プランが必要です。判断するのは 1 コマではなく動きです。マークの後ろの背景がそのショットに一度も映っていなければ、上の画質レベルにしても、借りてこられる映像は増えません。消去はお使いのパソコンで行い、クリップをアップロードする必要はありません。

作業台を切り替えるとき

物体が止まって見えるだけなら、モジュールを切り替えます。少し転がる車は動的で、隅にずっとある看板は静的です。置かれたゴミ箱を追跡したり、歩いている人を 1 コマだけで指定したりすると、マスクが対象を見失い、補完が残したい背景まで汚してしまいます。マスクがずれたら、レベルを変える前に再生成し、同じ横切りの区間をもう一度プレビューしてください。消したい物体が複数あるなら、別々の作業としてマークし、それぞれの横切りをプレビューします。人混みは、扱いやすい歩行者を重ねたものではありません。密な重なりや細い棒は、どちらのモジュールでも難しいままです。モジュールは物体の種類ではなく、動きで選んでください。