動画のノイズ除去を AI で — 顔をのっぺりさせない方法

ノイズのすべてが敵ではない

顔をのっぺりさせずに AI で動画のノイズ除去をするには、まずノイズの種類を見分けます。暗所のセンサーノイズ、圧縮によるノイズ、フィルムグレインは、それぞれ合う修復の種類が違います。素材に合うものを選び、短いプレビューで肌や布の質感を元の映像と比べてください。ノイズ除去が強すぎると、ノイズと一緒に質感まで消えてしまいます。

• 低照度の CMOS ノイズ → 夜景・暗所 カード
• 重いフィルムグレイン → 古い映画フィルム カード（フィルムグレイン除去）。写真向けの一律消去ではなく
• 配信の圧縮 → スマート修復。掃除とディテールの組み直しを一度に

ノイズ種類の早見

正直でいられるローカルワークフロー

1. クリップを取り込み、ノイズのある区間をプレビュー
2. ノイズに合う修復タイプを選ぶ：スマート修復、または特殊シーン修復の夜景・フィルムグレイン除去
3. 納品に大きなフレームが要るときだけ、同じ処理で出力解像度を上げる
4. 書き出しは一度。オンラインツールを 5 段重ねしない。

KwaFlux では 1秒／3秒／5秒の無料プレビューで、フルレンダー前に GPU 上で修復タイプとレベルを比べられます。処理のためのアップロードはありません。

声に出して言うべき限界

センサーに届かなかった光を AI が作り出すことはできません。超高感度でつぶれた映像は改善しますが、日中に撮ったようなきれいな映像にはなりません。本当の問題が動きのブレなら、ノイズ除去では直りません。ぼやけた動画を直す方法を参照してください。あわせて読みたい：AI で古い動画を修復する方法：グレインと色。

デノイズは仕上げのグレードではない

ノイズが減っても、絵はまだ仕上がっていません。デノイズが取り除くのはグレーディング前のノイズで、デノイズのプレビューでは問題なく見えた肌も、コントラストや彩度、作品全体のルックを足すと平板になることがあります。この処理は修復と考え、グレーディングはそのあと編集ソフトで行ってください。デノイズしたファイルを書き出しただけで、ルックが完成したと考えないでください。

フィルムグレインとセンサーノイズは別物なので、この記事ではまずノイズの種類を見分けるところから始めます。グレインは多くのグレーディングが前提にしている質感です。消してしまうと、グレーディングで質感を足し直すことになり、たいていはショットの動きについてこないオーバーレイになります。暗所の CMOS ノイズは欠陥に近く、ちらついてエッジを侵食します。出力サイズを決める同じ処理の中で抑えてください。拡大だけをかけると、ちらつきまで大きくなります。圧縮によるモスキートノイズは、エッジのまわりや平らな壁に集まります。処理が強すぎると、壁はのっぺりするのにエッジにはリンギングが残ります。修復タイプは、見分けたノイズの種類に合わせて選んでください。

修復タイプにレベルがある場合は「高速」から始め、プレビューで必要だと分かったときだけ上げます。1 秒の無料プレビューでは、顔と平らな壁を見ます。壁が落ち着き、顔に毛穴が残っていれば、その修復タイプはほぼ使える状態です。3 秒のプレビューでは、頭が動いたときにノイズが波打たないかを見ます。5 秒のプレビューでは、残したいカメラワークを確かめます。パンは一時停止したコマだけでなく、動きの最初から最後まで同じきれいさであるべきです。顔がろう人形のようになったら、出力解像度を上げずに一段下げてください。スマート修復はもともと顔も修復します。グレーディングは修復のあとで、修復の中ではやりません。

時間方向のノイズ除去は、前後のフレームを参照します。複数のフレームにわたって残るディテールは本物の信号である可能性が高く、フレームごとに跳ねる点はノイズである可能性が高いと判断します。一時停止した 1 コマは問題なく見えても、再生すると顔が煮立つように揺れたり、輪郭が泳いだりすることがあります。動いている区間をプレビューしてください。静止画ではこうした問題が隠れてしまいます。

期待しすぎたままグレーディングに進まないよう、限界をはっきりさせておきます。ノイズ除去では、センサーが受け取れなかった光は戻りません。高感度でつぶれた映像は静かになっても、柔らかいままです。動きのブレも動きのブレのままです。それについては ぼやけた動画を直す方法 を参照してください。インターレースの櫛状ノイズはノイズ除去の前に取り除きます。そうしないと、モデルが櫛を残すべき質感として扱ってしまいます。きれいになった映像は、色を仕上げた映像ではありません。ホワイトバランス、コントラスト、作品のルックは、引き続きグレーディングで決めることです。

• 修復タイプを選ぶ前にノイズに名前をつける：CMOS、フィルムグレイン、圧縮のどれか。
• 1 秒、次に 3 秒、次に 5 秒を、顔と平らな面でプレビューしてください。肌が蝋のようなら、その修復タイプかレベルはそのショットには強すぎます。
• 出力解像度は、納得した修復と同じ処理で決めます。消すつもりだったノイズを拡大しないためです。
• 書き出したあとにグレードしてください。ルックにグレインが要るなら NLE で足します。デノイズに、でたらめな残りを残すよう求めないでください。
• 汎用レベルでもまだ潰れているなら、素材がより強い処理に耐えないのかもしれません。切り避けるか、撮り直すか、質感を残してください。

KwaFlux はこれらのプレビューをお使いの GPU で作ります。アカウントなしで作業画面に入り、1 秒、3 秒、5 秒のプレビューを作れます。書き出し、変換、ファイル修復、リンクからのファイルダウンロードには、サインインと有料プランが必要です。画質修復が担うのは修復までで、グレーディングはその次の工程です。