AIビデオ強化

AIビデオ強化とは？

AIビデオ強化は、録画、圧縮、または伝送中に失われたまたは劣化した視覚的詳細を再構築します。単純な解像度のアップスケールとは異なり、目標は大きなピクセルではなく、同じシーンのより高品質なキャプチャが生み出すであろうテクスチャ、エッジ、トーンの範囲を回復することです。

従来のアップスケーラーは既存のピクセル間を補間します（柔らかいまたはシャープだがプラスチックのような画像を生成します）が、現代のAI復元モデルは、低品質と高品質の映像のペアの大規模データセットから学習します。彼らは、基盤となるシーンが最も含んでいたであろう高解像度の詳細を推測し、フレーム間で動き、照明、テクスチャを一貫して保持します。

このページのデモは1970年代のニュースセグメントのクリップを強化します。オリジナルはSD放送品質で、その時代の典型的な圧縮とクロマ損失があります。強化版は、顔の詳細、シーンのテクスチャ、エッジのシャープネスを回復しながら、その時代に適したフィルムグレインとカラーパレットを保持します。

Curifyのビデオ強化アプローチ

プロダクショングレードのビデオ強化は単一のモデルではなく、各失敗モードを処理する専門モデルのパイプラインであり、修正が互いに競合するのではなく、重なり合うようにシーケンスされています。

ステップ1：シーンセグメンテーションとショット検出。パイプラインはシーン境界でクリップを分割し、ショットごとの復元パラメータが照明、動き、コンテンツに適応できるようにします。

ステップ2：フレームごとの復元。動きベクトルを考慮して、詳細の再構築、デブロッキング、ノイズ除去が適用されるため、修正は時間的に一貫性を保ちます — フレーム間で詳細レベルがちらつくことはありません。

ステップ3：時間的安定化。2回目のパスで残留するちらつきを滑らかにし、フレーム間で強化された詳細を整列させ、意図的な自然なモーションブラーを保持します。

ステップ4：品質を考慮したエンコーディング。最終クリップは、復元された詳細を保持するビットレートとコーデックの選択でエンコードされ、復元によって取り除かれた圧縮アーティファクトを再導入することはありません。

AIビデオ強化を使用するのは誰ですか？