綺麗な元が物理的に残っていないなら、劣化のほうを作る ― フィルム修復のための合成劣化と8万枚のベンチマーク
古いフィルムの修復には、傷んだ映像と綺麗な映像の対が要る。ところが元の綺麗な版は物理的に失われていて手に入らない。本研究は、アナログからデジタルへの過程を劣化の族の組み合わせとして物理に即して合成し、あわせて実際のアーカイブ映像から81,576枚を集めた評価用の基盤を示す。
論文の概要（独自要約）
- 分野（arXiv分類）cs.CV（+1）
- 著者Mikołaj Jastrzębski, Dawid Glinkowski, Dawid Zieliński ほか（計6名）
- 投稿日2026-07-02
- arXiv ID2607.02131v1
要点
- アーカイブフィルムの修復には、傷んだ映像と綺麗な映像の対が必要だが、元の綺麗な版は物理的に復元できない。
- 提案は、アナログからデジタルへの過程を劣化の族の構造化された合成としてモデル化し、粒状ノイズ・傷・時間方向に一貫したカメラの動きを取り込む。
- 族に分けておくことで、劣化の度合いを制御して多様な条件を生成できる。
- あわせて、実際のアーカイブ映像から採取した81,576枚の高解像度フレームによる評価の基盤を整備した。
- 合成で訓練したモデルは実世界の映像へよりよく汎化した一方、提案ベンチマークは現行手法の系統的な失敗の様式を明らかにしたと報告されている。
1正解が物理的に存在しない
古いフィルムの修復を機械に学ばせるには、傷んだ映像と、その綺麗な版の対が要る。ところがこの対は原理的に作れない。傷んだフィルムの元の状態は、もう物理的に残っていないからである。撮り直すこともできない。そこで従来は、綺麗な映像に人工的な劣化を加えて対を作ってきた。問題は、その人工的な劣化が本物に似ていないことだった。
フィルムの傷みは、粒の粗さも、傷の入り方も、コマをまたいだ揺れ方も、単純なノイズとは性質が違う。
2劣化のほうを、物理に即して組み立てる
- 1過程として捉えるアナログからデジタルへ至る道筋を、劣化の族の組み合わせとして分解する
- 2粒を入れる信号の強さに依存する粒状のノイズを与える
- 3傷を入れるパラメータで形を指定できる傷を加える
- 4揺れを入れるコマをまたいで一貫したカメラの動きを与える
- 5条件を振るこれらを組み替えて、多様な劣化の度合いを制御して作る
要点は、劣化をひとかたまりの「ノイズ」として扱わず、由来の違う族に分けたことである。分けておけば、どの成分をどれだけ強めるかを制御でき、実際のアーカイブに近い条件を狙って作れる。時間方向に一貫した動きを含めているのも、コマごとに独立な劣化では本物にならないからである。
3規模と、測るための物差し
この研究がもう一方で作ったのは、評価の基盤である。訓練データが無い分野では、評価用のデータも無いことが多い。実際の映像を集めて共通の物差しを用意しなければ、手法どうしを公平に比べられない。2026年9月4日時点で当サイトが保持する1,900件のうち3割強がベンチマークに触れているという事実は、いまの分野が「作る」と同じくらい「測る」に人手を割いていることを示している。
4合成で学ぶことの限界も、同時に示される
報告では、この合成で訓練したモデルが実世界の映像へよりよく汎化したとされる一方、提案されたベンチマークは現行手法の系統的な失敗の様式を明らかにしたともされる。合成データで学ぶ以上、合成の仮定が外れる場所では失敗が残る。作った本人たちが、その失敗が見える物差しも同時に出しているところが、この研究の誠実な部分である。
なぜ重要か
正解が物理的に存在しない領域では、正解を集める代わりに、劣化や欠損のほうを作るという道がある。その際に重要なのは、作る側の仮定を族に分けて制御可能にしておくことと、仮定が外れる場所が見える物差しを同時に用意することである。文化資料の保存に限らず、正解が失われた記録を扱う場面に通じる考え方といえる。
よくある質問（FAQ）
なぜ対になったデータが作れないのですか？
なぜ劣化を族に分けるのですか？
ベンチマークも同時に作る意味は何ですか？
出典（一次情報）
出典：arXiv（記述メタデータは CC0 パブリックドメイン）。要約は当サイト独自。原文・PDFは arXiv をご確認ください。
- arXiv 概要ページ（原文・公式）
- PDF（arXiv）
- arXiv ID: 2607.02131