見た目が合っていても、形は合っていない ― 観測した時間の外側の表面を測るベンチマーク「FutureSurf」

1撮った時間の外側は、誰も測っていなかった

動く場面を3次元に復元する研究は数多いが、その評価はほぼ常に、撮影された時間の内側で行われてきた。撮った範囲をどれだけ忠実に再現できたか、である。ところが実際に使う場面が求めるのは、その先の形であることが多い。現実の映像に何かを重ねて描くとき、ロボットが物に触れるとき、先を見越して動きを計画するとき、必要なのは撮影が終わった後の時刻における表面の位置である。それを測る共通の物差しが無かった。

2何を測り、どう反証するか

1. 1訓練する系列の最初の75パーセント、つまり観測された部分だけで学ばせる
2. 2将来を採点する取り置いた後半について、フレームごとに取り出した表面を距離で採点する
3. 3差を診断する将来の得点そのものを主要な指標とし、観測部分との差を診断として見る
4. 4反証を仕込む表面が動かない運動など、差が出ないはずの場合を統制として混ぜる

この設計で重要なのは、反証のための統制を入れていることである。差が出るはずのない条件を混ぜておけば、指標が意味のある差を測っているのか、それとも何にでも差を付けてしまうのかが分かる。実際、表面が変わらない運動では差が出なかったと報告されている。指標を作る研究が、自分の指標を疑うための仕掛けを同時に用意している形である。

3見た目と形は、統計的に切り離されていた

最も重い指摘は、将来のレンダリング品質と将来の表面の正確さが統計的に切り離されているという結果である。つまり、この分野が広く報告している新規視点合成の指標は、将来の幾何を追跡していない。見た目が良くなっても、形が合っている保証にはならない。誤差は場所によらず散らばるのではなく、表面が動くところに集中するとも報告されている。

48つの手口を並べ直す

ここまで、既にあるモデルを回すための手口を8つ見てきた。それぞれが当サイトの記録でどれだけ言及されているかを並べると、いまの研究の重心が見える。母数は2026年9月4日時点で当サイトが保持する1,900件である。

最も多いのは8番目、つまり測ることに関わる記録で、全体の3割を超える。転移・適応・微調整に触れる記録は359件（18.9%）で、一から事前学習する話の152件（8.0%）の2倍以上ある。研究の重心は「作る」から「回す」へ移り、その回した結果を「測る」ことに最も多くの人手が割かれている。