- …
- …
#189
summarized by : Naoya Chiba
どんな論文か？
多視点動画を入力としてNeural Fieldを用いた3Dでの各点のモーションを推定（シーンフロー推定）する手法の提案．それまでの点の軌跡から将来の動きを予測できることを制約することで，事前知識なしでトポロジーの変化するシーン（例えばシーン中の人物が増えるなどを想定）でも各点のモーションを推定できるようになった．
新規性
3Dシーンフロー推定に時系列データの予測可能性のアイデアを正則化として導入した点が新規．過去のフレームからモーションに対応した重みを推定するネットワークと，この重みで足し合わせる基底ベクトルを同時に学習，各点の移動を予測するモーション場を推定して，モーション後の点について画像との比較をVolume Renderingで行う．
結果
ZJU-MoCap，Panoptic，HyperNeRFの各データセットで検証し適切に画像を再構成できること，モーションが正しく推定できていることを確認した．さらにモーション推定部分だけを可視化し，納得できるモーション推定となっていることを示した．
その他（なぜ通ったか？等）
- …
- …