#428
summarized by : Naoya Chiba
CoNeRF: Controllable Neural Radiance Fields

どんな論文か?

HyperNeRFを拡張して,少数のマスクによるアノテーションからコントロール可能なNeRFであるCoNeRFを提案.時系列で変形可能にするためにHyperNeRFが提案したHyper MapによるRadiance Fieldのモデル化をベースにし,Few shotの画像からパラメータに対応したマスクを推定するMasking Fieldを学習,選択的にマスクすることで各Fieldを学習する.
placeholder

新規性

コントロールできるパラメータを導入するために画像による少数のアノテーションとMasking Fieldによるモデル化を提案した点が特に新規.パラメータはそれぞれ連続値で記述し,空間の各点に対応したMasking Fieldを学習する.潜在ベクトルの制約とラベルがある箇所でのクロスエントロピーをロス関数とする.

結果

スマートフォンで撮影した映像と合成データで評価,提案法によって少数視点のアノテーションでもうまく新規視点画像をコントロールできていることを示した.

その他(なぜ通ったか?等)