#405
summarized by : maokura
InverseRenderNet: Learning Single Image Inverse Rendering

どんな論文か?

画像中の物体のイルミネーションや反射特性を予測するInverse Rendering(IR)をE2Eで行うモデルの提案を行った.画像に対するIRを厳密に求めることはできておらず,ラベル付きのデータは存在しない.それに対処するため,特定画像を複数個所から撮影したデータから生成した法線マップ,albedoマップなどなどから画像を再構成し,それと元画像の距離を最小化するような形でモデルを最適化.
placeholder

新規性

IRをE2Eで推定するモデルを提案.また,従来されていなかった実世界画像でIRを行った.

結果

reflectanceの予測,shadingの予測,albedoの予測,normalの予測, relighting全てにおいて従来手法より良い結果を得られた.比較した各手法の多くがどれか1つの予測に特化している一方で,提案手法は全てを行える.

その他(なぜ通ったか?等)

Inverse Renderingの分野はまだあまり注目されていないらしく,論文の最後にも展望がたくさん書いてありました.