#541
summarized by : Naoya Chiba
Neural Body: Implicit Neural Representations With Structured Latent Codes for Novel View Synthesis of Dynamic Humans

どんな論文か?

Implicit Neural Representationによる人物動画像の表現.人体形状のメッシュ上にLatent Codeを配置しメッシュにあわせて変形,このLatentから三次元空間中でトリリニア補完し各点におけるLatent Codeを取得,これから三次元空間中の各点についてのDensityとColorを回帰することで滑らかで変形可能な人体のImplicitな表現を得る.
placeholder

新規性

疎なマルチビューの人物動画から複雑な人体の動作に対応したImplicit Representationを学習可能にした点が新規.人体の変形についてはSMPLでモデル化しておき予め推定,これを利用して空間中に各時刻における人体の部位に紐付いたLatent Codeを配置することができる.

結果

マルチビューカメラを用いて複雑な動作を含むデータセットを作成し学習・評価.静的なシーンとしても既存手法よりも優れた新規視点画像を生成できており,加えて提案法は時刻をまたがって人物の特徴を推定することができている.

その他(なぜ通ったか?等)