- …
- …
#441
summarized by : Shun.ishizaka
どんな論文か？
hand-object interaction(HOI)画像(何かを持っている時の手の画像など)における手のポーズ推定手法の提案．HOI画像からGAN+Mesh Rendererでhand-onlyの画像を生成し，その画像に対してpose推定を行う．そのため，HOI画像へのposeのアノテーションを必要としない(勿論学習においてhand-only画像のposeのアノテーションは必要)．
新規性
HOI画像における3D poseアノテーションは非常に少ないため，その部分のデータの拡張を必要としない点がうれしい．HOI画像から直接poseを推論するのではなく，hand-only画像を生成してposeを推定する点が新しい．
結果
Dexter-Object, Ego-Dexter, HO3Dで従来手法と比較．提案手法はhand-onlyのデータを使う手法より精度が向上，HOIデータ(poseアノテーション付き)で学習された手法と同程度の精度．
その他（なぜ通ったか？等）
CVPR2020のBest Paper Award Nominee．手に対して物体によるocculusionがかなりかかっている画像におけるhand-pose推定において，物体をそもそも取っ払ったhand画像を生成するというかなり力業なやり口．ただその力業をしっかりやってのけるあたりが凄い．
- …
- …