#672
summarized by : Yoitsu Takahashi
Self-Supervised 3D Hand Pose Estimation Through Training by Fitting

どんな論文か?

深度マップからの3Dの手の姿勢推定を行う自己教師あり学習の手法を提案。合成データにより初期化したNNを、深度ラベルのない実データで最小限の項目のみファインチューニングしている。
placeholder

新規性

レンダリングした形状と入力デプスの比較することでフィッティングを行う。このために手の表面を球体の組み合わせで近似し微分可能なレンダラを導入。また運動学的な妥当性のため事前知識により正則化している。

結果

手の姿勢推定における教師なし学習としてはSOTA。大量のデータを必要とする教師あり学習の手法に匹敵する高精度な推定ができる。

その他(なぜ通ったか?等)