#744
summarized by : yusuke saito
4D Association Graph for Realtime Multi-Person Motion Capture Using Multiple Video Cameras

どんな論文か?

複数固定カメラ映像からのリアルタイム多人数モーションキャプチャ技術について、画像空間、視点、時間の要素を4次元アソシエーショングラフに統一し最適化する手法を提案。5人のシーンに5台のカメラを用いて30fpsで動作するリアルタイムモーションキャプチャシステムを実現。
placeholder

新規性

- 4次元アソシエーションのリアルタイム最適化を、4つの次元の解析ステップと骨格組立ステップに分離することで、効率的に4次元関連付けを解く方法を提案。 - 2つのステップは、画像特徴、ステレオ、時間的手がかりを共同で考慮するように設計されたエネルギー関数に基づいて最適化されるため、最適化の品質が保証されると同時に、実時間効率が達成可能。

結果

- OptiTrackをGTとする、主に近接した相互作用や困難な動作のようなより困難なシナリオに焦点を当てた、複数人シーンの新しい評価データセットを作成。 - Shelfデータセットと我々のテストデータセットの両方で関節精度とリコールを定量的に評価。どちらの指標でもDongらの既存手法を凌駕した。 - 定性的に見ても、骨格が崩れやすい近接シーンにおいても、提案手法は安定して認識可能。

その他(なぜ通ったか?等)

- 実用可能なレベルで、複数カメラ、複数人数でのリアルタイム骨格推定システムを実現した点。 - 4つの次元の解析ステップと骨格組立ステップに分離するアイデアの効果を実証した点。