#191
summarized by : Shingo Nakazawa
3D Compositional Zero-Shot Learning with DeCompositional Consensus

どんな論文か?

3Dデータの物体の判別のゼロショット学習 = 未知の物体にラベルを与える手法 3D Compositional Zero-Shot Learning (3D-CZSL) の提案。評価用ベンチマークデータセット (C-PartNet) も合わせて公開し、ゼロショットでの物体のパーツのセグメンテーションと分類に成功したと報告している。
placeholder

新規性

物体判別のゼロショット学習を3D画像に適用した点。まず人が定義した「パーツ」の組み合わせとして物体を表現できるという仮定を置き、その上でCompositional Part Segmentation, Hypothesis Bank, DeCompositional Consensusという3段階を経ることで、物体のパーツ単位へのセグメンテーションと、物体の分類を行っている。

結果

PartNetデータセットをベースに「同じようなパーツには同じ名前をつける」ように修正したC-PartNetというデータセットを考案。ゼロショットでの物体のパーツのセグメンテーション及び分類において多くの物体クラスでSoTAを達成。(一方で、この方式ではうまく対処できない物体クラスがある模様。例えば、扉はほとんど識別できていない。また、他のモデルでもハサミは全く手が出ていない。)

その他(なぜ通ったか?等)

コード、データセット、学習済みモデルはこちらで公開されている → https://github.com/ferjad/3DCZSL