- …
- …
#349
summarized by : cho
どんな論文か？
3D点群認識タスクにおいて、既存のデータセットが少ない・学習しづらいなどの課題がある。そこで、CLIPを持つ知識を3D点群問題に適応し、few-(zero-)shotで学習可能な「pointCLIP」を提案。
学習（few shortのみ）：追加した3層MLPのパラメタ更新
推論：
1.3D点群を複数視点から2Dに射影
2.CLIPで1の射影図を予測し、重み付け加算で結果算出
新規性
2D画像認識で習得した知識（CLIP）を3D点群タスクに導入すること。
結果
ModelNet10、ModelNet40、ScanObjectNNを用いた実験を行い、PointCLIPの有効性を実証する。
特に既存の手法とアンサンブルすることで、（SOTAのCurveNet92.03%など）性能アップを実現した（from 93.84% to 94.08%)
その他（なぜ通ったか？等）
github:https://github.com/ZrrSkywalker/PointCLIP
- …
- …