- …
- …
#192
summarized by : 朝岡忠
どんな論文か？
CLIPの適応能力をさらに向上させるために，既存の手法では，学習可能なモジュールを追加して微調整することが提案．これによりFew-Shot性能が大幅に向上するが，余分な学習時間や計算資源が発生．
新規性
Tip-AdapterとTip-Adapter-Fを提案．Tip-Adapterは，CLIPのFew-Shot分類性能を向上させるための学習不要な適応手法．本手法では，Few-Shot学習データから，CLIPを下流タスクに適応させるためのKey-Valueキャッシュモデルを構築．Tip-Adapter-Fでは，キャッシュモデルのKeyパラメータをファインチューニング．
結果
Tip-Adapterは，既存の学習を必要とするアプローチ（CoOpやCLIP-Adapterなど）と比較して同等の性能を達成．さらに，Tip-Adapter-Fは，最先端の性能を凌駕．
その他（なぜ通ったか？等）
https://github.com/gaopengcuhk/Tip-Adapter
- …
- …