#51
summarized by : Keisuke Kamahori
Towards Unique and Informative Captioning of Images

どんな論文か?

現在の image captioning の性能評価指標(SPICE)には、generic で情報量の少ない文章を生成するモデルを高く評価してしまうという問題がある。これを解決するため、キャプションのユニークさも評価する指標 SPICE-U を提案し、それに適合するアルゴリズムを設計した。
placeholder

新規性

画像1枚1枚に適した、よりユニークで情報量の多いキャプションを目指した。

結果

既存の指標では generic な文章を生成することで容易に高得点が達成できてしまうが、SPICE-U は人間らしい文章を高く評価し、よりユニークで情報量の多いキャプション生成につながる。また相互情報量を用いたアルゴリズムによって SPICE-U のスコアが向上した。

その他(なぜ通ったか?等)

https://github.com/princetonvisualai/SPICE-U