- …
- …
#527
summarized by : Shintaro Yamamoto
どんな論文か？
SNS上の画像の投稿者がどのような意図を持っているかの分析に関する研究．新たなデータセットであるIntentonomyを構築し，画像やハッシュタグの情報と意図の関係を分析した．
新規性
心理学に基づく分類法により28のクラスを定義し，AMTによって14,455枚の画像にアノテーションした．収集したデータを用いて，画像中の物体やシーンと意図の関係，ハッシュタグを加えたマルチモーダルモデルの検証を行った．
結果
それぞれの意図には別の物体やシーンが重要であることを明らかにした一方，一部のクラスはクラス内分散が多いことが分かった．適切な設定をすることで，画像に加えてハッシュタグの言語情報が意図の推定の性能を向上することを確認．
その他（なぜ通ったか？等）
https://github.com/kmnp/intentonomy
- …
- …