- …
- …
#137
summarized by : Shintaro Yamamoto
どんな論文か？
2枚の画像間の変化をキャプショニングするchange captioningタスクの学習方法を提案．目的タスクであるキャプショニングだけでなく，補助タスクとして画像検索を追加することによって性能向上を目指す．
新規性
変化前後の2枚の画像から変化を記述するキャプションを生成するメインタスクに加えて，変化前の画像と変化キャプションを入力とすることで変化後の画像を検索する補助タスクを追加．メインタスクの出力(キャプション)が補助タスクの入力，補助タスクの出力(変化後の画像)がメインタスクの入力となる．
結果
BLEU-4, CIDEr, METEOR, Rouge-L, Spiceでキャプションを評価し，全ての指標で従来手法を上回った．
その他（なぜ通ったか？等）
- …
- …