summarized by : ryo.igarashi
Unsupervised FAQ Retrieval with Question Generation and BERT

概要

Frequently Asked Questions(FAQ)検索において、3つのリランカー(表示順変更)による教師無しの手法を提案。リランカーの1つは検索アプローチに基づき、残りの2つはクエリから回答へのマッチング、クエリから質問へのマッチングを予測するようにFAQペアで微調性したBERTモデルを利用。

新規性

ニューラルモデルの学習にDistant Supervisionを利用することで、教師なしFAQ検索モデルのギャップ(伝統的な情報検索技術を利用しない)を克服。また、リランカー後段のBERTモデルでは訓練データの不足を克服するために、自動的に生成された質問の言い換えとスマートフィルタリングを組み合わせた新規のWeak Supervisionのアプローチを実装。

結果

FAQIR, Stack-FAQの2つのデータセットで評価を実施。提案手法が既存の教師あり手法と同等の精度であり、時には既存の教師あり手法よりも優れていることを示した。