#510
summarized by : Hirokatsu Kataoka
MARS: Motion-Augmented RGB Stream for Action Recognition

どんな論文か?

動画認識において、オプティカルフローの使用は効果的だが処理に時間を要することが課題である。本論文ではRGBの入力からオプティカルフロー特徴を獲得することを目指す。
placeholder

新規性

知識蒸留(Knowledge Distillation)によりRGBの入力からオプティカルフロー特徴を抽出する。学習時は時系列RGB画像を入力、中間層の特徴ベクトル同士の誤差を計測することで学習を進める。次に蒸留した特徴量で行動識別ができるかどうかを学習。

結果

400種類の行動カテゴリを含むKinetics400 datasetを用いて検証。提案手法は高速かつ比較的高精度であることを実証した。さらに、RGB/Flowストリームに蒸留したストリームを加えるとさらに精度が向上することを明らかにした。

その他(なぜ通ったか?等)