#475
summarized by : Shoma Iwai
FVC: A New Framework Towards Deep Video Compression in Feature Space

どんな論文か?

動画圧縮に関する論文.動画圧縮では動き推定,動き情報の圧縮,動き補償,差分の圧縮といった処理が行われるが,既存手法ではオプティカルフロー等を用いてピクセル空間上で処理を行っていた.この論文では,これらの処理を全て特徴空間上で行うFVCという手法を提案.処理全体がシームレスになり,ピクセルレベルでの処理よりも効率的な圧縮が可能になった.FVCは4つのベンチマークデータセットでSOTAを達成した.
placeholder

新規性

- 動画圧縮における全ての処理を特徴空間上で行うFVCを提案 - オプティカルフローの代わりにDeformable Convを使用することで,特徴空間上で柔軟な動き補償を可能にした - Multi-frame feature fusion moduleを提案.Non-Local Attentionを使って過去のフレームの情報を参照することで画質の改善を達成

結果

- PSNR,MS-SSIMによる評価で,4つのベンチマークデータセットでSOTAを達成 - Ablation Studyにより,Multi-frame feature fusion moduleの有効性や,特徴空間上で処理を行う有効性を確認 - 提案手法で使用したDeformable Convベースの動き補償がオプティカルフローベースの動き補償より優れた性能であることを確認

その他(なぜ通ったか?等)