#1000
summarized by : 福沢 栄治
Zooming Slow-Mo: Fast and Accurate One-Stage Space-Time Video Super-Resolution

どんな論文か?

この論文では、低フレームレート(LFR)、低解像度(LR)ビデオから高解像度(HR)スローモーションビデオを生成することを目的とする時空間ビデオ超解像度タスクについて説明します。ビデオフレーム補間(VFI)とビデオ超解像度(VSR)の2つのサブタスクに分割ができます。ただし、時間補間と空間超解像が関連しています。2段階の方法では、自然の特性を十分に活用することはできません。
placeholder

新規性

この論文では、LFR、LRビデオからHRビデオを直接合成する、1ステージの時空間ビデオ超解像フレームワークを提案します。まず、欠落LRビデオフレームのLRフレーム機能を時間的に内挿します。次に、変形可能なConvLSTMを提案し、時間情報を同時に整列および集約して、グローバルな時間コンテキストをより効果的に活用します。最後に、深い再構成ネットワークを採用してHRビデオを予測します。

結果

ベンチマークデータセットでの広範な実験は、提案された方法がより良い定量的および定性的パフォーマンスを達成するだけでなく、最近の2段階の最新の方法、たとえばDAIN + EDVRおよびDAIN + RBPNよりも3倍以上速いことを示しています。

その他(なぜ通ったか?等)