#446
summarized by : Ryota Suzuki
Upgrading Optical Flow to 3D Scene Flow Through Optical Expansion

どんな論文か?

単眼動画から3D optical flowをとるタスクで,デプス方向のflowは2Dにおける領域の拡大方向のoptical flow (optical expansion)と捉えることで,高速な処理時間でよい結果を示した.参照画像の注目画素の周囲3x3画素のoptical flowがまとめてアフィン移動しているとみて,そのスケール成分でexpansionを計算,3D flowに変換する.
placeholder

新規性

2DのScale方向における追跡というのは普通に行われてきたが,その幾何的な計算モデルを入れ込んで良い結果が出ることを示した.テクニック的には,optical expansion計算のためのの3x3画素ブロックのアフィン移動の考慮が新しい.

結果

KITTIデータセットにおいて,前景のデプス遷移のエラーがFlowNetが 20.89 に対し 16.71 .また,1回0.2秒と高速.ステレオに拡張しても,DRISF が 9.73 に対して8.54.ただし処理速度では負ける(0.75秒に対し,2秒).

その他(なぜ通ったか?等)

計算モデルの入れ込みによりシーン全体の推定と計算速度の両方が向上していること.