#213
summarized by : 角田良太朗
Learning Shadow Correspondence for Video Shadow Detection

どんな論文か?

影のsegmentationをビデオに適応する際のtemporalConsistencyを改善。時系列安定化をpixelwiseの対応と定式化し、GTが存在しない問題に対して影あり影なしでの対照学習を定期要して解決する。
placeholder

新規性

近接2フレームに対して、前者の影画素に対応する画素を後者の「影あり領域」「画像全体」「影なし領域」の3箇所からcosine類似度最大の画素として特定。前2つは近づいて後ろ2つは遠ざかるようにロスを設計する。 また影の明度がフレーム間で大きく変わることを踏まえbrightnessのaugmentationを強くかける。

結果

既存手法に対して本手法を適用することで、提案ロスを強めにかけるとtemporal-consistencyに加えsegmentation制度自体も改善することを実証。

その他(なぜ通ったか?等)