- …
- …
#29
summarized by : Tong Zheng
どんな論文か?
Image-to-imnage translation(画像変換)に関する論文。semantic flipping問題(変換後の画像が元画像っぽくない)を解決。画像を高次元空間に射影し、変換前と変換後の画像の高次元空間においての連続性を保つことによって画像変換の質を向上させた。
新規性
Domain AからDomain Bへ画像変換。Domain Aの画像一枚選んでPre-trained VGGを用いて画像特徴抽出。Locality sensitive hashingを使って画像特徴を圧縮。Aの特徴をBに変換したらまたAに戻す。変換前のAの特徴とcosine距離を取ってlossを計算。こうやって特徴空間での連続性を保つ。
結果
GTAとGoogle Maps datasetでSOTA。
その他(なぜ通ったか?等)
特徴空間で画像変換問題をいじったことが新鮮。
https://github.com/facebookresearch/vsait
- …
- …