写真からスケッチを生成する問題と検索を共役問題として捉え、最初に少数の実写・スケッチペアデータセットでそれぞれ学習した後、補完的な学習をする。 スケッチ生成についてもただのLSTMではなくCNN+Attention→LSTMというように工夫がなされている。

QMUL-Shoe v2, QMUL-Chair v2をペアデータ、UT-Zap50Kをスケッチなしデータとして実験してSoTA。

SketchXの研究ともあって、ドメインに対する理解がすごい印象だった。