#23
summarized by : 綱島 秀樹
SketchyCOCO: Image Generation From Freehand Scene Sketches

どんな論文か?

スケッチから写実的な画像を生成可能なEdgeGANを提案した。スケッチから既存手法でセグメンテーション、前景生成→背景も含めて全体の生成のフローで行う。 MSCOCOをベースとしたSketchyCOCOデータセットを作成した。 セグメンテーションについてはもっとタスク固有なものに、SketchyCOCOは大きなオクルージョンがないデータのみを扱い、横のviewが圧倒的だから改善したいと言及
placeholder

新規性

・フリーハンドスケッチからの写実的画像生成という最初のアプローチを提案した点 ・新たなスケッチのデータセットを提案した点

結果

・スケッチからの生成生成においてSOTA (ただし、シーンとしての生成はGauGANにほぼ敗北) ・スケッチの表現具合にロバスト ・スケッチのオブジェクトの大きさや背景のスケッチに対してもロバスト

その他(なぜ通ったか?等)

新たな問題設定の提案、その提案にあたって適切なデータセットの作成と評価を行っており、分野として有用だと考えられたため通ったと考えられる。