#499
summarized by : Anonymous
Polymorphic-GAN: Generating Aligned Samples Across Multiple Domains With Learned Morph Maps

どんな論文か?

SOTAな画像生成モデルは、単一ドメインの画像生成において高い性能を示す。本論文では、意味や性質が類似した複数の関連ドメイン(例.人間の顔と絵画の顔と動物の顔)において、照明やポーズといったドメイン間で共通の条件を持つ画像生成が可能なGANを提案している。
placeholder

新規性

人間の顔と動物の顔のように、類似した複数のドメインにまたがった非常に多様な形状を持つ画像を同時にモデル化することが可能という点。ネットワークは、全てのドメイン間で共通する領域を学習するPolymorphic-GANと、各ドメインが持つ固有な幾何学的特徴を捉えるMorph Netの2つで構成されている。

結果

単一モデルによる複数ドメインの画像生成において、StyleGAN2と比較して高い精度を示し、Morph Netの有効性も確認された。また、少数データでの学習、複数ドメイン間におけるゼロショットでのセグメンテーション転送、画像間の変換など様々な用途に利用可能である。

その他(なぜ通ったか?等)