3次元シーンのManipulationやレンダリングが近年ホットになってきた。しかし、3次元シーンのアノテーションコストが高い。ここで2次元の画像合成手法を3次元環境に適応し、データセットのアノテーションコストを削減できた。提案手法では3次元シーンのSemantic Mapから、3次元的にシーンの色再構成と2次元ベースの合成を行い、その間のConsistencyロスにより学習する。