- …
- …
#197
summarized by : 加藤義道
どんな論文か？
画像内の人物の頭部を別の人物のものと置き換えるHead Swappingの研究. このタスクは, 頭部のモデリングや背景とのブレンドなどの課題があったが, 提案手法は, ポーズと表情を合わせるHead2Head Alignerと, 頭部と背景のブレンドを行うHead2Scene Blenderの2つのモジュールを導入することで, 実世界でのFew-shotの頭部交換を実現した.
新規性
顔部分のみを交換するFace Swappingはよく研究されているが, 頭部の入れ替えは, 特にFew-shotの設定ではほとんど研究されていなかった. その中で初めて, 実世界でのFew-shot画像から写実的な頭部交換を達成した点.
結果
頭部交換前と交換後を比較して, 顔の位置や表情が自然に再現されている. また顔交換手法とは異なり, 頭部全体を交換しているため髪型も交換後の人物のものに変わっている. ただし, 髪や肌の色は交換前の人物のものとなっている.
その他（なぜ通ったか？等）
https://github.com/jmliu88/heser
- …
- …