- …
- …
#273
summarized by : 加藤義道
どんな論文か？
画像内の顔を別の人の顔と交換するFace Swappingの研究. 既存手法の課題として, 交換前の顔のID以外の特徴（眼鏡などのオクルージョン）を保持しつつ, 交換する顔のID特徴を反映させるのが難しいというものがある. 提案手法は, Transformerを用いて顔の局所的な特徴を抽出しつつ, IDを考慮したソフトマスクを利用することで, 高品質な顔交換を実現した.
新規性
Transformerを用いて顔の局所的な特徴を抽出することで, オクルージョンなどの細かい部分の特徴を保持した顔交換を実現した. また, ソフトマスクを用いてブレンドすることで, IDに関する領域のみを交換可能になった.
結果
既存手法では, 交換前の顔における前髪の詳細な形状や眼鏡などのオクルージョンは崩れてしまうが, 提案手法はそうした特徴を保持しつつ, 交換する顔のID特徴（目や口などの詳細な形状）を再現.
その他（なぜ通ったか？等）
- …
- …