#590
summarized by : Yukitaka Tsuchiya
TransMoMo: Invariance-Driven Unsupervised Video Motion Retargeting

どんな論文か?

元映像中の人物の動きを別の人物の映像に転写するTransMoMoの提案.元映像とターゲットの映像の人物間に身体構造の大きなばらつきがある場合でも転写が可能.動き,構造,視野角の不変性を利用して教師なし学習が可能であり,元映像とターゲットとなる映像の構造や視野角的な差異がある場合でも抽出した動きをターゲットの映像に転写できる.
placeholder

新規性

2次元のスケルトン空間を用いたMotion Retargeting Networkの提案.動き,構造,視野角はそれぞれが他の二つの変化に対して不変性であることを利用した損失関数の導入により教師なしで表現の絡み合いを解消した.

結果

従来手法と比較して,関節位置の誤差と生成画像の品質の評価において提案手法が優れていることが示された.また,wildなデータで学習が可能であるため,複雑な動きの場合でも質の高いポーズの転写が可能となっていることが結果の画像で示されている.

その他(なぜ通ったか?等)