#145
summarized by : Kosuke Fukazawa
Style-ERD: Responsive and Coherent Online Motion Style Transfer

どんな論文か?

モーションのスタイル(雰囲気など)を転写するMotion Style Transferというタスクを、リアルタイムで実行可能なモデルを提案。リアルタイムでのMotion Style Transferを行う上で入力フレーム数を削減する必要があるため、 Encoder-Recurrent-Decoder (ERD)の構造を用いる。
placeholder

新規性

従来のオフライン手法では、複数フレームを処理することでMotion Style Transferを達成するものが多く、リアルタイムへの活用が難しかったが、本手法ではERD構造によって、過去のスタイル、コンテンツ情報を保持しながらMotion Style Transferを達成する。

結果

定量的評価としてFIDをモーション向けにしたFMD、実行時間などを既存のオフラインメソッドと比較。ともに既存手法を上回るスコアを出している。また、User StudyにおいてもStyle、Contentの維持、Qualityの観点から既存手法より良好な結果を得た。

その他(なぜ通ったか?等)

GitHub: https://github.com/tianxintao/Online-Motion-Style-Transfer 感想: 最近ではリアルタイムのMotion Style Transferを達成するために、モーション生成の過程にスタイル変換を組み込む手法も出てきている。本手法ではスタイルはラベルを必要とするため、単純に従来手法に勝るとは言えない気がする。