- …
- …
#145
summarized by : Kosuke Fukazawa
どんな論文か?
モーションのスタイル(雰囲気など)を転写するMotion Style Transferというタスクを、リアルタイムで実行可能なモデルを提案。リアルタイムでのMotion Style Transferを行う上で入力フレーム数を削減する必要があるため、 Encoder-Recurrent-Decoder (ERD)の構造を用いる。
新規性
従来のオフライン手法では、複数フレームを処理することでMotion Style Transferを達成するものが多く、リアルタイムへの活用が難しかったが、本手法ではERD構造によって、過去のスタイル、コンテンツ情報を保持しながらMotion Style Transferを達成する。
結果
定量的評価としてFIDをモーション向けにしたFMD、実行時間などを既存のオフラインメソッドと比較。ともに既存手法を上回るスコアを出している。また、User StudyにおいてもStyle、Contentの維持、Qualityの観点から既存手法より良好な結果を得た。
その他(なぜ通ったか?等)
GitHub: https://github.com/tianxintao/Online-Motion-Style-Transfer
感想: 最近ではリアルタイムのMotion Style Transferを達成するために、モーション生成の過程にスタイル変換を組み込む手法も出てきている。本手法ではスタイルはラベルを必要とするため、単純に従来手法に勝るとは言えない気がする。
- …
- …