De-An Huang, Suraj Nair, Danfei Xu, Yuke Zhu, Animesh Garg, Li Fei-Fei, Silvio Savarese, Juan Carlos Niebles
NeuralTaskGraph(NTG)という、デモの動画とそこから抽出される方策の中間表現にタスクグラフを用いたグラフ構造を提案。これを利用することで未知のタスクに対しても、デモの動画でデモが行うタスクを再現できてしまうというもの。
今まで画像を使用しての学習法はあったが、たった一度の動画のみからタスクの内容を理解する手法は存在しなかったという点で新規性がある。
ブロック積みとブロック集めのタスクをシミュレーション上でそれぞれこなしてみたが、400回ほどの学習で成功率は8割を超えた。