Ученые из США и Канады создали нейросетевой фреймворк, который позволяет виртуальным персонажам обучаться движениям с помощью видео, на которых двигаются люди. Об этом сообщает N+1.
Сначала алгоритм размещает на каждом кадре видео элементы тела человека, а затем эту информацию согласовывает с другими кадрами. Затем данные получает нейросеть, которая пытается повторить движения.
Чтобы научить алгоритм имитации, ученые использовать ранее созданный алгоритм DeepMimic, который обучаясь пытается повторить движение человеческой модели. Работу подхода разработчики показали на видео из YouTube.