Hi-Tech

Нейросеть научили копировать движения людей из роликов на YouTube

Однако специалисты постоянно находятся в поиске новых не менее качественных, но более дешевых способов. На сегодняшний день основными методами создания реалистичной анимации виртуальных существ являются скелетная анимация и небезызвестный Motion Capture (mocap). Одну из них недавно обучили распознавать движения людей и переносить их на виртуальных персонажей. И, вполне возможно, в этом могут помочь нейросети. Даже видео с YouTube. Подойдет для этого любое видео.

Новый алгоритм получил название DeepMimic и был создан еще в начале 2018 года, но полноценная презентация состоялась лишь недавно в рамках конференции SIGGRAPH Asia 2018. За разработку отвечают ученые из Лаборатории исследований в области искусственного интеллекта Калифорнийского университета в Беркли (США) и Университета Британской Колумбии (Канада). Как утверждают авторы,

Нейросети с глубоким машинным обучением могут проводить качественный анализ любых движений из общедоступных видеоисточников, таких как YouTube. «Наш подход основан на глубоком анализе и оценке определенных поз и событий. Наш алгоритм способен изучить широкий спектр навыков, включая акробатику и боевые искусства.» Это имеет огромный потенциал для разработки инструментов для быстрого и простого создания анимации, лишь запросив видеозапись с желаемым поведением в интернете.

Затем ролик разбивается покадрово и для каждого кадра создается трехмерная модель. Сам алгоритм работает довольно просто: система «смотрит» видео, на котором выполняется определенное действие. После этого все модели «соединяются», а специальная подпрограмма следит за связками между ними и удаляет артефакты и сглаживает «рывки» анимации.

Но хочется добавить, что результат действительно получился впечатляющим, при условии того, что это, конечно, не заранее заготовленные видео, а рандомные ролики из интернета. Оценить работу алгоритма вы можете на демонстрационном видео, доступном ниже.

Обсудить новую технологию создания анимации и другие новости вы можете в нашем чате в Телеграм.

Теги
Показать больше

Похожие статьи

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *

Кнопка «Наверх»
Закрыть