Hi-Tech

Вы не поверите своим глазам: эта нейросеть станцует за вас

Так называемые «дипфейки» с заменой лиц стали самым ярким примером, однако новые приложения появляются каждый день. Искусственный интеллект показал себя очень способным инструментом, если говорить о манипулировании видео с людьми. Самое последнее создает дипфейки для танцев — искусственный интеллект считывает танцевальные движения другого человека и накладывает его на целевое тело.

Как они описывают в работе, опубликованной в arXiv, их система состоит из нескольких дискретных шагов. Научной стороной этого варианта занимались четыре исследования из Калифорнийского университета в Беркли. (Для хорошего качества потребуется порядка 20 минут съемки на 120 fps). Во-первых, записывается видео с целью и подпрограмма превращает ее движения в фигуру из палочек. Затем происходит обмен и нейросеть синтезирует видео с целевым индивидом, основываясь на движения фигуры из палочек. Затем находится источник с видео и фигура с палочками снимает с него движения.

Смотрите сами: Выглядит это потрясающе.

Нейросеть, которая создает ваш танец

К примеру, есть подпрограмма, которая сглаживает движение фигур, так что танцоры не сильно дергаются, и совершенно отдельная нейросеть, предназначенная для повторного отслеживания лица цели для обеспечения реализма. Звучит все, конечно, просто, но на самом деле все намного сложнее.

Сеть не может точно моделировать свободные ткани, поэтому целевому человеку нужно надевать облегающую одежду. У программы есть и свои ограничения. В любом случае, работа впечатляющая. Встречаются и аномалии.

Вам уже не терпится станцевать балет? Расскажите в нашем чате в Телеграме.

Теги
Показать больше

Похожие статьи

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *

Кнопка «Наверх»
Закрыть