X

Главные новости криптовалют

Все самое главное о биткойне, криптовалютах, блокчейне и децентрализованных технологиях. Мы выбираем из всего криптовалютного шума самое важное и интересное.


Передавая данные, вы соглашаетесь с политикой конфиденциальности.
Не хочу знать законы, знать какие тенденции правят бизнесом, как подстроиться под новое цифровое время, чтобы стать успешным.
Поделиться

С помощью нейросетей теперь можно управлять движениями людей на видео

17:35
1953 0

В наше время никого уже не удивить продвинутой обработкой изображений: профессионалы могут с картинкой или фотографией что угодно, причём для этого достаточно массового программного обеспечения. Однако с видео ситуация гораздо сложнее: обрабатывать динамичный ролик и менять расположение объектов в нем - задача, которая требует огромного мастерства и времени.

Кажется, скоро это останется в прошлом, и любой желающий сможет менять любое видео на свой лад: с помощью нейросети Facebook уже сейчас можно управлять движениями людей на видео!

Как нейросети управляют людьми

Разработчикам Facebook AI Research удалось разработать впечатляющую технологию. Их нейросеть позволяет управлять движениями человека в видео при помощи клавиатуры, практически как персонажем в компьютерной игре.

Чтобы продемонстрировать нам работу нейросети, компания опубликовала детальный видеоролик. На нём разработчики показывают запись теннисного матча, после чего начинают сами управлять одним из игроков! Далее они «вырезают» игрока из оригинального видео и вставляют его в другие ролики. Всё это происходит исключительно усилиями нейросети, без использования профессиональных программ монтажа.

Давайте теперь разберемся, как же это работает. Нейросеть построена на трёх алгоритмах - DensePose, Pose2Pose и Pose2Frame. Первый создаёт трёхмерную модель человека из видео, а два других отвечают за его перенос объекта.

После того, как DensePose генерирует модель человека, алгоритм Pose2Pose переносит эту модель в отдельный ролик, откуда убран фон. Этого уже достаточно, чтобы нейросеть позволила управлять движениями человека, однако алгоритм Pose2Frame обеспечивает финальные штрихи - именно он накладывает управляемое изображение на другие ролики.

На данном этапе технологию нельзя назвать идеальной: на «фигурке» человека встречаются артефакты, да и наложенное на другое видео изображение сразу бросается в глаза. Однако стоит помнить, что нейросеть находится на ранней стадии своего развития, и тот факт, что она уже сейчас достигла подобных результатов - это практически чудо.

Не исключено, что спустя годы технология прогрессирует до такой степени, что управляемую «фигурку» человека нельзя будет отличить от реальной записи. Простор для использования здесь очень широк: нейросеть будет способна помогать при съёмке фильмов, дополняя спектр действий реальных актёров, или позволит создавать кино практически без участия самих актёров. Кроме того, на основании этой технологии смогут создавать реалистичные игры, где можно будет управлять реальными людьми! Будем надеяться, что разработчикам удастся воплотить все это в реальность в самое ближайшее время!

Ранее мы писали о том, что нейросети научились превращать каракули в фотореалистичные пейзажи, и даже создавать несуществующих людей с нуля.

Андрей Королев

Молодой журналист, блокчейн-энтузиаст, копирайтер.



Нет комментариев. Ваш будет первым!
Загрузка...


Читайте также:

Cryptonews © 2018

Информационное агентство
(св-во о регистрации СМИ ЭЛ № ФС 77 - 72715, выдано 23 апреля 2018 г. Федеральной службой по надзору в сфере связи, информационных технологий и массовых коммуникаций)