Хабрахабр

Нейросеть от Nvidia превращает простейшие наброски в красивые пейзажи


Водопад курильщика и водопад здорового человека

Нужно сначала нарисовать овал, потом еще окружность, ну а потом — получается шикарная сова. Все мы знаем, как нарисовать сову. Конечно, это шутка, причем очень старая, но инженеры Nvidia постарались сделать так, чтобы фантазия стала реальностью.

Конечно, в основе этой разработки лежат современные технологии — а именно генеративные состязательные нейросети.
GauGAN позволяет создавать красочные виртуальные миры — и не только для развлечения, но и для работы. Новая разработка, которая называется GauGAN, создает шикарные пейзажи из очень простых набросков (действительно простых — окружности, линии и все). Искусственный интеллект сходу «понимает», чего хочет человек и дополняет изначальную идею огромным количеством деталей. Так, архитекторы, специалисты по ландшафтному дизайну, разработчики игр — все они могут почерпнуть что-то полезное.

«Мозговой штурм в плане разработки дизайна дается гораздо легче с использованием помощи GauGAN, поскольку умная кисть может дополнить изначальный набросок, добавив качественные изображения», — заявил один из разработчиков GauGAN.

Все, что душе угодно, причем добавление происходит всего за пару секунд. Пользователи этого инструмента могут изменять изначальную задумку, модифицировать пейзаж или другое изображение, добавлять небо, пески, море и т.п.

Благодаря этому система может понять, чего хочет человек и как добиться желаемого. Нейросеть тренировали с использованием базы в миллионы изображений. Так, если нарисовать схематично пруд и какие-то деревья рядом с ним, то после оживления пейзажа все близлежащие объекты будут отражаться в зеркале воды пруда. Причем нейросеть не забывает о мельчайших деталях.

Все это можно за секунду преобразовать, так что снег станет песком и вместо заснеженной пустоши художник получит пустынный ландшафт. Системе можно указывать, какой должна быть видимая поверхность — она может быть покрыта травой, снегом, водой или песком.

Затем, после изначальной задачи нейронная сеть оживляет картину, добавляет необходимые детали и текстуры, прорисовывает отражения. «Это как книжка раскраска, в которой говорится, где размещать дерево, где — солнце, а где — небо. Все это основывается на реальных изображениях», — говорит один из разработчиков.

Несмотря на то, что системе не хватает «понимания» реального мира, система создает впечатляющие пейзажи. Все потому, что здесь используются две нейросети, генератор и дискриминатор. Генератор создает изображение и показывает его дискриминатору. Тот, основываясь на миллионах виденных ранее изображений, выбирает наиболее реалистичные варианты.

Стоит отметить, что инструмент весьма гибкий и оснащен большим количеством настроек. Именно поэтому генератор «знает», где должны быть отражения. Так, с его помощью можно писать картины, подстраиваясь под стиль определенного художника или просто баловаться с быстрым добавлением восхода или заката.

Нет, все получаемые «картинки» являются генерированными. Разработчики утверждают, что система не просто берет откуда-то изображения, складывает вместе и получает результат. То есть нейросеть «творит», как настоящий художник (или даже лучше).

Это можно сделать на технологической выставке GPU Technology Conference 2019, которая прямо сейчас идет в Калифорнии. Пока что программы нет в свободном доступе, но вскоре ее можно будет опробовать в работе. Счастливчики, которые смогли посетит выставку, уже могут потестировать GauGAN.

Например, в прошлом году, некоторые из них могли создавать 3D модели. Нейросети уже давно учат принимать участие в творческом процессе. Для того, чтобы воссоздать простую фигуру, нейросети хватает одной картинки, для создания более сложных объектов требуется пять картинок для «натаскивания». Кроме того, разработчики из DeepMind обучили нейросеть восстанавливать трехмерные пространства и объекты по рисункам, фотографиям, наброскам.

Что касается GauGAN, то этот инструмент явно найдет достойное коммерческое применение — у многих направлений бизнеса и науки есть необходимость в подобных сервисах.

Теги
Показать больше

Похожие статьи

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *

Кнопка «Наверх»
Закрыть