Nvidia представила демо-версию нейросети GauGAN, которая создает реалистичные изображения из обычных рисунков. Из грубых набросков нейросеть создает удивительно реалистичные изображения.
GauGAN названа в честь известного художника Поля Гогена. На данный момент нейросеть GauGAN фокусируется на создании элементов природы, таких как земля, море и небо.
Инструмент использует генеративно-состязательные сети (GAN) для преобразования набросков в реалистичные изображения. В нейросети генератор создает изображения, которые он показывает дискриминатору. Обученный на реальных изображениях, дискриминатор затем дает генератору обратную связью о том, как улучшить реалистичность его изображений.
Например, после обучения на реальных изображениях, дискриминатор знает, что настоящие пруды и озера содержат отражения, поэтому генератор постепенно учится создавать убедительную имитацию.
Технология не просто склеивает кусочки изображений или вырезает и вставляет текстуры, а синтезирует уникальные изображения, словно художник рисует что-то новое.
Брайан Катанзаро
Вице-президент Nvidia
Нейросеть была обучена на 1 млн фотографий, взятых из фотосервиса Flickr. Программа может появиться в свободном доступе лишь летом 2019 года.