Нейросеть Nvidia создает картины по грубым зарисовкам

Нейросеть Nvidia создает картины по грубым зарисовкам

26.03.2019     

Nvidia разработала технологию, превращающую схематические наброски в фотореалистичные изображения. Она упростит работу художников и аниматоров.

Будущее графики

Компания-производитель видеокарт Nvidia презентовала на GPU Technology Conference 2019 нейросеть GauGAN, названную так в честь художника Поля Гогена. Она превращает грубый нарисованный набросок в полноценное изображение. Пользователь отмечает контуры необходимых объектов в специальном графическом редакторе и получает реалистичную картину. 

Пока система умеет генерировать только пейзажи. Для обучения нейросети инженеры Nvidia использовали более миллиона изображений Flickr. Благодаря этому программа автоматически дорисовывает необходимые детали: отражения деревьев в воде, погодные условия и т.д.

В дальнейшем приложение научится работать с городской архитектурой и портретами людей. В свободном доступе программы пока нет, и планов по ее релизу Nvidia также не озвучила. Однако на презентации компании опробовать GauGAN мог любой желающий.

 

Принцип работы нейросети

 

Умный редактор

Вместе с нейросетью Nvidia представила сам графический редактор, где нейросеть по грубым наброскам создает реалистичные изображения. Пользоваться инструментом не сложнее, чем стандартным Paint. В нем есть три инструмента: заливка, перо и карандаш. Цвета и текстуры художник выбирает на палитре. 

GauGAN обрабатывает схематичные рисунки в режиме реального времени. Для этого требуется всего несколько секунд.

Как пользоваться

Чтобы начать генерацию изображения, достаточно нарисовать замкнутую линию, напоминающую необходимый объект, и залить ее похожим цветом. Например, если необходимо добавить на картинку озеро, нужно изобразить овал с неровными краями и покрасить его в синий цвет. Таким же образом создаются скалы, облака, леса и прочие детали пейзажа.

 

Пример работы нейросети

 

В редакторе можно «помочь» программе, указав желаемое время года или суток. Редактор добавит в итоговую картинку особенности, увеличивающие сходство с фото: например, для зимнего арта небо получится серым и мрачным, а на деревьях не будет генерироваться листва.

Поясняя принцип работы GauGAN, разработчики сравнивают ее с «умной» раскраской. По замыслу создателей нейросети, наиболее полезной она станет для художников, архитекторов, ландшафтных дизайнеров и других специалистов, которым важно быстро делать наброски изображений.

Главный недостаток программы – на некоторых изображениях заметны границы между объектами. Разработчики обещают в будущих версиях избавиться от этого эффекта.



Источник: https://infostart.ru/journal/news/tekhnologii/neyroset-nvidia-sozdaet-kartiny-po-grubym-zarisovkam_1028468/
Автор:
Александр Вашкевич Аналитик


Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. s_vidyakin 26.03.19 12:11 Сейчас в теме
В дальнейшем приложение научится работать с городской архитектурой и портретами людей

Так, значит можно будет создавать кино просто накидав фабулу на полстранички - про генерацию сценариев еще в прошлом году была новость, как ИИ снял фильм, проанализировав структуру существующих.
Будут искуственные пейзажи, здания и люди - вложил текст, подождал день рендеринга и готово.
9. Darklight 27 26.03.19 15:49 Сейчас в теме
(1)Вероятно когда-нибудь такое будет - здесь нет ничего невозможного! Но пока на выходе - унылое гав...
2. пользователь 26.03.19 12:13
Сообщение было скрыто модератором.
...
3. zhuntovda 26.03.19 12:52 Сейчас в теме
Круто, очень круто. Серьезная работа!
4. VmvLer 26.03.19 13:10 Сейчас в теме
это станет востребовано уже используется в масштабных игровых проектах.

Каким бы не были красивыми прорисовки локаций в виртуальных вселенных, но прям бесит
когда сел пошпилить и где-то встрял. Ну че, лезешь на ютуб и слышишь там шепелявым фальцетом
рецеп прохождения локации - после этого пропадает эффект уникальности и интерес к игре.

И вот когда с помощью данной технологии виртуальные миры станут по настоящему уникальны и
будут генерироваться для каждого пользователя персонально - вот тогда можно будет рассчитывать
только на себя. Это будет совершенно новый вид бизнеса без ...шепелявого фальцета.
Затем подтянутся тв и дополненная реальность.
8. Darklight 27 26.03.19 15:48 Сейчас в теме
(4)Да - для каждого пользователя сгенерируют его персональную судьбу - но не факт что она приведёт главному финалу и тем более к хэпиэнду, и вообще не факт что будет суждено продвинутться дальше "третьей локации второго уровня" - такова она природа случайности - кому-то даёт флешрояль, а у кого-то одни шестёрки на руках (ну не самый плохой вариант кстати).
Ziggurat; +1 Ответить
5. user856012 13 26.03.19 13:30 Сейчас в теме
Интересно, а если нейросети эскиз денежной купюры предъявить - прорисует?

Или, как в классике: "Это все от таланта зависит. Вот у меня есть друг, тоже ученый. У него три класса образования, а он за полчаса десятку так нарисует - от настоящей не отличишь"
6. s_vidyakin 26.03.19 13:48 Сейчас в теме
Затем подтянутся тв и дополненная реальность.
И здравствуй киберпанк!
7. Darklight 27 26.03.19 15:43 Сейчас в теме
Почему меня это не впечатляет?

Во-первых, это не картины - а фотографии!

Во-вторых, это больше похоже на продвинутый фотоморфинг по цветной маске, чем на рисование. Бесспорно - как плагин для фотошопа - очень не плохо. Но что же он делает реально то? С виду просто подыскивает подходящие объекты в своей БД фотографий и морфит их на нарисованный контур.

В общем, вроде ещё не первое апреля, а уже смеяться над такой разработкой хочется! Может это вообще всё постановочный фейк - всё заранее уже подобрано - для показухи нужно просто более менее аккуратно очертить границы - и готовые изображения в них будут вписаны!

ну, или я прост не понимаю все сложности и крутости данного революционного метода в живописи!
Оставьте свое сообщение

См. также

Python вытеснил C с первого места в рейтинге языков программирования за октябрь

Новость ИТ-новость Рейтинг Языки программирования

Python впервые за 20 лет сумел обогнать Java и C по популярности и занять первую строчку в рейтинге TIOBE. Автор языка программирования Гвидо ван Россум поблагодарил сообщество за поддержку.

сегодня в 13:29    2879    VKuser24342747    4       

Google сказал «SOS»: интернет-гигант поддержит новую программу вознаграждений

Новость Google ИТ-новость

Компания Google объявила о поддержке пилотной программы вознаграждений за поиск уязвимостей в софте с открытым исходным кодом. Ее назвали SOS (Secure Open Source, безопасное открытое ПО).

15.10.2021    1491    user1015646    0       

Samsung по ошибке предложил британцам предустановить российское ПО

Новость Импортозамещение ИТ-новость Мобильные приложения Новости компаний

Samsung в описании обновления для пользователей из Великобритании упомянула о том, что на устройства будут предустановлены российские мобильные приложения. Позже компания признала сообщение техническим сбоем.

14.10.2021    2218    VKuser24342747    2       

PostgreSQL 14: встречаем новую версию популярной СУБД с открытым кодом

Новость PostgreSQL ИТ-новость

Разработчики представили крупное обновление СУБД PostgreSQL. В свежей 14-й версии упростили доступ к информации в JSON-формате и добавили поддержку несмежных диапазонов, улучшили производительность и работу с распределенными данными.

13.10.2021    2523    user1015646    1       

Новые возможности Microsoft Office 2021

Новость ИТ-новость Новости компаний

5 октября Microsoft выпустила новую версию офисного пакета приложений Office 2021. Он предназначен для предприятий и пользователей, которые не хотят покупать Office 365, доступный только по подписке.

12.10.2021    5118    SKravchenko    0       

МГУ представил первый национальный стандарт для ИИ и больших данных

Новость Искусственный интеллект ИТ-новость

Национальный центр цифровой экономики МГУ подготовил к публичному обсуждению первую редакцию отечественного стандарта для работы с большими данными и нейросетями.

12.10.2021    3397    VKuser24342747    1       

Минцифры намерено встроить электронную подпись в SIM-карту

Новость ИТ-новость Минкомсвязь Цифровая подпись

Минцифры совместно с ФСБ, провайдерами и научными организациями разрабатывают технологию, которая позволит использовать электронную подпись при помощи стандартной SIM-карты.

11.10.2021    6216    VKuser24342747    2       

Крупнейшие российские ИТ-разработчики объединятся для развития Open Source

Новость Импортозамещение ИТ-новость Цифровая экономика

В Москве прошел форум Russia Open Source Summit. На нем лидеры российской ИТ-отрасли презентовали стратегию развития Open Source до 2024 года и анонсировали создание некоммерческой организации Russian Open Source Foundation.

11.10.2021    8213    ЕленаЧерепнева    2       

Язык программирования Python получил масштабное обновление

Новость ИТ-новость Языки программирования

В официальном блоге Python представлена последняя стабильная версия языка под номером 3.10.0. Из новинок – улучшенное отображение ошибок, поддержка структурного сопоставления и более строгого итерирования.

08.10.2021    9087    VKuser24342747    8       

Microsoft официально выпустила релизную версию Windows 11

Новость Windows ИТ-новость Новости компаний

Бесплатное обновление Windows 10 до одиннадцатой версии доступно для всех владельцев системы. Главные изменения – повышенная безопасность и улучшение дизайна.

07.10.2021    4274    VKuser24342747    7       

Крупное обновление для Ubuntu стало доступно для бета-тестирования

Новость Ubuntu ИТ-новость

Разработчики представили бета-версию Ubuntu 21.10 под названием Impish Indri. Последний раз операционная система получала крупный апдейт весной 2021 года.

05.10.2021    12743    VKuser24342747    4       

Привет, Java 17: что нового

Новость ИТ-новость Языки программирования

Вышла новая версия Java 17. Три ключевых изменения: использование только строгой семантики чисел с плавающей точкой, единый API (прикладной программный интерфейс) для генераторов псевдослучайных чисел и отдельный API сторонних функций и памяти.

04.10.2021    8699    user1015646    0       

Исследователи нашли способ передавать данные через полое оптоволокно

Новость Интернет ИТ-новость Телекоммуникации

Британская компания BT заявила о создании пустотелого оптического волокна, заполненного воздухом. Технология может применяться для передачи данных, в том числе использующих квантовое шифрование.

04.10.2021    6535    VKuser24342747    2       

С 2023 года Google Chrome переходит на платформу Manifest V3. Старые расширения перестанут работать

Новость Google Безопасность Интернет ИТ-новость

Google объявил о переходе на новую платформу для расширений в Chrome – Manifest v3. Разработчики расширений опасаются, что блокировщики рекламы не смогут работать с новой версией платформы.

04.10.2021    2826    SKravchenko    4       

Yandex.Cloud выйдет на рынок Европы с сервисом виртуальных рабочих столов

Новость ИТ-новость Яндекс

В следующем году «Яндекс» планирует открыть представительство в Германии. Филиал российской компании будет продвигать на европейском рынке набор сервисов Yandex.Cloud.

01.10.2021    11197    VKuser24342747    4       

OpenAI научила нейросеть кратко пересказывать содержимое книг

Новость Искусственный интеллект ИТ-новость

OpenAI представила инструмент, который генерирует краткое содержание книг при помощи машинного обучения. Нейросеть способна ужать произведение из тысяч слов до нескольких сотен.

30.09.2021    13524    VKuser24342747    2       

Microsoft предложила установить финальную версию Windows 11 на неделю раньше

Новость Windows ИТ-новость

Официальная дата релиза Windows 11 – 5 октября 2021 года. Однако Microsoft открыла доступ к обновлению ОС уже сейчас через канал тестирования Release Preview.

27.09.2021    5099    VKuser24342747    6       

JetBrains открыла ранний доступ к новой IDE для Data Science

Новость ИТ-новость Новости компаний

7 сентября JetBrains разместила в своем блоге статью с информацией о том, что новая IDE DataSpell, которая с марта 2021 года находилась в закрытом тестировании по программе раннего доступа (EAP), становится доступной для всех желающих.

24.09.2021    14531    capitan    4       

Microsoft предлагает отказаться от паролей в пользу сервиса Authentication

Новость Безопасность Интернет ИТ-новость Новости компаний

Microsoft видит проблему в стандартных паролях, которые зачастую повторяются и имеют низкую надежность. В компании убеждены, что альтернативные способы аутентификации более безопасны.

24.09.2021    3467    VKuser24342747    3       

Правительство утвердило разработку российского аналога GitHub

Новость ИТ-новость Цифровая экономика

Премьер-министр Михаил Мишустин на форуме Kazan Digital Week анонсировал создание отечественного репозитория, аналогичного GitHub. Проект реализуется в рамках второго пакета поддержки ИТ.

22.09.2021    7125    VKuser24342747    25       

Microsoft присоединилась к Open Infrastructure Foundation для развития облаков

Новость ИТ-новость Новости компаний Облачные технологии

Microsoft стала платиновым членом организации Open Infrastructure Foundation. Компания будет представлять интересы своих телекоммуникационных клиентов в OpenStack.

15.09.2021    6798    VKuser24342747    0       

Microsoft разрешит устанавливать Windows 11 на старые компьютеры

Новость Windows ИТ-новость Новости компаний

Microsoft пересмотрела правила установки Windows 11, которые не позволяли использовать ОС на компьютерах, не соответствующих системным требованиям. Для инсталляции придется создать загрузочный диск.

14.09.2021    5146    VKuser24342747    0       

Оплата лицом заработает на всех станциях метро Москвы

Новость Искусственный интеллект ИТ-новость Цифровая экономика

В столичном метрополитене внедряют систему FacePay. С 15 октября оплатить проезд можно будет, не доставая смартфон, карту или жетоны из кармана.

14.09.2021    4500    user1015646    2       

«Яндекс» представил технологию автоматического перевода любых видео на русский язык

Новость ИТ-новость Яндекс

«Яндекс» сделал функцию автоматического закадрового перевода иностранных роликов доступной для почти любых видео в интернете. Функция встроена в фирменный браузер компании.

13.09.2021    3680    VKuser24342747    4       

Исследователи синтезировали выразительную устную речь

Новость Искусственный интеллект ИТ-новость

Синтетическое воспроизведение речи от голосовых помощников и автопереводчиков не передает эмоций и интонаций. Специалисты NVIDIA разработали систему искусственного интеллекта, которая решает эту проблему: ее речь сложно отличить от естественной.

10.09.2021    14836    user1015646    0