Как сейчас выглядит нейрогенеративное искусство и что с ним будет дальше

N+1Hi-Tech

Совместный сновидческий процесс

Как сейчас выглядит нейрогенеративное искусство и что с ним будет дальше

Иван Шунин

Когда работаешь с новостями науки, иллюстрации — это сложно. Ладно еще, когда речь о каком-то наглядном поведенческом эксперименте. Но когда у тебя доказательство математической теоремы или демонстрация тонкого эффекта из области квантовой химии, где в качестве иллюстративного материала в лучшем случае графики — приходится думать. Думать долго и отчаянно. Так что когда разработчики нейросетей начали сначала делиться успехами своих детищ в живописи, а после запустили сервисы нейрогенерации изображений мы, конечно, очень обрадовались. Но простая генерация картинок в ответ на набор слов — это еще не очень интересно. Поэтому мы пошли к Илье Яцкевичу и Алексею Устьянцеву, которые занимаются нейрогенеративным искусством, чтобы они попробовали себя в роли иллюстраторов научных новостей — а потом поговорили с ними о том, как меняют их работу рисующие машины.

[N + 1]: Генерация изображений при помощи нейронки, это что? Уже отдельное художественное направление? Или все люди, которые занимаются изобразительным творчеством, просто сейчас осваивают новый инструмент?

[Илья]: Сейчас в твиттере и инстаграме (соцсеть признана в РФ экстремистской и запрещена) многие стонут: «о боже, нет, они заменяют художников!» [мы говорили с Ильей и Алексеем еще 24 августа — прим. N + 1]. Ну, так-то слава роботам, конечно. И определенные подвижки на рынке труда в связи с этим произойдут. Грубо говоря, если ты не можешь делать что-то подобное — это проблема. Но в любом случае человеческая роль во всем этом остается. Потому что человек делает это с пониманием идеи, контекста. Он корректирует промпты, настраивает их в соответствии со своей задумкой, со своим представлением о предмете — особенно когда мы говорим о весьма абстрактных научных образах. Да и, в конце концов, он потом ретуширует это и собирает вместе.

[N + 1]: А ты можешь всю цепочку описать? Не только применительно к нашей конкретной истории с заголовками, а вообще.

[Илья]: Я, например, работаю сейчас над клипом Дельфина и мы используем нейросетки для того, чтобы дать какие-то общие референсы, направление, настроение. То, ради чего я раньше ковырял бы пинтерест на протяжении многих часов. Сейчас на это уже не уходит так много времени. Получается где-то конкретнее, где-то интереснее.

[N + 1]: То есть ты начинаешь предпочитать такую технику всем остальным сценариям, она заменяет прошлые привычки?

[Илья]: Ну, я по-прежнему смотрю пинтерест, я по-прежнему люблю рисовать руками, но это все удачно дополняет мою практику.

[Алексей]: Давай я добавлю. Нейросетки очень полезны, в первую очередь, когда тебе нужно очень быстро получить очень большое количество материала. То есть у тебя появилась идея, ты забиваешь два предложения и получаешь кучу всего. За это время ты раньше успел бы только пинтерест открыть и первые две картинки полайкать. А когда тебе нужно что-то человеку показать и объяснить, это очень удобно.

[N + 1]: Ага, плюс это ровный результат — получаешь много и оно все какого-то одного качества.

[Алексей]: Ну, одного стиля... Насчет качества не уверен.

[Илья]: Во-первых — да, конечно, в среднем по больнице качество абсолютно ровное. Но помимо этого есть еще прекрасные случайности, которые происходят достаточно часто. Картинки, которые выбиваются из ряда себе подобных. Как правило, именно такие случайности я и предпочитаю использовать. То есть у тебя помимо массы качественного материала есть еще какие-то классные штуки, которые в процессе возникают.

Смотри, вот мы с Лешей придумали историю про планету после многих техногенных катастроф, где вдобавок ко всему появился какой-то загадочный красный туман, который придал людям необычные возможности — в общем, у нас есть сеттинг. В рамках этого сеттинга у нас появляются персонажи: они всплывают из вопросов о том, как выглядит это, как выглядит то. У меня есть представление о том, как это выглядит, какой-то [общий] силуэт:

Eli Jackiewicz

И я иду с ним в одну нейросетку, пробую его сгенерировать там, может быть рисую вручную:

Eli Jackiewicz

Потом иду в другую — и быстро генерирую большое количество деталей, которые позволяют мне описать форму этого силуэта максимально выразительно и насытить его деталями.

И вот на стыке такого человеческого и машинного творчества получаются прикольные вещи:

[N + 1]: Хорошо. Давай к следующему. Вот есть новый инструмент, плюс какие-то навыки, необходимые для того, чтобы им пользоваться. Есть ли уже какая-то базовая матчасть, которую нужно освоить, чтобы всерьез стать таким нейроартистом?

[Илья]: Когда это все начиналось, это было просто быстро развивающееся сообщество. Люди учились друг у друга, анализировали промпты друг друга и получали что-то новое. Сейчас уже есть коллосальное количество материалов, которые описывают эту всю промпт-инженерию как дисциплину своего рода. Есть синтаксис, есть ключи, которые позволяют влиять на стилистику изображения. И так далее. Более того, у меня в одной из коллаб запущена отдельная нейросетка, которая разбирает картинки на промпты.

[N + 1]: То есть ты кормишь ей картинку, а она тебе говорит, каким промптом ее можно получить?

[Илья]: Да. Реверс-инжиниринг уже есть. Словари промптов уже есть. Какие-то интерфейсы на эту тему, кроме текстовых, уже появляются. Все это развивается очень быстро.

[N + 1]: А ты в целом себе представляешь, что у нее под капотом там? Или ты просто как артист с этой штукой взаимодействуешь?

[Илья]: Нет, я с ней взаимодействую чисто как чувак, который кнопочки нажимает. У меня есть примерное представление о том, как это работает. Я понимаю, что в ней там два логических модуля, один занимается этим, второй тем. Я понимаю, как происходит диффузия, как картинка восстанавливается из шумов. Я могу запустить какой-нибудь код в какой-нибудь коллабе. Немножко его подправить — тоже могу. Хотя не очень люблю.

[N + 1]: И тебе это, в общем, не надо? То есть ты не оказываешься в ситуации, когда ты такой — блин, ну тут с кодом надо работать, я мимо? Просто вот работающий черный ящик и все хорошо, я умею с ним взаимодействовать на уровне промптов, я осваиваю и развиваю искусство взаимодействия с этими машинами.

[Илья]: В принципе, да. Но есть отдельные инструменты, которые все еще требуют работы с кодом. Сейчас я участвую в альфа-тестах еще одного такого сервиса. Они делают классное рабочее пространство с многоуровневой структурой. Ты перетаскиваешь в свое рабочее пространство разные нейросетки, подключаешь их друг к другу, как в DaVinci или Blender. И скармливаешь результат одной генерации в другую. Это дает кучу неожиданных и интересных результатов.

[N + 1]: А, они атакуют продукт друг друга?

[Илья]: Ну можно и так сказать. Я могу взять своего персонажа, при помощи одной нейросетки убрать у него фон, при помощи второй преобразовать его в 3D и потом при помощи третьей его как-то стилизовать.

[N + 1]: Окей. Давай теперь вдоль галереи с нашими заголовками пойдем. Что там происходило и как? Вот у тебя был список, что ты пошел с ним делать?

Мы отправили Илье с Алексеем список типичных новостей, с иллюстрацией к которым, на наш взгляд, человеку не так просто справиться:

  • Бозе-конденсат из атомов рубидия в оптическом резонаторе
  • Оптогенетический инструмент для управления экспрессией белков
  • Новый путь синтеза пребиотических кислот
  • Углеродный ремень закрутился в ленту Мебиуса
  • Веселящий газ позволил получать фенолы каталитически
  • Топологически хиральный молекулярный узел
  • Кластерные полиоксометаллаты собрались в двумерные пористые структуры
  • Астрономы отыскали первый затменный промежуточный поляр с потоковой подпиткой
  • Поражение миндалины не дало людям принести одного в жертву ради спасения многих
  • Спиннер превратили в экспресс-тест для диагностики инфекций мочевых путей
  • Обучение страхом вызвало у мышей пластичность в дендритах
  • Гаплонедостаточность уличили в развитии тяжелой формы стафилококковой инфекции
  • Контактные линзы доставили лекарство в переднюю камеру глаза с помощью ионофореза
  • Бегающие и кусающиеся собаки поддержали эпидемию бешенства в Танзании
  • Пересадка фекальной микробиоты снизила тягу к алкоголю
  • Дифференцировку моноцитов в толстой кишке у мышей связали с регуляторным фактором интерферона 5
  • Клоны флуоресцирующей макаки помогли оценить безопасность точечного редактирования генома
  • Вирусы заставили мышей привлечь комаров-переносчиков запахом черемухи

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Секс-расхламление: 3 устаревших интимных правила, от которых пора отказаться Секс-расхламление: 3 устаревших интимных правила, от которых пора отказаться

Пора превратить просто хороший секс в идеальный

Maxim
«Просто Мария», «Богатые тоже плачут» и «Клятва»: культовые мексиканские сериалы «Просто Мария», «Богатые тоже плачут» и «Клятва»: культовые мексиканские сериалы

Вспоминаем самые популярные мексиканские «мыльные оперы»

VOICE
Джулия Робертс и три ее самых заветных желания Джулия Робертс и три ее самых заветных желания

Второй Джулии Робертс все еще нет как нет

Караван историй
Sirena 78 Sirena 78

Почему Sirena 78 вошла в топ-20 новых моделей яхт категории must seen?

Y Magazine
Как справиться с паническими атаками на фоне информационного негатива Как справиться с паническими атаками на фоне информационного негатива

Как справляться с информационной интоксикацией, не выпадая из новостной повестки

Psychologies
Один день в городе Один день в городе

Отправляемся в Ялту в поисках счастья

Лиза
Боремся со стрессом: что такое медитация и как начать медитировать Боремся со стрессом: что такое медитация и как начать медитировать

Всего 20 минут медитации в день и вы снизите уровень стресса

ТехИнсайдер
«Бояться нечего»: 6 смелых уроков жизни от Илона Маска — узнайте секрет его успеха «Бояться нечего»: 6 смелых уроков жизни от Илона Маска — узнайте секрет его успеха

Почему Илон Маск настолько успешен?

Psychologies
Как взбить пух в пуховике после стирки: рабочие способы, которые восстановят внешний вид вещи Как взбить пух в пуховике после стирки: рабочие способы, которые восстановят внешний вид вещи

После этих методов пуховик снова будет как новый!

ТехИнсайдер
5 самых абсурдных теорий заговора про знаменитостей. Часть II 5 самых абсурдных теорий заговора про знаменитостей. Часть II

Что масоны и рептилоиды скрывают о наших кумирах?

Maxim
Учителя, дети или родители: кто несет ответственность за школьный буллинг? Учителя, дети или родители: кто несет ответственность за школьный буллинг?

Какие меры необходимо предпринимать для профилактики и борьбы с буллингом?

Psychologies
Геотермальные батареи решат главную проблему альтернативной генерации Геотермальные батареи решат главную проблему альтернативной генерации

Что такое геотермальные источники энергии?

ТехИнсайдер
Натирало, сползало, душило: это женское белье времен СССР было сущим кошмаром Натирало, сползало, душило: это женское белье времен СССР было сущим кошмаром

Какое счастье, что эпоха советского белья позади

VOICE
Свободная ниша: что не так со складами light industrial Свободная ниша: что не так со складами light industrial

Почему девелоперы не строят объекты востребованного формата light industrial

Forbes
Мое личное тело Мое личное тело

Дряблая кожа, отсутствие подтянутого мышечного корсета – как с этим бороться

Добрые советы
После инсульта в детстве правое полушарие берет на себя языковые функции левого После инсульта в детстве правое полушарие берет на себя языковые функции левого

Мозг младенцев способен гибко перестраиваться в случае травмы

ТехИнсайдер
«Явление улыбчивого медведя»: чем шокировали британцев Михаил и Раиса Горбачевы во время первого визита «Явление улыбчивого медведя»: чем шокировали британцев Михаил и Раиса Горбачевы во время первого визита

«Смотрины» — так назвал визит четы Горбачевых в Великобританию Рой Медведев

VOICE
Выработать свой стиль в одежде? Легко! Простые советы Выработать свой стиль в одежде? Легко! Простые советы

Как привести свой гардероб в порядок?

ТехИнсайдер
Тайны кальянов: мегазатяжки, кокос и чайный лист Тайны кальянов: мегазатяжки, кокос и чайный лист

Курение кальяна овеяно кучей легенд. Что из них правда?

Maxim
Третий возраст: как отели встречают пожилых постояльцев Третий возраст: как отели встречают пожилых постояльцев

Курьезные случаи из истории отеля, связанные с размещением особенных гостей

Правила жизни
Звезды над дюнами Звезды над дюнами

Путешествие к секретам Аравийской пустыни

Вокруг света
С тобой плохо, без тебя еще хуже С тобой плохо, без тебя еще хуже

Как распознать зависимые отношения и выбраться из них

Лиза
Как познакомиться с мужчиной для серьезных отношений Как познакомиться с мужчиной для серьезных отношений

Психолог рассказала о нескольких проверенных способах найти серьезные отношения

Psychologies
The Guardian: белый шум может стать следующим большим трендом в музыкальной индустрии The Guardian: белый шум может стать следующим большим трендом в музыкальной индустрии

Инфлюенсеры рекламируют белый шум как эффективный способ сосредоточиться

Inc.
«Когда погибают ваши товарищи, вряд ли вы видите за этим какую-то метафору» «Когда погибают ваши товарищи, вряд ли вы видите за этим какую-то метафору»

Николай Изволов о том, как была восстановлена «История Гражданской войны»

Weekend
«Эта книга изменила историю нашей семьи»: как Томас Манн написал «нобелевский» роман «Эта книга изменила историю нашей семьи»: как Томас Манн написал «нобелевский» роман

Отрывок из биографии Томаса Манна, которую написал Колм Тойбин

Forbes
Спутник каждый день: реалистичны ли новые планы «Роскосмоса» Спутник каждый день: реалистичны ли новые планы «Роскосмоса»

Для производства спутника в день потребуется ломка всех принципов космопрома

Forbes
«Мой дом — моя крепость»: 4 совета архитектора для уютного пространства «Мой дом — моя крепость»: 4 совета архитектора для уютного пространства

Как обустроить ваше личное комфортное «гнездо»

Psychologies
Почему вирусы могут вызвать воспаление кишечника — и при чем тут наши гены Почему вирусы могут вызвать воспаление кишечника — и при чем тут наши гены

Обычная вирусная инфекция может вызвать воспалительное заболевание кишечника

ТехИнсайдер
Просо и ячмень оказались основными культурами у жителей средневекового оазиса Миран Просо и ячмень оказались основными культурами у жителей средневекового оазиса Миран

Несмотря на сложные условия, жителям Миран удавалось выращивать пшеницу

N+1
Открыть в приложении