Гид по нейронным сетям для дизайнеров и не только

Рассмотрим инструменты для решения рабочих задач наглядно с примерами

Материал рассказывает о нейросетях с низким порогом вхождения, которые полезны для дизайнерских и художественных задач, включая:

Также даются советы по формулировке запросов и рекомендации по использованию нейросетей с учётом их особенностей.

Для базового понимания нейросетей можно изучить бесплатный курс от Т—Ж. В нём рассказывается, что такое нейросети, на каких принципах они работают и как формулировать запросы эффективно. В курсе рассматриваются текстовая нейросеть ChatGPT (бесплатно) и графическая — Midjourney (бесплатно 25 картинок в день).

Полный курс занимает 3,5 часа, но для работы с изображениями достаточно изучить Введение, а также 1, 9 и 10 уроки (всего 1,5 часа).

Всё общение с нейросетями происходит через промты (запросы) и их развитие в диалоге. Качество генераций и то, насколько они оправдают ожидания, зависит именно от них. Лучше всего формулировать запросы на английском языке.

Промт (или запрос) в контексте генерации контента — это текстовое описание или инструкция, направляющая модель на создание конкретного результата. Цель промта — максимально точно и детально объяснить, какой результат ожидается.

При формулировании запроса стоит придерживаться следующего плана: цель + задача + контекст и детали + ограничения.

Пример запроса: "напиши мне промт (задача) на английском языке (ограничение) для генерации реалистичного изображения (цель) с четырьмя бегущими солдатами с оружием в шлемах и в дыму (контекст и детали)".

Любая текстовая нейросеть (ChatGPT, YandexGPT, и т.д.) может написать промт на английском языке по запросу.

Дополнительный способ получения промта — закинуть в любую графическую нейросеть изображение-референс, которое она разобьет на ключевые слова. Так можно понять, как нейросеть видит такое изображение.

https://www.krea.ai/

Инструмент — Flux

Хорошая альтернатива популярной нейросети Midjourney, которая вышла недавно и доступна бесплатно и без ограничений (на данный момент). Генерирует фотореалистичные изображения в формате 1024x1024, есть возможность масштабирования (Enhance).

В режиме подписки открывается коммерческая лицензия на генерации и возможность их скрытия от сообщества.

Инструмент — Logo Illusions

Небольшой инструмент для генерации изображений, основанных на одной иконке или символе с белым фоном. Хорошо смотрится издалека в небольшом разрешении.

Полезен для генерации изображений определённой формы, можно использовать в соцсетях, обложках чатов, брендинге.

https://www.midjourney.com/

Инструмент — Text To Image

Нейросеть для генерации изображений на основе текстовых описаний с добавлением изображений-референсов. Она пользуется большой популярностью благодаря высокому качеству и художественности созданных изображений.

В настоящее время открыта для бесплатного доступа. Ранее работа в ней велась только через Discord-сервера, но теперь выпущена удобная веб-версия для генераций и просмотра библиотек.

Подписки начинаются от 10 долларов. На стандартном плане открывается коммерческая лицензия на генерации, а на Pro-плане доступна скрытая генерация (без отображения в общих библиотеках).

Также есть YouTube-канал с полезной информацией о нейросети.

https://dreamstudio.ai/

Инструмент — Text / Image To Image

Нейросеть использует Stable Diffusion как движок для генерации изображений и имеет удобные инструменты для работы, включая управление параметрами. Изображения генерируются за кредиты (10 долларов = 5 тысяч изображений), они не общедоступны и имеют некоммерческую лицензию. Качество изображений не превышает 1500 пикселей по ширине.

Работа с этой нейросетью хорошо решает задачу создания референсов и концептов, но не готовых изображений.

Нейросеть хорошо работает с основой в виде изображения, превращая цвета, атмосферу и силуэты в реалистичные фигуры.

https://www.dzine.ai/

Инструмент — Image to Image.

Нейросеть позволяет загрузить скетч любого качества и на его основе создать генерацию. Отлично подходит для быстрого создания референсов по композиции, атмосфере и позам. Желательно прописывать промт, чтобы нейросеть лучше уловила ход мыслей и учла нюансы (например, цветовые пожелания).

Доступен импорт PSD-файлов.

Минус нейросети — в ней нельзя рисовать. Понадобится дополнительный графический редактор для рисования или ручка с чистым листом бумаги (она воспринимает клетку как линии).

Dzine условно бесплатная (7 картинок в день) и недорогая (10–60 долларов в месяц) для безлимитных генераций. Выгружать изображения не рекомендуется, так как это тратит кредиты — лучше делать это через PrtSc.

В режиме подписки доступна коммерческая лицензия на генерации, и они будут скрыты от всех в сообществе.

https://www.invoke.com/

Это профессиональная нейронная сеть, заточенная на работу арт-отдела. Все действия и выстраиваемые процессы в ней распространяются на всех участников пространства. В чём её преимущества:

Гайдлайны

Можно задать определённые требования к артам по цветам, формам и качеству для поддержания их консистентности. Таким образом, вся команда будет генерировать арты с заданным профилем.

Кастомные модели

Нейросеть можно «обучать» на существующих артах, чтобы на их основе создавать новые генерации.

Контроль над генерацией

Работа по слоям и элементам, использование референсов для генерации конкретных объектов.

Права

Генерации скрыты от других и имеют коммерческую лицензию. Invoke не обладает на них никакими правами.

Бесплатных генераций у нейросети нет, но для организаций можно запросить демо-версию. Это отличная возможность опробовать её на своём проекте с коллегами. Выглядит многообещающе.

https://www.recraft.ai/

Нейро-доска, предоставляющая все необходимые инструменты в одном пространстве. Интерфейс похож на Miro, можно работать совместно с коллегами (только в платной версии для команд), создавать несколько досок для разных проектов или типов задач. Возможности:

Удаление фона изображения:

Ресайз изображений:

Удаление деталей изображения:

Генерация изображений:

Генерация мокапов:

И все это в рамках одной доски:

В бесплатной версии генерации новых изображений (за исключением таких инструментов, как ресайз, мокап, удаление фона и т.д.) общедоступны и отображаются в библиотеке, но нет ограничений на количество действий. В платной версии (от 20 долларов в месяц) генерации скрыты от других.

https://www.framer.com/

Быстрая генерация лендингов (менее минуты) сразу под несколько разрешений с заданной тематикой. Удобное редактирование элементов, настройка сеток, выбор цветов и шрифтов. Можно настраивать локализацию и публиковать сайт. Выглядит как более удобная и продвинутая альтернатива Tilda.

Хорошо подходит в качестве сайта-портфолио — после публикации ссылка доступна другим людям, и всё это бесплатно на домене framer.ai с аналитикой. Если нужна большая аудитория и видимость в поисковых системах, подписки начинаются от 5 €.

Нейросеть также может помочь с вдохновением для верстки, палитр и шрифтовых пар.

Не нужна регистрация, нет требований к правам и лицензиям.

https://imgupscaler.com/

Удобный и быстрый способ увеличить разрешение изображения на 200% (2k) или 400% (4k). Подписка необходима, если требуется повысить качество изображения до 16k.

https://objectremover.com/

Быстрое удаление деталей с изображения разрешением до 3k.

https://runwayml.com/

Инструмент — Text / Image To Video

Позволяет создать видео или оживить готовое изображение через текстовый запрос. Длительность видео — от 4 до 10 секунд. Полезен для задач, требующих небольших анимаций, GIF-изображений или движущихся задних планов.

Части изображения можно выделять кистью, что позволяет задать разные виды анимаций и плановость. Например: розовая кисть — движение вправо, зелёная — влево, синяя — дрожание/шум.

Примеры работ с готовыми изображениями:

Результат анимации — один слой арта.

Результат анимации — мужчины и фон на разных слоях.

В бесплатной версии доступно урезанное качество с водяным знаком. Генерация одной итерации занимает более 10 секунд. Для лучшего результата стоит разбивать объекты на разные слои, так как нейросеть не может оставить некоторые объекты неподвижными. Результат Runway можно совмещать с неподвижными слоями в видео-редакторе (например, в After Effects).

По сравнению с After Effects, этот инструмент позволяет решать задачи быстро и просто, добавляя больше естественности. Например, он хорошо работает с освещением, бликами на поверхностях и «дорисовыванием» объектов.

Тарифы начинаются от 15 долларов в месяц и влияют на качество и длительность видео.

Все генерации подходят под коммерческую лицензию, Runway не обладает правами на них, и они скрыты от других пользователей.

Больше примеров работы нейросети можно найти в этом видео.

https://www.vidu.studio/

Инструмент — Text / Image To Video

Аналог нейросети Runway с более упрощёнными инструментами. В бесплатной версии доступна генерация видео длиной 4 секунды, подписки с коммерческой лицензией начинаются от 10 долларов в месяц.

Из удобного:

Пример анимации в стилистике General на основе изображения.

Пример анимации в стилистике Animation на основе текста.

Все текущие нейросети хорошо работают с казуальными изображениями, но сложнее с реалистичными и требуют дополнительной доработки руками опытного художника, если их планируется использовать в продакшене. Для удобства работы можно применять нейросети для создания референсов, пожеланий к техническому заданию, обсуждения видений, улучшений и обработки существующих изображений.

В данном документе не рассматривалась популярная Stable Diffusion, так как у неё высокий порог вхождения: она требует мощного ПК и значительного времени для изучения. Для тех, кому она интересна, есть хорошая статья.

Такие нейросети, как Dzine, Recraft, Runway и Krea, имеют в своём арсенале множество инструментов, которые не были упомянуты в этом документе. Это связано с тем, что они не прошли проверку на адекватность, и было непонятно, как их можно использовать в рабочих задачах. Многие нейросети работают "для фана", чтобы генерировать что-то красивое, а не для решения задач. Однако это можно проверить самостоятельно и, возможно, найти что-то интересное.

Удачи!

Изучала нейросети и написала статью UX/UI-дизайнер Astrum Entertainment Настя Фильченко.