Погружаемся в реализм (Гайд)

TLDR: Че тут происходит вообще? Я тут делюсь своим опытом по работе с нейронками. Если тебе эта тема интересна, но ты только начал вникать загляни ко мне в профиль или в конец статьи, там есть полезные ссылки. Сейчас это может быть слишком сложным для тебя.

Привет, сегодня мы изучим основы получения фотореализма в ваших генерациях. По большому счету нам необходимым всего 2 вещи, первая и пожалуй самая главная, это модель, а второе - грамотный промптинг, начнем с модели.

Погружаемся в реализм (Гайд)

Мы будем работать "deliberate". Потому что на аниме моделях заниматься этим глупо, а на фотореалистичных слишком просто. Напишем "woman". Посмотрим, что у нас получится:

Погружаемся в реализм (Гайд)
Погружаемся в реализм (Гайд)

Ни туда, ни сюда. Это еще не фото, но уже и не рисунок. Не то, что мы сегодня хотим достичь. Вообще модели можно поделить на две большие категории. Одна категория выдает годноту уже с парой слов (то есть работает примерно как миджорней), другим же нужно навалить "мяса". "Deliberate" по большей части относится ко второй. Что является платой за гибкость.

Добавим конкретики. a photo of woman

Погружаемся в реализм (Гайд)

Лучше. Продолжаем

Думаем как думает модель. При обучении ей скармливали изображения с подписями о том что на нем изображено. Значит нам нужны подписи которые могли быть под фотографией.

photography, 4k, 8k, 100mm, canon EOS, dof, analog photo, dslr, bokeh, grain и так далее, много их. Часть выкладывал файлов в свой группе. Дальше можно поработать над деталями и вот тут люди часто делают ошибку. Они пишут realistick eyes, hyperrealistick skin и так далее. Это подсказки которым место наоборот в негативе так как относятся хоть и к крайне детализированным, но все же картинам и рендерам. Мы используем detailed skin, detailed face, intricate detailed

Погружаемся в реализм (Гайд)
Погружаемся в реализм (Гайд)

Мы уже ближе, но все еще есть самая большая ошибка. Идеальная кожа. Да мы уже можем видеть поры, но она ну слишком гладкая. Нет ни родинок ни смены пигментации. Ни-че-го. Это сильно бьет по натуральности картинки. Без нашего вмешательства сетка обычно такое не добавляет. Вмешаемся.

Погружаемся в реализм (Гайд)
Погружаемся в реализм (Гайд)

Так же обратите внимание на CFG - он всего 3. Хотя обычная рекомендация 7-11. Но я обнаружил что большинство моделей в реализме показывают себя лучше с довольно низким CFG.

+ pigmentation

Погружаемся в реализм (Гайд)

В общем, дефекты кожи наш бро. А кто еще наш бро? Правильный семплер конечно. Видим что "фотка" слегка заблюрена. Это дело рук Eauler a. Переставим на DPM ++ 2M Karras и сразу получаем вот такой прирост:

Погружаемся в реализм (Гайд)

Кстати, выше я упоминал токен inricate detailed, будьте с ним осторожны, это очень сильный токен который сильно умножит нам детали и получим вот это. Токены бываю как слабыми так и сильными. Некоторые на первый взгляд могут вообще не давать эффекта, но оказывают хорошее действие в совокупности с другими. Как видим эффект этого токена на лицо.

Погружаемся в реализм (Гайд)

Сверху это всё можно полернуть нейросетевым апскейлером. Например, через Hires fix или SD Upscale. Но учтите, что скорее всего вам прийдется отрегулировать вес дефектов. Они могут начать проявляться слишком сильно.

Подведем итог. Для фотореализма нужно:

  • Выбрать правильную модель
  • Правильный промптинг
  • Выбрать подходящий семплер
  • Не забыть про дефекты
  • Правильный CFG
  • Все советы это лишь советы, а не строгие правила. Например, добавление realistick eyes может наоборот улучшить вашу работу если грамотно подобрать ему вес.

Еще один пример применения этих советов на практике:

Погружаемся в реализм (Гайд)

Поделиться результатом или задать вопрос, а так же пообщаться с единомышленниками вы можете в нашем нейробратском комьюнити.

Больше гайдов на моем канале, подписывайтесь чтобы не пропустить:

На моем бусти вы сможете найти датасеты для обучения, доп материалы к гайдам и многое другое. Или просто финансово отблагодарить если мои материалы вам как-то помогли.

П.С. Создали онлайн интенсив для новичков. Пройдет 7 и 10 апреля 2023 года. Ознакомиться с программой и принять участие можно по ссылке.

6666
19 комментариев

Комментарий недоступен

6
Ответить

Извини, забыл. Поставил

4
Ответить

Зачем нужен реализм, если это не конкретные модели?;)

2
Ответить

Чтобы делать его с конкретными моделями завести им онлифанс грести деньги лопатой попивая сок на мальдивах? 😐

3
Ответить

Ноу каммент

2
Ответить

Пытаться делать реализм на Делиберейт это как срать стоя на голове и не сняв штаны - можно, но зачем? А в целом опять статья-пустышка, реализма нет, как делать нет, советов-секретов-хитростей нет, нет ничего. Может лучше ничего не писать, чем вот так позориться?

Ответить

Особых секретов нет. Но есть куча нюансов. Но если о них рассказывать прийдется очень много скакать туда сюда и тема уже не подойдет для новичков. Данный гайд вводный в тему и он свою задачу хорошо выполняет. Так что я пожалуй продолжу 😎.
А делиберейт потому что чисто фотореалистичные модели скучные. Я их даже не использую для генерации людей. А для кое чего другого. Тут же можно поиграть со стилизацией.

4
Ответить