Праздники близко. Рассказываю как сделать оригинальный подарок себе или близкому⁠⁠

Сегодня расскажу как наиболее просто, без тренировки моделей поменять сюжет на фотографии максимально сохранив оригинальное лицо. И чу чуть про апскейл. Если будете делать в подарок он вам понадобится. Поехали

Сразу по требованиям к фото которые сильно облегчат вам жизнь.

Нормальное качество. 4к не нужно, но и сильное мыло и шум усложнят получение хорошего четкого результата да еще и чтобы похож был.
Поза должна быть такая же которую вы хотите видеть на своем арте. Для других случаев мы заходим на территорию обучения модели на фотографиях.

Есть способы все это обойти, но мы уйдем от главной темы.

Гермиона, к доске!

Показывать буду на знаменитости чтобы было проще оценить похожесть итогового результата.

Сохраните эту фотографию или возьмите свою. Запускаем стабильную диффузию и идем на вкладку img2img.

Ах, да. Если вы впервые видите мои статьи, то я пытаюсь рассказать как работать с нейросетями не обладая каким либо техническим багажом. Вводная часть тут (сорян за пикабу но альтернатива читать его в телеге что еще менее удобно). Но если вот совсем не хотите с этим возиться можете обратиться в наш чат энтузиастов, возможно вам захотят помочь порадовать близких. А на вопросы я и сам отвечу.

Итак, вкладка img2img:

Почти все то же самое что и на txt2img, но теперь у нас есть место для нашего изображения на основе которого мы и будем получать другое.

Так же появился блок Resize mode его пока не трогаем. А вот новый ползунок Denoising streinght мы будем трогать очень активно.

Помните что нейросеть генерирует фотографии из шума? Он регулирует, как много шума вы добавите на свою исходную фотографию.

0.1 - нейросети почти не с чем будет работать и изменения будут минимальными

0.9 - от вашего оригинального изображения почти ничего не останется.

Но, не забываем и другие параметры которые мы изучали до этого, они тут есть, а значит все точно так же работают.

Основы узнали. Приступим. Выберите фотографию которую хотите изменить. В поле промпт вбейте информацию о стиле, сюжете и тд который вы хотите получить. Все делаем как если бы вы работали в txt2img. Негативный промт так же рекомендую использовать. Вы же проходили урок где я вам его давал?

Если нет держите, но урок пройдите:

deformed, bad anatomy, disfigured, poorly drawn face, mutation, mutated, extra limb, ugly, disgusting, poorly drawn hands, missing limb, floating limbs, disconnected limbs, malformed hands, blurry, ((((mutated hands and fingers)))), watermark, watermarked, oversaturated, censored, distorted hands, amputation, missing hands, obese, doubled face, double hands, asian, b&w, black and white, sepia

Так как нам не просто нужно получить одно на основе другого, но и сохранить часть изображения для этого нам понадобится крутая штука. Называется inpaint если работали с масками в фотошопе то это ваш старый друг.

Нажав инпейнт картинка переносится в этот инструмент. Нажимаем на карандаш и закрашиваем ту часть картинки которую мы менять НЕ хотим (пока что).

Новая подвкладка новые галочки . Давайте разбирать.

Inpaint masked - изменять то что в маске. По умолчанию галка стоит тут. Переставьте как у меня.

Inpaint not masked - изменять то что НЕ в маске. Получается сейчас все кроме лица.

Fill - зальет картинку сильнее чем ориджинал

Original - постарается сохранить картинку

Пу-пу-пу. Рассказываю примитивно) Если ориджинал постарается сохранить цвета, то фил может забить на это хер. Можно использовать когда хотите получить лес, а на картинке вообще ничего зелёного нет, вам пригодится фил. Ориджин же изменяет картинку не так сильно. Но, филу понадобится намного больший уровень денойза, ведь он считай с нуля работает, а значит мы можем получить что-то такое. Другие 2 нам прямо совсем сейчас не нужны.

(Есть способ избежать этой ситуации, и изменить исходник прямо полностью но сохранив позу, но это тема отдельной статьи. Если уже шарите то подсказка ControlNet)

Whole picture и Only masked. Режим Only masked изменяет выбранную маску в более высоком разрешении, а потом вставляет его обратно. То есть на мелких объектах это повышает детализацию. На качество фона это почти не повлияет поэтому сейчас что выбирать не принципиально.

Используя все настройки как на скрине выше, жманькаю генерацию.

Кто-то уже может назвать это результатом, но. Лицо слишком сильно не соответствует остальному стилю. Исправляем. Следите за руками. Хватаем мышкой устраивающий вас результат и тянем на наш исходник.

Вуаля, теперь мы работаем с ним.

Теперь нам нужно работать с лицом и не трогать остальное изображение. Поняли как это сделать? Верно. Переключиться на Inpaint masked.

Так же убедитесь что Inpaint area у вас стоит на Whole picture дело в том что оно обладает побочным свойством. Перенимает стиль и информацию всей картинки, тогда как only masked только то что входит в нее и на некоторое количество пикселей в стороны. Задается ползунком "Only masked padding, pixels" а так как мы поменяли стиль фотки и хотим сделать то же самое с лицом то нам больше подойдет нужен Whole picture.

Так же нам нужно уменьшить денойз ведь мы хотим сохранить узнаваемость. Мои итоговые настройки выглядят так.

А результат вот так.

Теперь лицо не так сильно выбивается их окружения. Насколько сильно это делать дело вкуса каждого. А теперь мы хотим порадовать Эмму и сделать билборд с этим изображением. Но разрешение картинки такое что даже на рабочий стол не поставишь.

К АПСКЕЙЛЕРУ!

В самом низу в выпадающем меню "Script" выберите SD Upscale.

Тут у нас нейросетевой апскейл. Отличие от обычного что он не просто увеличивает картинку, а увеличивает ее прогоняя через нашу нейросеть что может добавить деталей там где их вообще не было. Их тут дофига и можно скачать еще больше основные отличия в том что какие-то хороши с реализмом какие-то с аниме и тд. Для наших целей подойдет ESRGAN_4x. Не рекомендую сразу апскейлить более чем в два раза. Если нужно разрешение выше мы можем просто наш результат прогнать еще раз и так хоть до размера стадиона. Учтите что ваши настройки такие как денойз и кфг будут влиять на его работу! У нас стоит 0.29 и мне окей. Тут нужно балансировать между не потерять детали оригинала за которые вы его так любите \ получить высокое качество.