Пресет ControlNet для переворачивания персонажей в Stable Diffusion

Друзья, буквально в прошлом гайде я вам обещал, что скоро будут появляться готовые пресеты для OpenPose в ControlNet, и вот первая ласточка. Этот пресет позволяет вам сделать художественный грид на котором будет превью персонажа. Это работает на любой модели, без лор, эмбедингов и всего прочего, т.е. вы получаете полную и абсолютную гибкость. Конечно это работает не идеально и придется поинпеинтить, но еще неделю назад я и представить не мог, что смогу создать такой грид за одну генерацию!

Не идеально, но за одну генерацию (не считая инпеинтинга лиц).
Не идеально, но за одну генерацию (не считая инпеинтинга лиц).

Что понадобится:

  • Актуальный Automatic 1111 с установленным и активированным ControlNet в коллабе или локально.
  • Промпт, эмбединг, лора или что-то еще что содержит описание нашего персонажа.
  • Сам OpenPose пресет скачивайте тут, это просто картинка.
Это гениально и просто
Это гениально и просто

Автоматик запустили, открыли на вкладке txt2img, контролнет включили галочкой Enable, препроцессор отключили, модель поставили OpenPose, загрузили скаченный пресет в окошко в контролнет.

Это. Очень. Просто.
Это. Очень. Просто.

Практически все готово, теперь выставляем ширину в 1024, это важно. Все мы знаем глитч из-за которого при выставлении высокого разрешения персонаж начинает тупо копироваться, вот тут на этом играет на руку.

Никакой магии, только ловкость рук, у меня 1088, но это потому что я кривой
Никакой магии, только ловкость рук, у меня 1088, но это потому что я кривой

Еще один момент, промпт должен начинаться с (character sheet:1.6) of 1 women... или man или orc, кто там у вас, ну и далее по тексту прмопта. Чтобы получить хороший результат прописывайте и персонажа и его одежду, может быть даже конкретно и с весами. Немного повысьте уровень CFG, скажем до 10, это всегда стоит делать на больших разрешениях. И через 2-3 генерации у вас будет такой результат, который вас устроит. Дальше немного инпеинтинга и готово, в общей сложности 5-10 минут не считая ожидания генерации.

Вот так получилось у меня с промпта
Вот так получилось у меня с промпта
А вот так с эмбединга
А вот так с эмбединга

А на этом у меня все, скидывайте в чатик интересные пресеты, если найдете, может быть соберем коллекцию. Скидывайте свои работы, очень хочется увидеть результат от настоящего концепт артиста или игрового художника.

Скоро увидимся друзья и обязательно заходите на мои стримы.

---

Вот мой список полезных ресурсов:

  • Арт-нейросети от Neural Dreaming основной канал по нейросетям - подпишитесь, чтобы быть в курсе всего!
  • Neural Dreaming на YouTube тут проводятся стримы и выкладываются гайды - подпишитесь!
  • Neural Dreaming на Boosty - записи всех стримов, ххх сеты, ассеты и секретные гайды только для подписчиков, и доступ в чат для самых продвинутых.
  • ДЕНЬГИ - чат, где мы учимся зарабатывать на наших нейро-талантах вместе с настоящими профи.
  • ЧЕЛЛЕНДЖИ - группа с новыми нейро-челенджами каждый день - участвуй!
  • СКЛАД - все, что нужно для вашей нейросети: лоры, модели, эмбединги - осторожно, там нет цензуры.
  • АДМИНСКАЯ - группа для администраторов нейро-каналов, добавьте свой канал в био, прежде чем подавать заявку.
  • Чат нейро-операторов - общайтесь, задавайте вопросы, делитесь опытом с более чем 500 нейро-операторами
3636
10 комментариев

Братец, ты один из лучших.
Или сестричка.
Или сестричко....

1
Ответить

Братишка)

Ответить

А что препроцессор делает в КонтролНете? Там собственно такой же опенпоз есть для чего он именно в препроцессоре? Как раз анализирует позу с изображения на инпуте? А тут мы получается минуем тот процесс т.к. уже есть?

Ответить

Препроцессор обрабатывает фотку и делает из неё карту, перед тем как делать картинку, потому и называется препрцоессор. А в этой статье карта у нас уже есть, поэтому препроцессор не включаем.

2
Ответить

Шо с лицом

1
Ответить

Еще один момент, промпт должен начинаться с (character sheet:1.6) of 1 women... или man или orc, кто там у вас, ну и далее по тексту прмопта.

Зависит от сети. Delusion например наоборот, спец.фон лепить начинает. Зато спокойно "grey background" в конце запроса отрабатывает

Ответить

Только забыл указать, что это работает только с мультяшками и только в txt2img. Что ж, наверное богу анимэ нужно больше херовых анимэ картинок от восторженных школьников

Ответить