реклама
разместить

Готик-арт и неожиданные пайплайны

Или как повелевать нейросетью при помощи порноигры.

Буэнос диас, нейроартисты и за ними следящие.

В нашем коммьюнити закрепилась традиция покупать себе RTX, и я с кайфом ей последовал. Гугл коллаб, отныне иди ты в пень со своими лимитами!

И вот, играясь на новых мощностях, я наконец добрался до контролнета, и мне напрочь снесно крышу. А когда я шутки ради попробовал кое-что сделать...

Короче говоря, пристегнитесь - мы едем в страну костылей и выкрутасов, коими славится нынешний этап развития технологии.

Сабж

Есть такая старая, но знакомая не очень узким круга игра:

ИРРЮЖУН
ИРРЮЖУН

Геймплей описывать не буду - люди культуры и так знают/догадываются.

Нам нужно другое - в игре мало того, что есть генератор персонажей...

Не смотрите на всратые скриншоты из первых результатов гугла - возможностей в качественной сборке куда больше.
Не смотрите на всратые скриншоты из первых результатов гугла - возможностей в качественной сборке куда больше.

..Так еще и студия, в которой можно расставлять их в какие угодно позы в каком угодно окружении:

И еще немного всратости из гугла
И еще немного всратости из гугла

А вспомнил я о ней потому, что в ходе спасения данных со старого компа наткнулся на билд внки, которую пытался сделать при помощи всего этого инструментария:

ВНки так и не получилось, но меня осенило - в наше непростое время возни с контролем генерации персонажей при помощи контролнета, почему бы не опуститься на слой ниже, и не задавать персонажей вместе с их позой еще до работы в самой нейронке?

Да, опенпоуз и куча костылей к нему прекрасны, но еще интересней скармливать нейросети почти готовый результат вместо попыток понять, где у скелета ухо, а где глаз (сорян, накипело).

Решено было начать с простого - закинуть сделанные для игры спрайты персонажей и посмотреть, что произойдёт.

Первой была Лилит:

А как еще можно назвать женщину-демоницу? Вот только по сюжету невышедшей игры ей это не особо и вкатывает.
А как еще можно назвать женщину-демоницу? Вот только по сюжету невышедшей игры ей это не особо и вкатывает.

И вот что произошло, когда я сгенерировал арт на основе одной лишь обработки в ControlNet - в промпте не было ничего, кроме worst quality, (low quality:1.4) в негативе:

На этом месте я вскрикнул, чуть не упал со стула и преисполнился восхищением
На этом месте я вскрикнул, чуть не упал со стула и преисполнился восхищением

"Охуеть" - подумал Штирлиц.

Далее я попытался описать в запросе ее внешку, но из-за моего колористического кретинизма не попал в цветовую гамму:

Помогите автору понять, какого цвета волосы и одежда были изначально. Pink не предлагать.
Помогите автору понять, какого цвета волосы и одежда были изначально. Pink не предлагать.

Я не поверил своему счастью, и решил попробовать другого персонажа:

А это Клэр - замученная жизнью и начальством администратор отеля.
А это Клэр - замученная жизнью и начальством администратор отеля.

На этот раз у меня получилось - промпт попал в детали, что в принципе не удивительно - office lady, glasses, leather skirt не самый сложный набор тегов:

Готик-арт и неожиданные пайплайны

Что ж, если оно умеет менять/повторять детали, то можно пойти с этим в страну креатива. Пробуем!

Закидываем в контролнет другой, более уверенный в себе спрайт:

Готик-арт и неожиданные пайплайны

И после обработки моделью depth получаем вот такую маску:

Могло быть и лучше, но для демонстрации возможностей оставим пока так.
Могло быть и лучше, но для демонстрации возможностей оставим пока так.

А дальше вы знаете - составляем промпт, генерируем, закидываем в инпейнт и тд. Не буду показывать весь процесс, покажу лишь свой скромный результат:

Кибервампирша, хо! Провода появились из-за кривой маски, но выглядят крайне эффектно - решил оставить.
Кибервампирша, хо! Провода появились из-за кривой маски, но выглядят крайне эффектно - решил оставить.

!!!Важная деталь - контролнет можно оставлять включенным во время инпейнта, так ваши правки не будут вылезать за пределы выставленных контролнетом ограничений. Это прекрасно, когда вам нужно сохранить определенные черты персонажа, но лучше выключать, когда вы идете править что-то еще, например фон.

Короче говоря, я предварительно в восторге. Лица и руки при таком пайплайне (слово-то какое, лол) в безопасности, потому что ты скармливаешь нейронке практически готовый результат - поза и персонаж есть, всё остальное - постобработка.

Мои эксперименты продолжатся, так что я вернусь позже и что-нибудь ещё обязательно продемонстрирую. Попробуйте и вы.

А на сегодня всё - подписывайся на волшебный телеграм-канал - там есть сиськи, непотребства и бесконечные попытки разобраться, как работает этот проклятый #stablediffusion

P.S. Вот вам анекдот напоследок - встречаются два нейрохудожника, один другому говорит:

-Ну и запросы у тебя!

4040
реклама
разместить
6 комментариев

Мам купи игру, мне она нужна для рисования)

4

Как говорится - "это не порнуха, это референсы"

5

Обожаю девушек готок)

3

Оформляй подписон, брат

Лица и руки при таком пайплайне (слово-то какое, лол)

Я хз кто додумался назвать просто последовательность действий "пайплайном", но блин... Со словом пайплайн в первую очередь асоциируется автоматизация, конвеер, комбинация автоматически выполняемых простых команд, вывод одной подаётся на вход другой.
А тут "нейрохудожники" всё ручками делают и называют это "пайплайном". Хтьфу.

3D-шники, художники и прочие геймдевы вообще слегка не от мира сего: воркфлоу называют пайплайном, овертаймы – кранчами..
Единственная группа, от которой я такое услышал. В остальных IT-местах называют одинаково.

Умер умный карликовый шимпанзе Канзи — он умел играть в Minecraft и понимал английский

Знаменитому животному было 44 года.

Умер умный карликовый шимпанзе Канзи — он умел играть в Minecraft и понимал английский
547547
2525
1414
44
22
11
11
11
Даже он понимал английский, а дтферы все еще рвутся, когда нет русской озвучки
реклама
разместить
Авторы Minecraft представили масштабное обновление с улучшенной графикой — трейлер и скриншоты

Кубический мир станет ещё красивее — бесплатно для всех игроков.

118118
1414
1212
88
22
11
Эх, обезьяна не дожила до обновы((
Аудитория Assassin's Creed Shadows превысила два миллиона человек

Игра превзошла Origins и Odyssey по стартовым показателям.

Аудитория Assassin's Creed Shadows превысила два миллиона человек
301301
171171
1515
1111
1111
22
11
11
11
11
А количество проданных копий?
Субботний скриншот. Во что играете на этих выходных?

Как и все играю в Assassin's Creed Shadows

Субботний скриншот. Во что играете на этих выходных?
7979
66
55
44
44
22
11
Разработчик Assassin's Creed Shadows о достоверности игры: «Это не документальный фильм»

Ubisoft не пытается показывать Японию «как в учебнике».

Разработчик Assassin's Creed Shadows о достоверности игры: «Это не документальный фильм»
264264
122122
2222
77
33
22
11
11
11
Зачем тогда они кичились тем, что типа наняли профессианального историка, который оказался фантазером?
Mojang не станет делать Minecraft сервисной F2P-игрой

Студия остаётся верна классической модели.

Mojang не станет делать Minecraft сервисной F2P-игрой
2828
1212
33
11
11
Неожиданное заявление в сегодняшней индустрии. И приятное. Впрочем, игра и так бешенные деньги приносит в текущей модели я уверен.
Аналитик извинился за ошибочные данные о продажах Final Fantasy XVI

Игра определённо разошлась тиражом более 3,5 миллиона копий.

Аналитик извинился за ошибочные данные о продажах Final Fantasy XVI
100
5252
1818
44
22
22
22
11
11
Ждем извинений Юбиков за ошибочные данные о продажах Shadows
Clair Obscur: Expedition 33 ушла «на золото» — за 33 дня до релиза

Финальная версия игры готова, переносов не будет.

319319
3333
1010
99
33
22
11
Символично, 33 в названии, за 33 дня до старта ушла на золото, забавно, возраст Христа... Желаю ей продаться 33 млн копий, и вознестись на пьедестал.
реклама
разместить
Аналитик: сейчас стратегия всех студий — уйти с дороги GTA VI

Компании пытаются либо ускорить выход своих игр, либо отложить их.

Аналитик: сейчас стратегия всех студий — уйти с дороги GTA VI
346346
8686
3131
1616
99
55
22
22
11
11
11
11
11
Пофиг на ГТА максимально
Рейтинг фильма Белоснежка на западе
Рейтинг фильма Белоснежка на западе
7373
1818
1010
22
11
А то, что это ревьюбомбинг мы умолчим.
Утечка: характеристики RTX 5060 Ti — 4608 ядер, 8 или 16 ГБ памяти, TDP 180 Вт

Разрядность шины — 128 бит.

Утечка: характеристики RTX 5060 Ti — 4608 ядер, 8 или 16 ГБ памяти, TDP 180 Вт
172172
3434
99
77
66
11
Разрядность шины — 128 бит. 8гб - мой выбор 2025
[]