Как я делаю визуальную новеллу вместе с Midjourney

(а midjourney опустошает мой мир, высасывая из него персонажей)

<i>(dark fantasy dense pine forest pencil drawing чёт такое)</i>
(dark fantasy dense pine forest pencil drawing чёт такое)

Опишу личный опыт, будет немного восторгов, немного сожалений и размышлений о перспективах.

Чуть-чуть вводного:

Midjourney - нейросеть, которая клепает классный (а иногда не классный) арт по текстовому запросу.

Я работаю с ней пару недель, за это время популярность её хэштега в инсте выросла с 500к до 780к. Скорость меня поражает.

<i>(dark fantasy horror swamp pencil drawing чёт такое)</i>
(dark fantasy horror swamp pencil drawing чёт такое)

Над чем работаю:

Новелла в мрачной славянско-фэнтезийной эстетике. В моём мире полно лесов, все едят грибы, а ночь страшна и опасна. Чтобы отделить славянский антураж от лубочного неоязычества, я специально избавляюсь от понятий вроде: "баба яга", "кащей бессмертный", "лапти", "перун", "велесова книга" и проч.

Midjourney, кстати, в этом вопросе очень помогает. По запросу slavic она не рисует добрыню никитича, за что ей спасибо. У нас хорошо получаются простые запросы, вроде "нарисуй лес, нарисуй болото, нарисуй монстра".

Для визуала я выбрал карандашно-графитовый стиль, так как он подходит и по настроению, и не выглядит таким потасканным, как стандартные пейнты нейросети.

<i>(slavic birch forest pencil black and white yellow grass чёт такое)</i>
(slavic birch forest pencil black and white yellow grass чёт такое)
<i>(swamp landscape pencil yellow details чёт такое)</i>
(swamp landscape pencil yellow details чёт такое)
<i>(pencil drawing large slavic city чёт такое)</i>
(pencil drawing large slavic city чёт такое)

Простые фоны и простые задачи решают примерно 50% проблем.

Например, в игре есть эпизод с выбором щита для поединка, так у нас довольно легко получается что-нибудь вот такое.

<i>(nordic shield pencil drawing чёт такое)</i>
(nordic shield pencil drawing чёт такое)

Оружие, правда, пока что не получается совсем.

Трудности.

С конкретными запросами всё куда сложнее. На генерацию деревенского бэкграунда я потратил 100+ попыток - получались то соломенные хижины пигмеев, то палатки, то какая-то подмосковная деревня с лэп и жигулями, а то слишком швейцарская и слишком богатая.

Разместить на таком бэкграунде людей - это уже за гранью. Вот, например, выстраданный фон, на который я добавлял бесформенные силуэты с какой-то другой картинки.

<i>(slavic village какие-то ещё слова и сотня попыток застрелиться)</i>
(slavic village какие-то ещё слова и сотня попыток застрелиться)

Особенно же плохо со сценами, где просто необходимо показать людей. Midjourney не способна делать адекватные портреты в полный рост и c лицами.

Вот так, например, сейчас выглядит одна моя сцена с поединком.

<i>(лучше ноги, чем ничего)</i>
(лучше ноги, чем ничего)

А в визуальной новелле, как известно, без персонажей никуда. Нужны спрайты. Так что я иду на первый большой компромисс - ограничиваюсь пока боковыми портретами. В Disco Elysium ты особо не всматривался в модельки персонажей, вот и мне этого не нужно, хорошо, договорились.

Небольшая портретная галерея.

<i>(надеюсь, вы не найдёте здесь своих кого-то из своих знакомых)</i>
(надеюсь, вы не найдёте здесь своих кого-то из своих знакомых)

Правда, AI то и дело норовит сделать мне персонажа в шапке или какой-то шляпе. Бывает даже, что получается кепка и вовсе что-то наполеоновское.

Вот ещё пример шапки.

<i>(что поделать)</i>
(что поделать)

Мои победы.

Есть вещи, которые получаются даже лучше, чем ты себе представлял. Прямо как в работе с настоящим художником. Это вдохновляет.

Горжусь вот этим фоном главного меню, который получился удачнее, чем я сам хотел.

<i>(beast hiding in dark forest horror чёт такое)</i>
(beast hiding in dark forest horror чёт такое)

Или вот этим ночным видом деревни, навевающим The Witcher 3. Тут почти 90% попадание.

<i>(что-то в очередной раз про village)</i>
(что-то в очередной раз про village)

Или, например, грибы.

Я вообще считаю, что за грибами будущее фэнтези миров. Поэтому с охоткой нагенерил хороших примеров.

Как я делаю визуальную новеллу вместе с Midjourney

Что дальше?

В целом за счёт работы AI получается временно закрыть проблему фонов и визуала. Не нужны больше постные картинки из бесплатных библиотек - ты в одиночку выдаёшь что-то, что можно показать фокус-группе.

Не хочется пускаться в какие-то прогнозы, но просто интересно, насколько велика может быть волна подобного домашнего инди, не говоря уже про homebrew настолки с артбуками.

За пару недель я сверстал в ren'py первую главу и первый билд новеллы, который уехал на сбор фидбека. Начинаю накидывать вторую.

Всем вдохновения ✌

9696
40 комментариев

Это лежало на поверхности, равно или поздно кто то должен был взят эту идею на вооружение, я про нн как художника. Осталось озвучить нн от nvidia и написать сюжет idangeon и будет игра созданная через полную генерацию контента) 👍

16
Ответить

Да, это первое что в голову приходит :) любому кто не умеет рисовать.

Но я вот поиграв с Midjourney понял, что нарисовать просто чтобы красиво - она отлично умеет, а вот: нарисовать как нужно, если это смысловой рисунок (а не просто красивая обоина) это прям печаль.

6
Ответить

Правда) Скоро титры к инди-проектам будут состоять из 1 человека и целого списка нейросетей)

5
Ответить

комиксы вроде уде делают.

Ответить

Average midjourney enjoyer

10
Ответить

Прикольно было бы если можно было запоминать например лицо и делать егоже с другой одеждой, позой, окружением и тд.

4
Ответить

Это был бы функционал мечты для визуальных новелл

4
Ответить