Какие нейросети уже сейчас можно использовать для создания видеоигр?

Многих людей мучают два вопроса:
«Когда там нейросети захватят наши рабочие места?» и «Как с помощью нейросетей можно упростить себе жизнь?».
О первом умолчим, а вот о втором поговорим поподробней, дорогие индюки.

Как не сложно догадаться, нейросети довольно гибки в генерации чего либо. В данной статье мы рассмотрим несколько нейросетей, которые буквально после перехода по ссылке можно брать и использовать для разработки какого либо проекта.

Нейросети распределены по их «применимости», т.е. по тому, как легко их использовать и, при этом, по тому, как много она может вам дать.

Список нейросетей:

Портреты персонажей и их анимация, Пейзажи, Дизайн персонажей, Предметы

Artbreeder — Нейросеть, возможно, имеющая наибольшую гибкость в плане выдаваемого контента. Наиболее хорошо натренирована на создание портретов, однако, так же её можно использовать для создания пейзажей и дизайнов персонажей.

Подробная статья от Александра Мамонтова

С помощью напильника это несложно превратить во что то неплохое (тут это был Ostagramm + Sai2):

Так же есть возможность создать видео, где один портрет медленно перетекает в другой. Самое очевидное использование этой возможности это создание подобия липсинка.

Музыка

Учитывая, что музыка пишется по довольно конкретным законам, существуют нейросети, которые занимаются генерацией музыки.

Amper Score — Наиболее качественный и удобный в использовании генератор музыки. За основу в ней берётся некий сэмпл, на основе которого генерируется трек. После этого, вы можете настраивать ваш трек путём изменения инструментов, bpm и ремикширования музыки.

Примеры работы:

Данный трек напоминает саунд из игры Hades, и вполне мог бы использоваться как одна из музыкальных тем уровней.

Этот же трек, в свою очередь, напоминает музыку из Sims, используемую в режиме выбора города или строительства.

Благодаря тому, что разработчики Life is Strange — те ещё любители инди, этот трек вполне уместно мог бы смотреться в альбоме саундтрека игры.

Аниме портреты персонажей

WaifuLabs — Нейросеть позволяющая генерировать аниме персонажей. Устроена довольно просто. Есть 4 слоя, которые вы проходите по очереди, и каждый слой генерирует новое изображение, на основе выбранного вами изображения на прошлом шаге.
Сначала вы выбираете основу для персонажа, потом меняете ему цвета, и дважды выбираете один из заново сгенерированных вариантов персонажа. Кроме того, каждый из шагов можно пропустить, тем самым сохранив персонажа.

Если вы — аниме, то и ваши персонажи должны быть аниме.

Видео Дениса Ширяева с примером использования сервиса

Ну, это тоже можно назвать «использованием в разработке», верно?

Фильтры для изображений, перерисовка изображений в другом стиле

Ostagram — Одна из многих нейросетей, применяющих стили одних изображений к другим, появившихся после появления Prisma.

Так, всем нам известный логотип можно превратить в это:

Фурри… аниме… портреты персонажей

This Fursona Does Not Exist — нейросеть, которая позволяет создавать персонажей разной степени «фуррёвости». Сайт представлен в виде постоянно двигающегося полотна картинок, в котором можно выбрать и открыть любой из проплывающих мимо портретов. Как я понимаю, все изображения были сгенерированы заранее, поэтому на процесс генерации мы никак повлиять не можем. Проблема в том, что нет никаких настроек, которые хотя бы фильтровали бы эти изображения.
Вообще, если вам нужен персонаж-зверёк, или же… вы пошли по кривой дорожке, это крайне полезный вам сервис.

Анимация лиц персонажей

First Order Motion Model for Image Animation — Нейросеть, которая позволяет анимировать любые лица персонажей, т.е. вам никто не запретит использовать тут лица из других нейросетей.
Одной из проблем является не столько нейросеть, сколько тот факт, что она находится на не совсем удобном для использования коллабе (штука, которая позволяет вам не мучиться с пайтоном, например, при работе с той же нейросетью, так что это меньшее из зол). А ещё вам нужно квадратное видео… в эру телефонов. Благо, это дело стоит того.

Денис Ширяев и его краткое руководство пользования

Вот тут я, например, использовал сгенерированное в Artbreeder изображение.

Музыка

MuseNet — Гораздо менее удобный генератор музыки, однако, всё ещё имеющий довольно широкие возможности.
Главной проблемой является то, КАК генерируется трек. А генерируется он маленькими кусочками, и, при этом, за время, когда сгенерируется один этот маленький кусочек, вы можете уже закончить делать трек в том Amber Score.

Музыка

Neural Composer — полумера, позволяющая вам создавать пресет, который вы потом без особых проблем могли бы редактировать в FL Studio. Как плагин для оного, как по мне, он смотрелся бы лучше.

Подробный материал по теме от Александр Чтописатьвфамилии

Чтож, на этом всё, спасибо за внимание.