3Д-моделирование с помощью ИИ. Для кого это и какой будет итоговый результат

Больше года назад я пробовал генерировать персонажей с помощью ИИ. Результаты были просто ужасные, нейронке не удавалось даже сохранить форму, не говоря уж про мелкие детали. Спустя время захотелось узнать, какие есть успехи в этом направлении. И, естественно, в этом эксперименте я буду пользоваться лишь бесплатными сервисами.

Я нашел в интернете изображение среднестатистического любителя пива и фото обычного военного. И совместил их в генераторе изображений.

Для этого я использовал Nano Banana, некоторые сайты дают возможность сгенерировать несколько бесплатных изображений, например, Higgsfield.

Так как Банана очень хороша, то отличного результата можно добиться за один промт. А еще на одном изображении можно сделать несколько вариантов, не теряя детали (ну почти).

Теперь необходимо перевести этого прекрасного 2д мужика в трехмерное пространство. Сервисов, позволяющих сделать подобное, на деле, не так много, особенно бесплатных. Один из таких -- meshy.ai

Как и ожидалось, сайт оказался условно бесплатным. Из нескольких изображений генерировать нельзя, покупай премак, позы А и Т -- премак (хотя можно заранее сгенерировать изображение сразу в нужной позе).

Придется использовать одно изображение, это будет хорошим испытанием для нейронки.

И результат оказался очень даже неплохим, детали сохранились по максимуму, нейронка сама додумала нужное на задней стороне модели. Текстуры PBR, есть карта высот, металличности (нейронка задала этот параметр для бутылки), шероховатости. И даже UV-развертку завезли.

Можно даже сделать ремеш, то есть лоу-поли модель. Результат приемлемый, но вот с лицом что-то не то.

А еще на сайте доступен небольшой набор анимаций. Сначала накидываем скелет прям на сайте, отмечая нужные точки на теле, а потом выбираем понравившуюся анимацию.

Но счастье продлилось недолго. Как только я захотел скачать проект, вылезло сообщение, что на последней версии генератора Meshy 6 скачивание доступно только для премиума. А скачивать бесплатно можно только на Meshy 4, а это как раз самая ранняя версия (именно ее я пробовал больше года назад), которая по качеству настолько ужасная, что даже исправить этот кошмар не получится.

В общем, сервис выдает хорошее качество на последней версии, хоть текстурирование и ремеш лучше делать ручками. Но скачивание платное, а платно мы не любим. Я подумал, что однозначно есть китайский аналог, в котором будет больше бесплатных функций. И я нашел.

Тут действительно больше доступности: можно использовать сразу несколько фоток, можно указать количество полигонов, сделать ретопологию, ну и, конечно, доступно скачивание файлов с разными форматами.

Геометрия модельки тоже получилась хорошая, но менее качественная, чем в Meshy. Поэтому тут придется зайти в скульптинг в условном блендере и слегка подредактировать. Если вы ни разу серьезно не скульптили (как я, например), то никаких проблем с этим не будет, так как доработки в большинстве случаев будут ограничиваться кистью Smooth.

Как видно, практически все мелкие детали из оригинальной фотографии остались в целостности и сохранности. Кроме пистолета в кобуре. Видимо нейронка посчитала, что данный персонаж может представлять опасность только для своей печени, поэтому поместила в кобуру какие-то два термоса. А еще один палец на правой руке потерялся. Полагаю, что нужна была еще одна фотография с правой стороны, но я думал и без этого ИИ поймет, но увы. Пока что китайский аналог уступает Meshy по дорисовке недостающих деталей, по геометрии и качеству текстур.

Ну и в итоге, если посмотреть на общее качество геометрии, то нейронки стали намного лучше. Если вам необходима моделька человека, животного или какого-то существа, но в скульптинге вы плохи, то ИИ вам в помощь. Но все же для игр создание таких персонажей недостаточно, ведь нейронка пока что не спасет ни от необходимости выполнения качественной ретопологии, ни от проработки лица и создания нормальных текстур (пока что это мутное месево). Но прогресс в этом направлении есть и на текущей момент он особенно порадует любителей 3D-печати.