Мы делали ремастер
целый год

Nvidia показала автомобильный симулятор, графику для которого на основе видео создал ИИ Статьи редакции

Система сама генерирует объекты.

Nvidia представила видеоигровое демо, графика для которого была создана искусственным интеллектом с использованием системы машинного обучения. Это простой автомобильный симулятор, в котором можно перемещаться по городу, сгенерированному ИИ, однако никаких других вариантов взаимодействия с окружением не предусмотрено.

Для создания демо специалисты Nvidia сперва собрали данные, необходимые для машинного обучения. Они включали в себя видеозаписи поездок по разным городам. Затем каждый кадр футажа был разбит на составляющие: небо, автомобили, деревья, дороги, здания и так далее. Каждому типу объектов присваивался свой цвет.

После этого система училась самостоятельно создавать новые версии всех объектов на основе полученной информации.

Инженеры создали базовую топологию виртуальной среды с помощью движка Unreal Engine 4. Система самостоятельно генерировала объекты и помещала их в игровой мир.

При создании структуры мира были использованы традиционные методы. ИИ сгенерировал лишь графику. Это скорее просто концепт, чем игра, в которой весело проводить время.

Брайан Катанзаро
вице-президент Nvidia по глубокому обучению

По словам Катанзаро, авторы демо столкнулись с рядом проблем. Одна из них заключалась в том, что система в реальном времени генерирует графику 25 раз в секунду. Из-за этого цвета и текстуры объектов меняются каждый кадр. Разработчикам пришлось искать способ для того, чтобы сохранить визуальное постоянство виртуальной среды.

Инженеры «дали» системе краткосрочную память. Таким образом, она могла сравнивать каждый последующий кадр с предыдущим и «предсказывать», что произойдёт с объектами в будущем. Эти вычисления требуют больших мощностей, поэтому демо работает с частотой в 25 кадров в секунду. При этом обработкой занимается всего один графический процессор — Titan V.

Катанзаро отмечет, что сейчас эта технология находится на ранних этапах своего развития. При этом у неё есть потенциал не только в игровой индустрии — создание графики с помощью ИИ можно использовать в робототехнике и для «обучения» беспилотных автомобилей.

В ролике о демо, сотрудники Nvidia также рассказали, что с помощью этой технологии можно переносить движения одного человека на модель другого. Это позволило инженеру компании Минг-Ю Лью «исполнить» танец PSY из клипа Gangam Style. Для обучения ИИ также использовалось видео.

0
57 комментариев
Популярные
По порядку
Написать комментарий...
Lautrec Carim
Ответить
74
Развернуть ветку
arghan3

с помощью этой технологии можно переносить движения одного человека на модель другого
5-ый срок П подтверждён.

Ответить
58
Развернуть ветку
Александр Васильев

Никогда бы не подумал, что увижу политоту в комментариях под этим постом

Ответить
28
Развернуть ветку

Комментарий удален

Развернуть ветку
Rusty Shackleford

Ты забыл про комунизм, любую тему можно свести к комунизму

Ответить
1
Развернуть ветку
Андрей Борисов

А как же правило 34?

Ответить
0
Развернуть ветку
ChitO-Kun

Не оправдания, а использование закона Годвина, когда это выгодно левакам.

Ответить
0
Развернуть ветку
REM1X
Ответить
29
Развернуть ветку
Алексей Жмыхов

Generation П

Ответить
8
Развернуть ветку
Антон Петров

Зашел оставить аналогичный комментарий )

Ответить
0
Развернуть ветку
Richard Mayerson

"- Да вот его и считаем, - сказал Морковин и кивнул на телевизор. - И всех остальных тоже. Трехмерка."

Ответить
0
Развернуть ветку
Cino

Выглядит пугающе. Потому что слишком реалистично и одновременно нет - картинка кажется неестественной, но что в ней неестественно, понимаешь не сразу. Потом замечаешь - по сути это коллаж из нескольких слоев.

Правда видны недостатки - разрешение и частота кадров просто ужасны, при огромных требованиях к железу.

Ответить
15
Развернуть ветку
perfect_genius

Похоже на неуместное упоминание Зловещий Долины.
Что-то его много в последнее время.

Ответить
5
Развернуть ветку
Denis Shiryaev

Сложно представить ПК-требования к такой игре, но графика там может быть фантастической.
Очень интересно смотреть на проникновение ML в Gamedev. На картинке ниже результат работы того же алгоритма.

Ответить
12
Развернуть ветку
ChitO-Kun

Насчёт фантастичности я бы поспорил, оно берёт худшее из обоих миров - серость и грязь реала и глитчи и низкое разрешение из виртуала.

Ответить
1
Развернуть ветку
Denis Shiryaev

Из датасета это можно исключить ;)

Ответить
1
Развернуть ветку
Sanche Panza

я просто оставлю это здесь,,,

Ответить
12
Развернуть ветку
Jorg Fischer

Судя по цвету, с красной таблетки?

Ответить
1
Развернуть ветку
Sanche Panza

Ага)

Ответить
1
Развернуть ветку
Anthony

Так нео же не избранный ))

Ответить
0
Развернуть ветку
Тимур

А можно то же самое, только с процедурно генерируемыми девушками? А то на известных сайтах уже все надоели, хочется новенького.

P.S. Друг просил, если что.

Ответить
8
Развернуть ветку
Denis Shiryaev

Deepfake же

Ответить
5
Развернуть ветку

Комментарий удален

Развернуть ветку
Yarsy Work

Друг - инвалид и загуглить не может?

Ответить
0
Развернуть ветку
perfect_genius
Ответить
2
Развернуть ветку
Alexey Vinogradov

Кодзима — гений

Ответить
8
Развернуть ветку
Andrey Nepomnyaschev

Может кодзима - это ИИ от конами?

Ответить
3
Развернуть ветку
Алмаз Ахметзянов

В таком случае взбесившийся

Ответить
2
Развернуть ветку
DarthFelus

А вот и реклама новых титанов.

Ответить
6
Развернуть ветку
Adam Smith

Уже же титан RTX вышел. Так что этот V не новый

Ответить
0
Развернуть ветку
Любой якорь

Жду симулятор езды по нашим городам
https://youtu.be/WHusBqTOeWQ

Ответить
5
Развернуть ветку
Медный томагавк_два

Комментарий удален по просьбе пользователя

Ответить
3
Развернуть ветку
Любой якорь

Это и процедурно неплохо может решаться

Ответить
0
Развернуть ветку
perfect_genius

Чтобы чужие не брать?

Ответить
0
Развернуть ветку
Igor Hope

Почти: https://megascans.se/

Ответить
0
Развернуть ветку
Vladislav Ross

Можно сделать бесконечную гонку.

Ответить
1
Развернуть ветку
Любой якорь

но ведь Мост Вантед уже есть)

Ответить
5
Развернуть ветку
WojciechSib

Есть ли ссылка на презентацию/источник?
Просто очень хочется узнать будут ли эту нейросеть использовать для генерации 3d моделей по материалам. (А потом прицепить на модель mixamo и будет очень дешёвая и неплохая модель)

Ответить
0
Развернуть ветку
Denis Shiryaev

Генерация 3d-моделей не задача этого алгоритма, эта нейронка только "красить" умеет что-то в улицу, там модели то не нужны, так, low-poly

https://www.youtube.com/watch?v=G6o_7Pz35Sk&feature=youtu.be&t=23

Ответить
7
Развернуть ветку
Cino

Это двухмерный алгоритм - GAN сеть просто накладывает текстуру на модель.

Ответить
1
Развернуть ветку

Комментарий удален

Развернуть ветку
Lambda

Но для графона Е3 2005 Motorstorm всё равно потребуется 4 таких видеокарты. А в целом — круто

Ответить
1
Развернуть ветку
Pasya

Да, было бы кайф оцифровать свою деревеньку и загрузить в игровой движок :)

Ответить
1
Развернуть ветку
Частый хот-дог

Комментарий удален по просьбе пользователя

Ответить
1
Развернуть ветку
Любой якорь

Кстати давно хотел посмотреть на то какой автосимулятор (авиа, танковый?) получится если предварительно скормить нейросети пару терабайт отборного порно...

Ответить
0
Развернуть ветку
Василий Зимин

Думаю, что выйдет что-то такое:

Ответить
0
Развернуть ветку
perfect_genius

Если её дадут людям.

Ответить
0
Развернуть ветку
Rusty Shackleford

Одну видеокарту я кулю - чтобы нарисовать графон
Другую видеокарту я кулю - чтобы сгенерировать игру
Третью видеокарту я куплю - чтобы расшифровать версию денувы на блокчейне.....

Ответить
1
Развернуть ветку
Дмитрий Родин

ИИ мне напоминает VR. Очень много разговоров о таком какое же это прекрасное будущее... и всё. Только разговоров.

Ответить
1
Развернуть ветку
Твой Никита

Там у директора рука дёргается на гифке неестественно

Ответить
0
Развернуть ветку
Любой якорь

Движения худенькой девушки с тоненькими ручками перенесли на модельку довольно большого во всех смыслах мужика (А если ты про то движение рукой вверх то это скорее всего из-за ее волос)
Да и сделано было это ИИ так что простительно. Думаю ИИ и минимум человеческих усилий и это будет выглядеть идеально

Ответить
0
Развернуть ветку
kraz4r

Теперь пробки будут и в играх

Ответить
0
Развернуть ветку
Вячеслав Коршунов

Теперь Нейросеть умеет делать игры для телефонов, глядя на видео... Теперь его ничто не остановит. Скайнет поднимется на микротранзакциях в мобильных приложениях!

Ответить
0
Развернуть ветку
Александр Подгорный

Скайнет всемогущий, будь другом роди Халф Лайф 3 пожалуйста.

https://st2.depositphotos.com/3994509/10489/v/600/depositphotos_104893224-stock-video-child-praying-out-loud.jpg

Ответить
0
Развернуть ветку

Комментарий удален

Развернуть ветку
Vasindak

Чёт подтормаживает видос. Вся моща Nvidia ушла на ИИ, а за обработку видео Radeon отдувались...

Ответить
0
Развернуть ветку
Yarik Red

и именно это видео доказывает, что казахи умнейшие виды человека

Ответить
0
Развернуть ветку
Кани Лэнг

Охуеть, вот это мощно!

Ответить
0
Развернуть ветку
perfect_genius

Ещё напомню про этих ребят - их не существует:

Ответить
0
Развернуть ветку
Читать все 57 комментариев
null