NVIDIA разработала «Полароид будущего» — ИИ, который мгновенно превращает 2D-снимки в 3D-объекты

Технологию будут в том числе использовать для создания игр.

3D-объект, полученный в результате объединения снимков

Нейронная сеть Instant NeRF, которую в сети окрестили «Полароидом будущего», получает в качестве входных данных серию из нескольких десятков фото и информацию об углах обзора камер, с которых их сделали.
Затем алгоритмы искусственного интеллекта в течение «десятков миллисекунд» воссоздают снимки под недостающими углами. В NVIDIA подчеркнули, что в настоящее время нейронная сеть лучше всего работает с одним объектом в кадре. Если объектов несколько, то желательно, чтобы они не двигались быстро, так как результат может оказаться размытым.
В итоге Instant NeRF создаёт полноценный 3D-объект, который можно использовать в любых областях. В компании считают, что технология, среди прочего, найдёт применение в создании 3D-аватаров для видеоконференций, роботостроении, системах автономного вождения и разработке игр.
Instant NeRF может стать столь же важной технологией для 3D, как ранее цифровые камеры и метод сжатия JPEG стали для 2D-фотографии, считает вице-президент по исследованиям графики NVIDIA Дэвид Любке.