Khronos внедряет технологию гауссова сплэттинга в 3D-формат glTF.

Khronos — это некоммерческий отраслевой консорциум, управляющий OpenGL, Vulkan и WebGL. В контексте XR он стал пионером OpenXR, открытого отраслевого стандарта API для разработки и выполнения XR-приложений. OpenXR предоставляет разработчикам доступ к единому стандартизированному API, позволяя им создать приложение один раз, а затем легко перенести его на другие платформы, обеспечивая кроссплатформенную доступность. OpenXR поддерживается большинством крупных участников XR-индустрии, включая Meta, Valve, HTC, ByteDance, Epic Games, Unity, Nvidia и Qualcomm. Заметным исключением является Apple, которая поддерживает собственные проприетарные API.

В 2015 году Khronos представила glTF ( Graphics Language Transmission Format ) , стандарт для эффективной передачи и загрузки 3D - сцен и моделей игровыми движками и приложениями. Часто называемый «JPEG для 3D», он предоставляет упрощенный, универсальный формат , позволяющий создателям экспортировать высококачественные 3D-ресурсы из любого инструмента, обеспечивая при этом мгновенный и единообразный просмотр пользователями на любом устройстве или в любом веб-браузере.

Сегодня glTF является наиболее распространенным форматом 3D-ресурсов в интернете.

На этой неделе Khronos анонсировала релиз-кандидат на расширение glTF, использующее технологию гауссова разбрызгивания . Гауссово разбрызгивание продемонстрировало огромный потенциал для XR, поскольку позволяет быстро и легко создавать фотореалистичные 3D-снимки объектов и окружения с помощью обычных устройств, таких как смартфоны, которые затем можно просматривать и исследовать в виртуальной реальности. Эта технология уже используется для создания фотореалистичных снимков в Meta Hyperscape , недавно улучшенной игре Personas от Apple , объемных сцен в Gracia и интерактивных 3D-окружений в Marble .

Хотя захват гауссовых сплэтов стал проще, их обмен по-прежнему остается основной проблемой, которую Khronos теперь решает напрямую. Новое расширение glTF позволяет хранить 3D-гауссовы сплэты непосредственно в файлах glTF. Таким образом, Khronos стандартизирует доставку гауссовых сплэтов в уже сложившейся и широко распространенной 3D-экосистеме, открывая путь для внедрения этой технологии в массовое использование.

«Instagram упростил обмен фотографиями; TikTok вызвал взрывной рост популярности коротких видеороликов в социальных сетях. До сих пор 3D-технологии отставали от 2D-форматов, потому что создавать и распространять 3D-модели гораздо сложнее, чем фотографии или видео. С помощью гауссова разбрызгивания легко представить приложение, позволяющее пользователю мобильного телефона быстро захватывать сцену или объект, перемещая телефон, чтобы создать 3D-модель на основе разбрызгивания. Будучи открытым стандартом, glTF позволяет делиться такой моделью. Разбрызгивание, хранящееся в файле glTF, можно публиковать в социальных сетях и отображать с полной интерактивностью на любом клиентском устройстве», — объясняет Нил Треветт, президент Khronos, в письменном заявлении.

Решение Khronos официально перейти на технологию гауссова разбрызгивания ясно дает понять, что реалистичное 3D-изображение никуда не денется, считает Миша Рублёв, главный редактор Radiance Fields , новостного блога, специализирующегося на гауссовом "разбрызгивании" и подобных технологиях.

«Учитывая приближающийся масштаб воздействия, крайне важно тщательно заложить фундамент. Расширение glTF, основанное на наиболее распространенном формате 3D-ресурсов, помогает снизить риски фрагментации по мере перехода отраслей от 2D к 3D, а также дает разработчикам уверенность в том, что создаваемые ими сегодня продукты могут использоваться в различных экосистемах, а не оставаться привязанными к одной платформе», — говорит Мишаил.

Гауссовы сплэты представляют собой принципиальное отличие от традиционной графики на основе сетки. В то время как стандартное 3D-моделирование опирается на соединенные треугольники для определения поверхности объекта, гауссовы сплэты рассматривают сцену как плотное облако объемных точек данных, каждая из которых определяется такими свойствами, как положение, масштаб, вращение, цвет и прозрачность. Преимущества перед традиционным рендерингом 3D-графики включают возможность захвата сложных геометрических форм, таких как волосы или дым, и высокореалистичные эффекты освещения, такие как отражения и преломления, которые, как известно, трудно достичь с помощью полигональных сеток.

Новое расширение glTF действует как инструкция по эксплуатации, указывая программному обеспечению отображать эти точки в виде плавных, перекрывающихся фигур, создавая реалистичное 3D-изображение, а не плоские, зазубренные поверхности, обычно встречающиеся в видеоиграх.

Тем не менее, работа еще не закончена. В настоящее время расширение находится на стадии релиз-кандидата, и рабочая группа Khronos 3D Formats приглашает разработчиков движка, создателей контента и художников для тестирования спецификации перед официальным утверждением, запланированным на второй квартал 2026 года. На данный момент в разработку расширения внесли свой вклад такие компании, как Autodesk, Bentley Systems, Huawei, Niantic Spatial и Nvidia.

Предварительная версия была разработана с учетом быстрой и непрерывной эволюции алгоритма гауссовской развертки. Например, в ней пока не определен стандартный подход к сжатию, что крайне важно для обеспечения высокой производительности гауссовской развертки на мобильных устройствах. Для сохранения гибкости спецификация намеренно разработана как расширяемая, оставляя место для будущих дополнений по мере развития методов гауссовской развертки и их стандартизации в экосистеме glTF.