Разработчик из Гонконга создал бесплатное приложение, которое превращает обычную веб-камеру в систему 3D-мокапа
Оно называется SysMocap. Вот что оно делает.
Вы открываете ноутбук. Направляете на себя веб-камеру. Программа отслеживает ваше лицо и тело. Затем в реальном времени переносит все ваши движения на 3D-персонажа на экране.
Вы улыбаетесь. Персонаж улыбается.
Вы машете рукой. Персонаж машет.
Вы поворачиваете голову. Персонаж поворачивает голову.
Вы можете выбрать любого 3D-персонажа, какого захотите. Милых анимешных из VRoid Studio. Полностью риггованных из Mixamo. Просто перетащите файл, и персонаж начнёт двигаться вместе с вами.
Ближайшая платная альтернатива — Rokoko Smartsuit Pro II. Сам костюм стоит около 2495 долларов, а программное обеспечение обходится ещё примерно в 20–50 долларов в месяц. SysMocap выполняет похожую задачу, используя веб-камеру, которая у вас уже есть.
Программа работает на Windows, macOS (как на Intel, так и на Apple Silicon) и Linux. Не требует аккаунта, регистрации или облачных сервисов. Всё выполняется локально на вашем компьютере.
Проект создал Wang Xianfei, связанный с Hong Kong University of Science and Technology. Один человек. Три года разработки. 26 выпущенных версий. Почти 3000 звёзд на GitHub.
Лицензия — MPL-2.0. Бесплатно для личного использования. Бесплатно для коммерческих стримов. Бесплатно для работы с клиентами. Навсегда.
Именно так, по мнению автора текста, технологии захвата движений должны были выглядеть с самого начала.