А не проще было использовать очки дополненной реальности?

Разработчик воссоздал свою квартиру в виртуальной реальности, превратив поверхности в тачскрины