Подробное описание документа

Варакушин С. А.
   Особенности использования AR/VR устройств в строительстве, проблемы и их решение / Варакушин С. А. // Технологии дополненной и виртуальной реальности : сборник статей 1-ой научно-практической конференции, Москва, 21-22 апреля 2025 года / МГТУ им. Н. Э. Баумана (национальный исследовательский университет). - М., 2025. - С. 78-82.

Представлен прототип виртуального интерактивного цифрового двойника музея МГТУ им. Н.Э. Баумана, управляемого проекцией кисти руки пользователя с применением машинного зрения. Рассмотрены этапы создания виртуальной среды на базе WebVR-фреймворка A-Frame, включающей в себя панорамы, интерактивные информационные панели и 3D-модели экспонатов. Показано использование библиотек OpenCV и MediaPipe для обработки видеопотока с веб-камеры и отслеживания положения кисти руки пользователя. Описан механизм взаимодействия с VR-сценой, основанный на протоколе WebSocket для передачи данных между компонентами системы. Разработанный прототип демонстрирует возможность создания интуитивно понятного и доступного интерфейса для просмотра музейных экспозиций, расширяющего возможности виртуальных музеев.
Ключевые слова: машинное зрение, виртуальная реальность, интерактивный музей, webvr-технологии, средства управления в vr, цифровой двойник, computer vision, virtual reality, interactive museum, webvr technologies, vr control methods, digital twin