Прокси могут стать ключом к взаимодействию с физическими объектами в смешанной реальности
Исследователи из Google и Университета Миннесоты представили концепцию «прокси» — масштабных цифровых копий реальных объектов, которые могут революционизировать взаимодействие в смешанной реальности.
Через систему Reality Proxy гарнитура создаёт миниатюрные 3D-реплики удалённых зон — например, книжной полки или всего помещения — в масштабе «макета». Пользователь может взять с полки виртуальную копию книги, не вставая с дивана, или выделить группу дронов, как юниты в стратегии, просто обведя их кубом.
Физические объекты при этом остаются видимыми в фоне — с подсветкой, показывающей, что выбрано.
Концепция основана на AI, данных картографии и камерах гарнитуры. Она позволяет работать с объектами, которые далеко, перекрыты или слишком близки друг к другу.
Система поддерживает множественный выбор, семантическую группировку и «пространственный зум» с помощью привычных жестов.
Как отмечает исследователь Др. Мар Гонсалес-Франко: «Если ИИ будет помогать в повседневных задачах, скорее всего, это произойдёт через XR. Но для реальных последствий нужны точные интерфейсы».
