С новой операционной системой visionOS 27 Apple даёт Vision Pro гораздо больше возможностей. Теперь сторонние разработчики смогут делать свои контроллеры и другие аксессуары, которые будут работать с этой гарнитурой. Предварительная версия системы уже доступна для разработчиков.
Это значит, что Vision Pro сможет работать не только с пассивными объектами, но и с активными устройствами, которые взаимодействуют с гарнитурой в реальном времени.
Раньше система могла следить только за пассивными предметами по их форме. А visionOS 27 теперь работает с активными аксессуарами, у которых есть свои системы отслеживания. Эта технология использует две вещи: специальные узоры из инфракрасных лампочек и данные о движении от датчика (IMU), которые передаются через Bluetooth. Управлять можно будет кнопками, джойстиками и другими подобными штуками.
Такой способ — когда вместе используются ИК-лампочки и датчики движения — это фактически стандарт для всех контроллеров виртуальной и смешанной реальности. Благодаря этому всё работает намного точнее и быстрее, чем если бы система просто смотрела на форму предметов. Инфракрасные лампочки хорошо работают при разном свете. А датчики движения (IMU) обновляют информацию сотни раз в секунду, делая позиционирование намного точнее, потому что данные всегда свежие.
Apple говорит, что система отслеживания работает так же быстро, как и сама гарнитура — обычно 90 раз в секунду, но может быть и до 120 раз в секунду. Благодаря этому между тем, как вы двинете контроллером, и тем, как это отобразится в виртуальном мире, будет минимальная задержка.
Стоит сразу сказать, что просто так подключить любой старый контроллер к Vision Pro не получится. Но производители контроллеров и других аксессуаров смогут добавить официальную поддержку Vision Pro в свои нынешние и будущие устройства, используя специальные инструменты от Apple.
Apple придумала, как регистрировать аксессуары прямо в системе. Описание такого аксессуара можно будет добавить в специальное приложение для visionOS. Оно «зарегистрирует ваш аксессуар в системе, чтобы любое приложение в Apple Vision Pro могло его использовать». То есть, один раз настроив контроллер, вы сможете использовать его во всех нужных программах без повторной настройки.
Однако такие сторонние аксессуары не будут полностью встроены в интерфейс Vision Pro. В этом они проигрывают официальным аксессуарам, вроде контроллеров PS VR2 и стилуса Logitech, которые Apple одобрила для Vision Pro ещё в прошлом году.
Чтобы разработчикам было проще делать совместимые аксессуары, Apple стала работать с компаниями DFRobot и MIKROE. Эти фирмы сделают готовые трекеры, которые станут «эталонными устройствами и комплектами для разработки» при создании других аксессуаров. Ожидается, что такие трекеры появятся «позже в этом году», но сколько они будут стоить, пока неизвестно.
Кроме поддержки активных аксессуаров, visionOS 27 улучшает и работу с пассивными предметами. Apple говорит, что благодаря новому режиму отслеживания с высокой частотой кадров и улучшенному обучению нейросетей, задержка стала меньше, а предметы распознаются надёжнее. Это особенно важно для смешанной реальности, где виртуальные вещи должны точно взаимодействовать с тем, что окружает пользователя в реальном мире.
То, что Vision Pro теперь работает со сторонними контроллерами, — это важный шаг для Apple в развитии её системы пространственных вычислений. Такое решение может привести к появлению множества разных аксессуаров для работы, учёбы, творчества и игр.
