Frame — новые смарт-очки с мультимодальным ИИ-помощником

Недавно компания Brilliant Labs представила первые в мире умные очки со встроенным мультимодальным помощником искусственного интеллекта. В комплект поставки «Frame» входит постоянно работающий ИИ-помощник по имени Ноа.

 

Мультимодальная генеративная система искусственного интеллекта, которая может одновременно запускать модели GPT4, Stability AI и Whisper AI, призвана развиваться путем анализа взаимодействий между пользователем и помощником искусственного интеллекта и, таким образом, развивать уникальную личность.

 

С помощью Frame компания Brilliant Labs хочет перенести использование генеративного искусственного интеллекта с ноутбука в реальный мир. Вместо того, чтобы вводить вопросы, система использует данные из окружающей среды. Ноа обрабатывает то, что записывает камера, распознает речь и звуки, переводит в режиме реального времени или суммирует целые страницы книги.

 

 

Также возможно сравнение цен в магазинах путем сканирования одежды или других предметов. Однако умные очки не поддерживают сложные функции смешанной реальности, такие как Apple Vision Pro и Quest 3. Установленные в рамке микроOLED-дисплеи отображают изображения и текст в поле зрения 20 градусов.

 

Круглый дизайн умных очков (которые, кстати, весят 39 граммов) напоминает любимые очки таких выдающихся владельцев, как Джон Леннон, Стив Джобс и Махатма Ганди. Frame оснащен дисплеем высокого разрешения с яркостью 3000 нит, пространственной камерой, микрофоном и IMU с 6 степенями свободы. Очки можно будет предварительно заказать в разных цветах с марта 2024 года, их стоимость составит около 350 долларов. Также возможно использование рецептурных линз.

 

Frame следует подходу Monocle с открытым исходным кодом

 

Frame — это эволюция Monocle, монокля дополненной реальности, который Brilliant Labs выпустила почти год назад. 15-граммовое устройство крепится к обычным очкам с помощью клипсы, имеет MicroOLED-дисплей, камеру на 5 Мп, сенсорное управление, аккумулятор, Bluetooth и микрофон.

 

Как и в случае с Monocle, Brilliant Labs хочет продолжать использовать свой подход с открытым исходным кодом. Разработчикам разрешено самостоятельно модифицировать аппаратное и программное обеспечение, а также им предоставляется доступ ко всей необходимой документации, кодам и планам оборудования.

 

Источник