Snap закладывает важные основы для будущего AR

На собственной конференции разработчиков SPS 2020 Snap объявила о ряде новинок для Snapchat. Вот три наиболее важные новые функции AR.

 

Дополненная реальность является важной опорой компании, и Snap подкрепляет это статистикой пользователей.

 

В то же время ожидается, что более 170 миллионов пользователей Snapchat будут использовать функции AR ежедневно (период опроса: с 1 января по 25 мая 2020 года), примерно 30 раз в день. Кроме того, количество AR-фильтров, созданных независимыми разработчиками, выросло до миллиона. Два года назад это были еще 100.000 AR-линз.

 

Компания продемонстрировала большое количество новых программных функций, которые должны быть незаменимыми для будущих очков AR.

 

SnapML

 

Первый большой анонс в дополненной реальности — это Lens Studio, редактор десктопных фильтров Snaps. Программа теперь предлагает возможность использования моделей машинного обучения для фильтров AR. Это дает разработчикам мощный инструмент, помогающий им создавать особенно популярные и продвинутые фильтры AR, такие как Snaps Baby , Time Machine  и фильтры Genderswap .

 

В сотрудничестве с Wannaby, Prisma, CV2020 и рядом независимых разработчиков Snap создала примеры AR-фильтров на основе SnapML, которые можно увидеть в следующем видео. Если вы хотите поэкспериментировать с Lens Studio самостоятельно, вы можете бесплатно скачать программу с официального сайта .

 

 

Landmarkers

 

Функция AR «Landmarkers» расширяет возможности Snapchat, такие как Эйфелева башня и Бранденбургские ворота, с необычайными эффектами AR. С функцией AR Local Lenses Snap делает еще один шаг вперед и позволяет разработчикам и пользователям играть в AR-игры в обычных условиях.

 

Расширения AR основаны на трехмерных реконструкциях реальных мест, которые Snap создает с помощью 360-градусных снимков и снимков пользователей Snapchat. Благодаря автоматизированному 3D-картографированию камера Snapchat может точно позиционироваться в комнате, знает пропорции и пространственное положение зданий и, следовательно, может добавлять эффекты AR.

 

С Local Lenses Snap делает первый шаг к облаку AR и следует за такими компаниями, как GoogleFacebookAppleMagic Leap и Niantic.

 

 

Распознавание речи и объектов

 

С помощью функции распознавания голоса на основе ИИ Voice Scan пользователи могут активировать AR-эффекты с помощью голосовых команд. Например, если вы хотите покрасить волосы в цифровом виде, все, что вам нужно сделать в будущем, это попросить об этом Snapchat.

 

Голосовое сканирование — это очень удобная функция при запуске. Это может измениться в будущем: с помощью Voice Scan компания впервые исследует управляемый голосом интерфейс, который теоретически можно расшириться до помощника по искусственному интеллекту. Это, в свою очередь, может стать важной частью бренда AR очков Snap.

 

Расширение распознавания объектов также идет в этом направлении: благодаря новым партнерским связям Snapchat теперь может идентифицировать 90 процентов всех известных растений и деревьев и распознавать почти 400 различных пород собак. Позже в этом году также должно быть возможно проанализировать продукты питания путем сканирования этикетки. Функции напоминают мощное приложение Google Lens для распознавания объектов.

 

Вы можете посмотреть полную конференцию Snap в видео ниже.

 

 

Источник