Любой, кто использовал клавиатуру в виртуальной реальности, знает, как это громоздко и медленно. Исследователи Facebook разработали умный способ ввода текста, называемый «pinchtype», который использует преимущества отслеживания рук, но требует некоторого привыкания.
Пользователи сводят большой палец вместе с другим пальцем той же руки, чтобы выбрать из группы букв, которые соответствуют раскладке клавиатуры QWERTY.
Пример: если вы сводите указательный палец большим пальцем, вы выбираете группу букв, которую вы нажимаете в системе из 10 пальцев указательным пальцем.
Это должно облегчить начало работы с новым вводом текста. Кончики пальцев и группы букв также имеют цветовую кодировку. Это помогает пользователям, которые не усвоили систему из десяти пальцев.
Если вы выбрали несколько групп букв подряд, модель языка ИИ определяет серию слов, которые могут соответствовать этой комбинации букв, и сортирует их в списке в соответствии с их вероятностью. Кроме того, пользователи могут выбрать правильное слово из этого списка самостоятельно.
Это достигается с помощью комбинации жестов левой и правой руки и движений правой руки вверх и вниз. Комбинация жестов пинч также используется для нажатия пробела. Оба больших пальца собраны вместе с указательными.
Facebook проверил пригодность ввода текста XR в предварительном исследовании с 14 участниками. Критериями были скорость и точность при первом использовании.
Участники исследования должны были набрать 40 предложений. Результат: участники достигли средней скорости 12 слов в минуту. Если бы им не пришлось исправлять ошибки, они бы достигли скорости в 20 слов в минуту. Они также сообщили, что пинчтайп удобнее в использовании, чем плавающая клавиатура.
Вероятно, это было проверено с помощью Oculus Quest. Автономные VR очки поддерживает отслеживание пальцев. Ввод текста с помощью Oculus Quest в настоящее время все еще довольно громоздок: вам нужно выбрать букву курсором и соединить большой и указательный пальцы для подтверждения.
Pinchtype должен был быть представлен в этом месяце на конференции CHI 2020 в Гонолулу, а также в новой версии тактильного браслета Tasbi. Событие было отменено из-за эпидемии коронавируса.
