Ключевые выводы
- Исследователи предложили новый способ набора текста в виртуальной реальности, который использует искусственный интеллект для анализа вибрации ваших костей.
- TapID может позволить людям печатать с помощью виртуальной гарнитуры на любой поверхности.
- Oculus разрабатывает технологию, позволяющую использовать камеры своей гарнитуры для чтения движений ваших пальцев, когда вы печатаете на виртуальной клавиатуре.
Печать в гарнитуре виртуальной реальности может стать проще благодаря новому изобретению, которое анализирует вибрации в ваших костях.
Использовать клавиатуру в виртуальной реальности сложно, потому что вы действительно не видите, куда приземляются ваши пальцы. Новый гаджет TapID представляет собой браслет с двумя датчиками движения, по одному на каждом запястье, согласно исследователям, которые недавно опубликовали статью об их изобретении. Устройство распознает касания каждого пальца пользователя по отдельности.
«Сейчас большинство пользователей виртуальной реальности используют портативные контроллеры, которые действуют как лазерная указка», - сказал в интервью по электронной почте Скотт Кэмбол, энтузиаст телекоммуникаций и телеконференций. «Им нужно указывать на каждую букву на виртуальной клавиатуре, а ввод текста может занять очень много времени. Это работает для видеоигр, но не для рабочих задач. TapID позволит пользователям иметь виртуальное рабочее пространство с большими экранами, избавляя их от громоздкого настольного компьютера».
Пусть говорят ваши пальцы
TapID анализирует вибрации вашей костной системы с помощью алгоритма машинного обучения. В VR-средах пользователи могут печатать на виртуальной клавиатуре или взаимодействовать с виртуальными объектами на поверхности с помощью пальцев.
«TapID позволит пользователям иметь виртуальное рабочее пространство с большими экранами без громоздкого настольного компьютера».
«Мы предлагаем перенести все прямое взаимодействие в VR на пассивные поверхности», - написали авторы в своей статье. «По сравнению с взаимодействием в воздухе, сенсорное взаимодействие на поверхностях дает пользователям возможность отдыхать руками между взаимодействиями, одновременно предлагая физическую поддержку во время длительных взаимодействий».
Другие способы набора текста в VR
Компании виртуальной реальности надеются сделать пользователей более продуктивными, предлагая альтернативы текущим системам указателей. Facebook Reality Labs разрабатывает технологию использования камер на гарнитуре Oculus для чтения движений ваших пальцев, когда вы печатаете на виртуальной клавиатуре, отметил Кэмбалл.
«Преимущество этого заключается в том, что браслет не нужен, но отслеживание рук Facebook Labs в настоящее время не работает достаточно хорошо для массового внедрения», - добавил он.«В настоящее время эргономика набора текста в виртуальной реальности является серьезной проблемой, поскольку обычные методы ввода с виртуальной клавиатурой утомительны из-за необходимости держать контроллер или руки в поле зрения камеры».
Производители также работают над гаджетом в форме кольца, который пользователи виртуальной реальности могут надеть на палец, сказал в интервью по электронной почте Иван Плешков, разработчик компании ScienceSoft, занимающейся разработкой программного обеспечения. «Он еще удобнее в ношении и более интуитивно понятен в использовании - пользователь может рисовать символы в воздухе и не зависеть от местоположения камеры», - добавил он.
Еще один метод ввода, находящийся в стадии разработки, - это виртуальная клавиатура, использующая отслеживание взгляда. «Благодаря датчику, который улавливает и обрабатывает положение глаз, пользователь может набирать символы, удерживая на них взгляд, чтобы ввести их», - сказал Плешков. «Это обещает быть менее утомительным, хотя скорость набора текста находится под вопросом - метод требует некоторых приспособлений для ее увеличения.”
Использование настоящей клавиатуры в виртуальной реальности - один из вариантов, хотя на данный момент это неудобно. Приложение Immersed для Oculus Quest - это общее виртуальное рабочее пространство, которое предлагает способ калибровки физической клавиатуры, чтобы вы могли печатать в виртуальной реальности. В демонстрации, размещенной на Reddit, основатель Immersed Ренджи Биджой продемонстрировал набор текста со скоростью 164 слова в минуту, используя эту функцию.
Некоторые разработчики надеются, что голосовое управление будет лучше любой клавиатуры.
Неуклюжие ручные контроллеры часто отталкивают новых пользователей виртуальной реальности, сказал в интервью по электронной почте Оттоматиас Пеура, глава отдела развития компании Speechly, занимающейся разработкой программного обеспечения для голосового управления. «Это особенно проблематично в определенных средах виртуальной реальности, которые можно использовать только один или два раза, например, в средах для недвижимости или живой музыки», - добавил он.
Практика может улучшить то, как пользователи управляют стандартными контроллерами, но управлять виртуальной реальностью с помощью речи еще лучше, сказал Пеура.
«Голос - это также отличный вариант для улучшения взаимодействия с пользователем в виртуальной реальности, потому что это наиболее естественный способ взаимодействия для нас, людей», - добавил он. «Хотя может быть сложно нажать B на левом контроллере в очках виртуальной реальности, сказать «открой дверь» очень интуитивно».
