Ключевые выводы
- Исследователи разработали механизм управления аватарами виртуальной реальности с помощью выражения лица.
- Исследователи обнаружили, что выражения лица создают гораздо более захватывающий опыт.
-
Техника может помочь сделать виртуальную реальность доступной для людей с ограниченными возможностями.
После революции в биометрии лица готовы оживить другую технологию: виртуальную реальность (VR).
В недавнем исследовании международная группа исследователей из Австралии, Новой Зеландии и Индии использовала общие выражения лица, такие как улыбка и хмурый взгляд, для взаимодействия и запуска определенных действий в виртуальной среде с удивительными результатами.
«В целом, мы ожидали, что портативные контроллеры будут работать лучше, поскольку они являются более интуитивным методом, чем мимика», - отметил профессор Марк Биллингхерст из Университета Южной Австралии, один из исследователей, участвовавших в эксперименте, в отчете. выпуск новостей. «Однако люди сообщали, что чувствовали себя более погруженными в виртуальную реальность, контролируемую выражением лица».
Интуитивное погружение
Исследователи во главе с исследователем Университета Квинсленда доктором Ариндамом Дей, который работает с профессором Биллингхерстом в Австралийском исследовательском центре интерактивных и виртуальных сред, утверждают, что большинство интерфейсов виртуальной реальности требуют физического взаимодействия с использованием портативных контроллеров.
В своей статье исследователи отмечают, что они намеревались использовать выражение лица человека для управления объектами в виртуальной реальности без использования портативного контроллера или сенсорной панели. Они разработали механизм для определения различных выражений лица, включая гнев, радость и удивление, с помощью гарнитуры электроэнцефалограммы (ЭЭГ).
Например, улыбка использовалась для запуска команды для перемещения виртуального аватара пользователя, в то время как хмурый взгляд вызывал команду остановки, а сжатие использовалось для выполнения предопределенного действия вместо использования портативного контроллера для управления. аватар, объяснил профессор Биллингхерст в пресс-релизе.
В рамках исследования группа разработала три виртуальные среды, две из которых были счастливыми и пугающими, а третья – нейтральной. Это позволило исследователям измерить когнитивное и физиологическое состояние каждого участника, пока они были погружены в каждый из трех сценариев.
В счастливой обстановке участники улыбались, двигаясь по парку, чтобы ловить бабочек, стиснув челюсти, и хмурились, чтобы остановиться. Точно так же в пугающей среде одни и те же выражения использовались для навигации по подземной базе, чтобы стрелять в зомби, в то время как в нейтральной среде выражения лица помогали пользователям перемещаться по мастерской, собирая различные предметы.
Затем исследователи сопоставили неврологические и физиологические эффекты взаимодействия пользователя в трех средах виртуальной реальности с использованием выражений лица и сравнили их с взаимодействиями, осуществляемыми с помощью широко используемых портативных контроллеров.
проф. Биллингхерст отметил, что в конце эксперимента исследователи пришли к выводу, что, хотя полагаться только на выражение лица в условиях виртуальной реальности - тяжелая работа для мозга, это дает участникам более захватывающий и реалистичный опыт, чем использование портативных контроллеров..
Простой трюк?
Исследователи утверждают, что взаимодействие с виртуальной реальностью с помощью мимики не только обеспечивает новый способ использования виртуальной реальности, но и делает ее более доступной. Отказавшись от портативных контроллеров, люди с ограниченными возможностями, от людей с заболеваниями двигательных нейронов до людей с ампутированными конечностями, наконец-то смогут испытать виртуальную реальность.
Несмотря на то, что они работают над тем, чтобы сделать ее более удобной, исследователи предполагают, что эту технологию также можно использовать для дополнения портативных контроллеров, особенно для сред виртуальной реальности, где выражения лица являются более естественной формой взаимодействия.
"Большая часть человеческого общения на самом деле представляет собой язык тела [и] микровыражения лица, о которых мы часто не знаем, поэтому правильное отслеживание лица, несомненно, может вывести виртуальное социальное взаимодействие на совершенно новый уровень". Лукас Риццотто, бесстрашный создатель и YouTube-блогер, сказал Lifewire по электронной почте.
Риззотто, чье самое известное творение - машина времени в виртуальной реальности, считает, что отслеживание лица определенно играет важную роль, когда речь идет о социальной виртуальной реальности, дополненной реальности (AR) и метавселенной, хотя у него есть сомнения по поводу ее усиления. общепринятое признание.
«Что касается простого управления своим лицом, я уверен, что здесь есть некоторые творческие возможности, когда дело доходит до искусства и доступности», - считает Риццотто. «Но это также может легко оказаться просто уловкой, когда у нас есть так много более надежных форм ввода».
