Статья с результатами разработки была представлена на конференции CHI PLAY 2020.
Интересно Смарт-часы можно будет заряжать от человека: интересная разработка
Детали исследования
Большинство шлемов виртуальной реальности используют управление с помощью контроллеров. В последние годы стали появляться модели с камерами, позволяющие в реальном времени воспроизводить кисти рук и взаимодействовать с предметами напрямую, прикасаясь к ним пальцами.
Это удобно для многих базовых действий: например, взять предмет в руку так же, как в реальном мире, а не с помощью кнопок на контроллере.
Группа исследователей под руководством Джулии Шатан из Швейцарской высшей технической школы Цюриха и Даниэля Зиссермана из Тель-Авивского университета предложила смешанный способ управления. С одной стороны он не требует контроллера и работает только с рукой человека, а с другой – использует руку в качестве контроллера.
Интерфейс в данном случае показывается на ладони руки, точнее ее модели, созданной на основе камер на шлеме. Ладонь выступает аналогом экрана смартфона. Управление осуществляется с помощью жестов этой же рукой.
Авторы создали четыре простые игры, для демонстрации сценариев использования нового интерфейса, и протестировали их на VR-шлеме HTC Vive с контроллером Leap Motion, захватывающим движения кисти.
Актуально Самые мощные Android-смартфоны октября по версии AnTuTu: неожиданный лидер
Смотрите демонстрацию возможностей новой разработки: видео
Авторы провели исследование на добровольцах, и большинство из них остались довольны. Однако исследователи говорят, что сейчас у этих игр есть недостатки. Например, в виртуальной реальности пользователь видит стандартную модель руки, что не повторяет его руку по форме, а это может снижать реализм и чувства погружения в виртуальный мир.