Новая система дополненной реальности превращает любую поверхность в клавиатуру (видео)
Исследователи из Техасского университета в Далласе представили PropType, интерфейс дополненной реальности, который позволяет пользователям писать на повседневных предметах, таких как бутылки, коробки и книги. Система накладывает виртуальную клавиатуру поверх реальных объектов, обеспечивая тактильную обратную связь. Этот метод ввода текста проще для пользователей, чем набор текста «в воздухе», типичный для интерфейсов дополненной реальности.
Виртуальные клавиатуры часто вызывают дискомфорт у пользователей. Когда человек пишет «в воздухе», ему приходится постоянно концентрироваться и руки быстро устают. тип реквизита решает эту проблему, возвращая письмо в физический мир. По словам доктора Джин Рён Кима, доцента кафедры компьютерных наук PropType:переопределяет ввод текста в дополненной реальности, обеспечивая естественную и плавную связь между физическим и виртуальным мирами«.
Чтобы разработать PropType, команда изучила, как 16 человек держали различные предметы, записывая силу хвата, положение рук и движение пальцев. На основе этих данных исследователи создают собственные раскладки клавиатуры, которые естественным образом соответствуют формам объектов.
Система поддерживает работу на изогнутых и неровных поверхностях, включая бутылки с водой, банки из-под газировки, кофейные чашки и толстые книги. Пользователи могут создавать собственные раскладки клавиш с помощью инструмента редактирования, изменяя размер, интервал и визуальные эффекты.
Технология может адаптироваться к различным объектам, точно распознавать нажатия клавиш и снижать зависимость от визуальных подсказок. Ким сказал, что PropType представляет собой более интуитивно понятную и доступную альтернативу традиционным клавиатурам, что особенно полезно, например, при работе в дороге.
Разработка PropType является частью исследования лаборатории Кима в области тактильного восприятия, которое изучает сигналы прикосновения, вибрации и тепловые сигналы в цифровых системах. Эти разработки обеспечивают более аутентичный опыт работы в виртуальной и дополненной реальности, включая медицинские симуляции.
«Прикосновение несет в себе большое количество информации. Это еще одна форма общения, недостаточно изученная в виртуальной и дополненной реальности»,
— говорит ученый.
