Созданы очки, отслеживающие движения лица для безмолвного общения
Исследователи Корнеллского университета разработали очки с сонаром, которые могут "услышать", что пользователь говорит беззвучно, считывая движения его рта. Приставка к очкам регистрирует движения его рта и используя алгоритм глубокого обучения для анализа с точностью около 95%.
Системе требуется всего несколько минут обучения, чтобы выучить речевые паттерны пользователя, и она отправляет и получает данные по беспроводной связи на смартфон пользователя для обработки. Текущая версия обеспечивает около 10 часов автономной работы, при этом никакие данные не покидают телефон пользователя.
Система может использоваться для выполнения различных функций, таких как переключение музыки, ввод пароля без прикосновения к телефону или работа над чертежными моделями без клавиатуры.
Исследователи отмечают, что большинство технологий распознавания беззвучной речи ограничены набором заранее определенных команд и требуют, чтобы пользователь стоял лицом к камере или носил ее, что непрактично и невыполнимо. Форм-фактор очков устраняет необходимость смотреть в камеру или вставлять что-то в ухо.