Умное ожерелье распознает беззвучные команды. Как такое возможно?

Ученые разработали ожерелье под названием Speechin, которому можно посылать команды, проговаривая слова без звука. Пригодится, например, на деловой встрече.
Умное ожерелье распознает беззвучные команды. Как такое возможно?
Cornell University

Представьте, что в общественном транспорте вам не нужно кричать, чтобы Siri вас услышала — достаточно произнести слова беззвучно

Если на деловой встрече вам нужно вдруг проверить электронную почту, вы не можете просто попросить об этом Siri или Google Assistant, ведь шуметь нельзя. А в общественном транспорте ваши голосовые команды просто потонут в окружающем шуме. Специально для этих целей создано ожерелье Speechin, которое способно воспринимать даже беззвучные голосовые команды.

РЕКЛАМА – ПРОДОЛЖЕНИЕ НИЖЕ

Наряду с микропроцессором, батареей и модулем Bluetooth Speechin также оснащен инфракрасной камерой, направленной вверх, которая отображает нижнюю сторону подбородка пользователя. Она удерживается в этом положении при помощи набора «крыльев» и «монеты», которая выполняет роль груза. Чтобы решить проблемы конфиденциальности, камера не указывает прямо на лицо пользователя.

Используя алгоритмы, основанные на машинном обучении, устройство способно определять, какие команды его владелец произносит беззвучно, основываясь на движениях его подбородка. Затем устройство может передавать эти команды на сопряженный смартфон.

Система была обучена путем наблюдения за движениями подбородка 20 добровольцев, когда они молча произносили известные слова и фразы – 10 из этих людей говорили по-английски, в то время как другие 10 говорили на мандаринском языке. В последующих тестах участники произносили 54 часто используемые команды на английском языке, а также 44 слова и фразы на китайском языке.