Новый интерфейс позволит передавать команды без звука Он основан на строении уха

Технология EarCommand основывается на том, что когда человек произносит про себя различные слова, сопутствующие движения лицевых мышц вызывают деформацию слухового прохода. Специалисты разработали похожее на внутриканальный наушник устройство, в котором применяется обращенный внутрь динамик для передачи ультразвуковых сигналов в слуховой проход.

Когда эти сигналы отражаются от внутренней поверхности канала, эхо улавливается направленным внутрь микрофоном. Подключенный к интерфейсу компьютер анализирует отраженные сигналы, используя специальный алгоритм для определения деформации слухового прохода.

Устройство протестировали на группе пользователей, которые произносили 32 различные команды из отдельных слов и 25 команд в виде предложений. Система распознала большую часть команд с частотой ошибок 10,2% на уровне слов и 12,3% — на уровне предложений. EarCommand работал даже в том случае, если пользователи были в масках или находились в шумной обстановке.

А нейросеть научили довольно точно определять источник звука: