Александр Пономарёв

Текст

Аспирант Корнеллского университета Жуйдун Чжан разработал очки EchoSpeech для анализа и озвучивания команд с помощью лицевой артикуляции

Очки оборудованы крошечными динамиками, микрофонами и батарейкой, которой хватает на 10 часов автономной работы. Система беспроводной связи передает данные по беспроводному каналу на смартфон, после чего приложение обрабатывает речь пользователя при помощи специальных алгоритмов на базе ИИ и преобразует их в команды или производит запись.

Два направленных вниз динамика установлены на нижней стороне левой рамки очков, а два микрофона расположены под правой частью оправы. Динамики излучают звуковые волны, которые отражаются от движущегося рта пользователя и фиксируются микрофонами. Эхо от лица анализируется в режиме реального времени специальным алгоритмом на смартфоне, подключенном по беспроводной связи.

Алгоритм обучен связывать определенные звуковые колебания с точными движениями лица и преобразовывать невербальные команды. Все вычисления в рамках анализа данных происходят локально на устройстве и не требуют выхода в интернет. Точность работы системы разработчик оценил в 95%.

Здесь мы рассказываем про лучшие умные гаджеты на любой случай:

Читать на ЦО.РФ

Лучшие гаджеты для дома Топ-5 умных устройств на все случаи жизни

Какие умные устройства для дома можно найти в наше время? Собрали для вас подборку самых интересных гаджетов: для дома, отдыха и повседневной жизни. Рассказываем подробно о том, как сделать свою жизнь проще с умными гаджетами

Использованные источники: