Аспирант Корнеллского университета Жуйдун Чжан разработал новое устройство – очки EchoSpeech, которые способны «слышать» беззвучную речь своего владельца, достаточно лишь лицевой артикуляции.
Очки оснащены сонаром и способны улавливать движения губ и языка, которые генерируют слабые звуковые волны. Данные волны затем обрабатываются алгоритмами машинного обучения, которые интерпретируют движения губ и языка и переводят их в звуковую речь.
Формат очков оказался более удобным, чем наушники, поскольку пользователю не нужно смотреть в камеру или вставлять что-то в ухо. Это позволяет пользователю записывать свои действия и общение в режиме реального времени, оставаясь при этом более свободным и мобильным.
Данные, записанные на очках, передаются на смартфон, где они обрабатываются алгоритмами искусственного интеллекта. Это позволяет пользователям легко редактировать и делиться своими записями, а также получать рекомендации по поводу того, как сделать их контент более привлекательным и интересным.
Очки EchoSpeech можно использовать в качестве стандартного устройства ввода, заменяя традиционные микрофоны и диктофоны. По словам Чжана, этот инновационный продукт может быть полезен для людей с нарушением речи, а также для военных, полицейских и спецслужб, которым нужно общаться молча в определенных ситуациях.
Фото: из открытых источников
