Учёные из Пхоханского университета науки и технологии (POSTECH, Южная Корея) создали мягкий силиконовый шейный ободок, который превращает беззвучные движения горла в речь. Устройство отслеживает микроскопические деформации кожи и мышц шеи при артикуляции слов и с помощью ИИ преобразует их в текст, а затем синтезирует речь голосом самого пользователя.
В отличие от предыдущих систем на основе ЭМГ или ЭЭГ, новый ободок использует мультиаксиальный датчик деформации и миниатюрную камеру. Специальные реперные метки на силиконе позволяют камере точно измерять направление и степень растяжения кожи в реальном времени. Алгоритм автоматически компенсирует небольшие различия в положении ободка при каждом надевании.
Для обучения систему тестировали на фонетическом алфавите НАТО (26 слов). Точность распознавания составила 85,8%. После распознавания слова ИИ отправляет его на сервер, где голосовая модель, обученная всего за 10 минут записи голоса пользователя, синтезирует речь с сохранением индивидуальной интонации и тембра.
Устройство хорошо работает даже в сильном шуме (до 90 дБ) и демонстрирует высокий сигнал-шум. Авторы видят применение технологии для пациентов после удаления гортани, в шумных промышленных условиях, аварийно-спасательных службах, авиации и военных сценариях.
