Исследователи из Калифорнийского университета в Дэвисе разработали экспериментальный интерфейс «мозг-компьютер» (ИМК), который восстанавливает возможность общения в реальном времени для людей, потерявших способность говорить из-за неврологических заболеваний.
Эта технология преобразует активность мозга в голос, эффективно создавая цифровой голосовой тракт без заметной задержки. ИМК использует искусственный интеллект для декодирования электрической активности мозга пациента во время попыток говорить.
Устройство воспроизводит не только задуманные слова, но и естественные характеристики речи, такие как интонация, тон и ударение. Это позволяет использовать более естественную и выразительную форму общения.
Система позволила участнику с боковым амиотрофическим склерозом (БАС) «говорить» через компьютер, менять интонацию и «петь» простые мелодии. Синтезированный голос часто был понятен, слушатели правильно понимали почти 60% слов.
Процесс облегчается передовыми алгоритмами искусственного интеллекта, обученными на данных, собранных во время попыток участника произнести фразы. Алгоритмы сопоставляют нейронную активность с желаемыми звуками, что позволяет синтезировать речевые нюансы и давать участнику контроль над каденцией его голоса ИМК.
Технология позволила участнику произносить новые слова и делать междометия. Исследование, опубликованное в Nature, представляет собой значительный прогресс по сравнению с предыдущими моделями ИМК.