Исследователи помогли парализованной женщине заговорить с помощью цифрового аватара и алгоритмов искусственного интеллекта, которые анализируют ее мозговые волны и преобразуют их в речь.
Пациентка, назвавшаяся Энн (Ann), может двигать лицевыми мышцами, но не может говорить. Ученые обучили рекуррентную нейронную сеть преобразовывать сигналы ее мозга в 39 различных фонем — звуковых единиц, которые объединяются в слова при разговоре.
Мозговые волны Энн измерялись с помощью интерфейса «мозг-компьютер». После обучения модель смогла декодировать ее мысли в фонемы, которые произносил цифровой аватар на экране.
Энн может говорить через своего цифрового аватара со скоростью 62 слова в минуту, что примерно на 40% быстрее обычной речи. Коэффициент ошибок в словах составляет 23,8% при словарном запасе системы в 125 000 слов.
Технологию разработала группа ученых-компьютерщиков из Калифорнийского университета в Сан-Франциско и Калифорнийского университета в Беркли. Они надеются, что исследование приведет к созданию одобренного регулирующими органами устройства, чтобы парализованные люди могли выражать свои мысли.
