29.04.2024
Подписывайтесь на Telegram-канал по ссылке

Создана нейросистема для распознавания речи парализованных людей

Generalizable spelling using a speech neuroprosthesis

Учёные из США разработали нейроинтерфейс, позволяющий с высокой точностью распознавать речь парализованных больных и людей с проблемным речевым аппаратом. Установка ошибается лишь в 6% случаев, что ускоряет процесс озвучивания. Статья с исследованием опубликована журнале Nature Communications.

За последние годы учёные создали несколько десятков нейроинтерфейсов, трансформирующих активность мозга пациентов в устную или письменную речь. Они состоят из набора имплантированных в мозг электродов и позволяют парализованному человеку двигать курсор мыши по экрану компьютера, нажимать им на кнопки виртуальной клавиатуры, а также рисовать буквы на экране. Такой подход упрощает процесс набора текста и позволяет быстро декодировать слова и предложения с минимумом ошибок. Это позволяет паралитикам общаться с окружающими людьми.

Новая система опирается на радиотелефонный фонетический алфавит, который международные организации используют для точной передачи букв латинского алфавита. Для этого каждый символ кодируют коротким английским словом: символом f обозначают словом foxtrot (фокстрот), а букву u — словом uniform (униформа). Учёные предположили, что всплески активности мозга, вызванные мыслями о конкретном слове, можно будет распознать при помощи нейросети. Чтобы проверить эту идею команда имплантировала электроды в мозг парализованного добровольца и записала сигналы мозга, которые возникали когда пациент произносил кодирующие буквы фонетического алфавита слова.

При помощи полученных данных специалисты обучили нейросеть. Она различала кодовые слова в режиме реального времени и использовала их для составления слов и предложений. Чтобы повысить качество работы системы учёные настроили её таким образом, чтобы она игнорировала все сигналы, не совпадающие со встроенным словарем из 1,1 тыс. самых употребимых слов английского языка. Метод позволил добровольцу произносить по несколько слов в минуту и совершать при этом минимальное число ошибок. Специалисты надеются, что высокая скорость и точность работы их системы сделает жизнь немых и парализованных пациентов более комфортной уже в ближайшие годы.