Пациент после инсульта научился говорить с помощью ИИ

Группа нейрохирургов и специалистов по искусственному интеллекту (ИИ) из Университета Калифорнии в Сан-Франциско добилась определенного успеха в восстановлении речи у пациента, потерявшего способность к ней после инсульта. В своем исследовании, опубликованном в журнале Nature Biomedical Engineering, группа имплантировала мозговой компьютерный интерфейс в череп мужчины и применила методы ИИ для помощи пациенту снова заговорить — на двух языках.

Предыдущие исследования показали, что возможно имплантировать зонд на поверхность мозга для считывания мозговых волн и затем применять методы обучения для преобразования некоторых из этих волн в слова. В новом исследовании группа ученых пошла дальше, добавив еще один элемент — второй язык.

Добровольцем стал Панчо, носитель испанского языка. Он потерял большую часть этой способности после инсульта в возрасте 20 лет. Несколько лет спустя он научился читать и преобразовывать слова в своих мыслях на английский язык. Недавно он участвовал в исследовательском проекте, в котором на поверхность части его мозга, ответственной за обработку языка, была наложена решетка электродов.

В течение следующих трех лет Панчо проходил обучение. Ему показывали слова на экране компьютера, и затем его просили повторять их в своем уме. Пока он это делал, зонд считывал его мозговые волны и пытался преобразовать их в прочитанное слово. В рамках обучения Панчо ему показывали и испанские, и английские слова. LLM помогал в дешифровке и преобразовании и уменьшал количество ошибок.

Система продемонстрировала точность 88% в определении, когда Панчо говорил на испанском языке, по сравнению с английским, и 75% в расшифровке слов в целом. Исследователи отмечают, что это было достаточно для того, чтобы он мог вести беседы с исследовательской группой.