Команда з Каліфорнійського університету в Девісі розробила нейропротез, що дає людям із паралічем можливість говорити майже в режимі реального часу, просто подумки формуючи фрази. Роботу опублікували в журналі Nature.
На відміну від попередніх НКІ-рішень, нова система перетворює мозкову активність не у текст, а у звуки, включно з інтонацією, тоном і паузами.
За словами дослідниці Майтрі Вайраґкар, основна мета — створити гнучкий нейроінтерфейс для мовлення, який дозволить людям самостійно керувати темпом, ритмом і виразністю комунікації. У фокусі — пацієнти які втратили можливість говорити через бічний аміотрофічний склероз (БАС) та інші форми паралічу.
В експерименті взяв участь чоловік під псевдонімом T15. Йому імплантували 256 мікроелектродів у зону мозку, що відповідає за артикуляцію. Записані сигнали аналізувалися ШІ-декодером, який виокремлював мовні параметри — наприклад, висоту тону та дзвінкість. Далі ці дані обробляв вокодер, який синтезував голос, максимально подібний до природного голосу пацієнта.
Затримка на обробку сигналу становила лише 10 мс, що майже не відчувається. Пристрій розпізнає будь-які слова, вигуки й навіть мелодії, тому користувачі не обмежені словником і можуть самостійно контролювати інтонацію та емоційне забарвлення.
У першому тесті, де слухачі мали прослухати синтезоване мовлення і обрати відповідну фразу зі списку, система продемонструвала 100% точності. У відкритому тестуванні без підказок правильність розпізнавання сягала близько 56%. природне мовлення пацієнта без пристрою слухачі розуміли лише у 3,5% випадків.
Проєкт поки не готовий до щоденного використання. Вчені планують масштабувати систему до 1600 електродів замість 256. Стартап Paradromics, який у травні провів свою першу успішну імплантацію чипа в мозок людини, планує випробування подібних НКІ. Клінічні тести відбудуться в UC Davis, а серед керівників дослідження буде нейрохірург Девід Брандман.
Нагадаємо, у вересні 2024 року пацієнт компанії Synchron навчився керувати «розумним» будинком силою думки.