Yandex Metrika
1
3 репоста, 1 голос

Представьте, что вы не можете говорить, улыбаться или махать рукой. Именно с таким вызовом сталкиваются люди с боковым амиотрофическим склерозом (БАС) и другими формами тяжёлого паралича. Современные технологии уже научились считывать мозговую активность и превращать её в слова, но до недавнего времени они игнорировали невербальную сторону общения — мимику и жесты. Теперь учёные из Калифорнийского университета в Сан-Франциско совершили прорыв: они создали нейроинтерфейс, который одновременно переводит и речь, и жесты, делая коммуникацию более естественной и многогранной.

Это не просто техническое достижение. Речь идёт о возвращении людям с параличом возможности выражать эмоции, оттенки смысла и просто быть услышанными так, как они привыкли. В статье мы разберём, как работает эта система, почему одновременное декодирование слов и движений оказалось сложной задачей, и какие перспективы открывает данное исследование для миллионов людей по всему миру.

Нейроимплант
Компьютеры, способные считывать попытки парализованных людей говорить и жестикулировать, создавались и раньше, но эти две функции никогда не объединяли в одной системе. Изображение: Gorodenkoff/Shutterstock

Что такое интерфейс «мозг — компьютер» и зачем он нужен при параличе

Интерфейс «мозг — компьютер» (BCI) — это технология, которая считывает электрические сигналы мозга и преобразует их в команды для внешних устройств. Для людей с БАС, перенёсших инсульт ствола мозга или другие заболевания, приводящие к параличу, такие системы становятся единственным способом общения с миром. Ранние версии BCI позволяли набирать текст силой мысли или управлять курсором, но они были медленными и утомительными.

Современные исследования пошли дальше: учёные пытаются воссоздать не только слова, но и естественные движения — кивок, улыбку, взмах руки. Ведь человеческое общение на 70% состоит из невербальных сигналов. Без них даже самая точная речь звучит робко и безжизненно.

Как учёные научили имплант читать речь и жесты одновременно

Команда профессора Эдварда Чанга (Edward Chang) работала с тремя пациентами с БАС. В их моторную кору — область мозга, отвечающую за движения, — был имплантирован массив электродов (электрокортикография, ECoG). Этот массив считывал активность нейронов, когда пациенты пытались произнести слово или сделать жест.

Каждому участнику дали словарь из 10 слов и 10 жестов. Комбинируя их, можно было получить 100 разных сообщений. Затем исследователи обучили компьютерные декодеры распознавать эти сигналы и передавать их на аватар — виртуальное лицо, которое произносило слова и повторяло движения.

Ключевое открытие: мозг не разделяет речевые и жестовые команды на полностью независимые каналы. Некоторые электроды активировались при обоих типах задач, особенно в прецентральной извилине. Это означает, что попытка декодировать речь и жесты по отдельности, а потом складывать результаты, даёт низкую точность. Гораздо эффективнее обучать систему на одновременных сигналах.

Почему это важно: возвращение естественного общения

Существующие методы, такие как айтрекинг (которым пользовался Стивен Хокинг), позволяют набирать текст взглядом, но это медленно, утомительно и лишено интонаций и эмоций. Новый подход восстанавливает «целостность» коммуникации: пациент может не только сказать «да», но и кивнуть, улыбнуться или пожать плечами.

Доктор Дебара Туцци (Debara Tucci) из Национальных институтов здоровья США отметила:

«Эти многообещающие результаты дают надежду, что в будущем пациенты с тяжёлым параличом смогут вернуть себе полноценное человеческое общение.»

Ограничения и что ещё предстоит сделать

Несмотря на успех, технология пока далека от идеала. В эксперименте использовались провода, соединяющие имплант с внешним оборудованием, что ограничивает подвижность. Словарный запас был небольшим — всего 10 слов и 10 жестов. Даже лучшие декодеры ошибались в шестой части случаев, а иногда и в трети.

Кроме того, неизвестно, как система поведёт себя при более богатом словаре и спонтанной речи. Тем не менее, это доказательство концепции: одновременное декодирование речи и жестов возможно, и оно работает лучше, чем раздельное.

Пример из жизни: как это могло бы выглядеть

Представьте пациентку по имени Анна, полностью парализованную после инсульта. Раньше она могла только медленно выбирать буквы на экране взглядом. Теперь, благодаря новой системе, она мысленно произносит «привет» и одновременно представляет, как машет рукой. Аватар на экране улыбается, говорит «привет» и машет в ответ. Анна снова может шутить, выражать радость или недовольство — её личность проявляется в полной мере.

Вывод: шаг к свободе общения

Исследование, опубликованное в Nature Neuroscience, открывает новую главу в разработке нейроинтерфейсов. Учёные доказали: мозг можно научить передавать сложные, многокомпонентные сообщения, а компьютер — понимать их. Хотя до широкого применения ещё далеко, этот прорыв вселяет надежду миллионам людей с параличом. Возможно, совсем скоро они смогут не просто «говорить» глазами, а жить полноценной социальной жизнью — с жестами, мимикой и интонацией.

Для читателя это означает одно: технологии будущего всё ближе, и они направлены на то, чтобы вернуть человеку человеческое. Следите за обновлениями — возможно, следующий шаг сделают уже в этом десятилетии.

Следите за нашими новостями:


Понравилось? Поделитесь с друзьями!

✏️ Сообщить об ошибке

Вы заметили ошибку в следующем тексте: