Интерфейс мозг-компьютер (BCI) позволил парализованной женщине, которая утратила способность говорить после инсульта ствола мозга, общаться через цифровой аватар.
Группа исследователей из Калифорнийского университета в Сан-Франциско (UCSF) и Калифорнийского университета в Беркли отпраздновала успех в работе с искусственным интеллектом. Ученым удалось синтезировать речи и выражения лица из сигналов головного мозга.
«Наша цель при объединении слышимой речи с аватаром в реальном времени — обеспечить полное воплощение человеческого речевого общения, которое представляет собой гораздо больше, чем просто слова», — поделился один из участников эксперимента, Эдвард Чанг, доктор медицинских наук, заведующий отделением неврологической хирургии в UCSF.
Читайте также: Лучше, чем диализ? Искусственная почка может стать спасением для тех, кто ждет трансплантацию
Работа доктора демонстрирует невероятное: декодирование сигналов мозга в речь наряду с движениями, оживляющими лицо человека во время разговора. Ученым удалось добиться впечатляющей скорости перевода нервных сигналов: 78 слов в минуту.
В рамках исследования команда ученых имплантировала на поверхность головного мозга женщины прямоугольник, толщиной с лист бумаги, состоящий из 253 электродов. Устройство взаимодействовало со всеми областями, критически важными для речи.
Электроды перехватывали сигналы мозга, которые (из-за перенесенного женщиной инсульта) не попадали в мышцы языка, челюсти, гортани и лица. Кабель, подключенный к порту, закрепленному на ее голове, соединял электроды с блоком компьютеров.
Исследователи обучали и оценивали модели глубокого обучения, используя нейронные данные, собранные, когда женщина пыталась молча произносить предложения. В течение нескольких недель она снова и снова повторяла разные фразы из разговорного словаря, состоящего из 1024 слов, пока компьютер не распознавал закономерности активности мозга, связанные со звуками.
