ИИ научился переводить ЭЭГ в текст

«Мы представляем Brain2Qwerty — новую архитектуру глубокого обучения, предназначенную для расшифровки предложений по данным ЭЭГ или МЭГ», — сказано в статье.

Обученный алгоритм смог предсказать, какую клавишу нажимает участник, и, собрав все буквы воедино, реконструировать набираемую им фразу. При этом если для декодирования применялась ЭЭГ, доля ошибок достигала в среднем 65%, если МЭГ — 29%.

«У лучших участников модели удается достичь ошибки на уровне 18%, и она может безупречно расшифровывать самые разные предложения, не входившие в обучающую выборку», — подчеркивается в исследовании.

Следующим этапом будет перевод в текст моторных сигналов без их реализации — проще говоря, чтобы люди ограничивались тем, что только представляли, как набирают текст. В перспективе же авторы надеются научиться переводить неинвазивно зарегистрированную мозговую активность не только в текст, но и в команды для протезов или других вспомогательных технологий.

Первая в мире роборука подчиняется командам мозга без хирургии: видео

Новый нейроимплант позволил парализованным печатать силой мысли

Подписывайтесь и читайте «Науку» в MAX