Нейросети перевели мозговые сигналы в полноценные предложения

🧐 Что случилось: нейросеть с помощью ЭЭГ смогла расшифровать текст, который человек думал про себя.

🧐 А как: в исследовании участвовали четыре женщины с эпилепсией, которым имплантировали в мозг электроды для мониторинга состояния. Они читали про себя несколько предложений из выборки, данной учёными: первый раз для обучения нейронки, второй для тестирования. В самом большом куске текста было 250 слов.

Одна нейронка искала регулярно возникающие закономерности, которые связаны с повторяющимися элементами речи — например, чередование гласных и согласных. А вторая пыталась превратить эти паттерны сначала в слова, а потом в предложения. И получилось: нейронки ошиблись всего на 3%. Для сравнения: когда пытались декодировать слова по отдельности, ошибок было 38%.

🤔 И что: такая система может помочь людям с нарушениями речи и парализованным.

👨‍🔬 Кто: команда учёных Калифорнийского университета в Сан-Франциско.

Источник: New Scientist