Вчені створили мозковий імплант, який одночасно розпізнає слова та жести у людей із паралічем
Науковці розробили мозковий імплант, здатний одночасно розпізнавати спроби людини говорити та використовувати жести. Система перетворює сигнали мозку на текст і рухи цифрового аватара майже одразу після виникнення наміру.
Розробка призначена насамперед для людей із тяжким паралічем, які втратили можливість нормально говорити та рухатися. Результати дослідження опубліковані 14 вересня в Nature Neuroscience.
Один мозковий імплант розпізнає мовлення та жести
Як повідомляє Nature, система здатна одночасно перетворювати вербальні та невербальні наміри людини на цифрову форму.
Імплант містить масив із 253 електродів, розміщених на поверхні кори головного мозку. Він охоплює достатньо велику ділянку сенсомоторної кори, щоб фіксувати активність, пов’язану як із мовленням, так і з рухами тіла.
Система перетворює сигнали мозку на текст і рухи аватара
У дослідженні взяли участь двоє людей із серйозними порушеннями мовлення та рухів. Один учасник переніс інсульт стовбура мозку, інший мав бічний аміотрофічний склероз (БАС).
- система розпізнавала намір вимовити задані фрази;
- фіксувала спроби або уявлення жестів;
- розрізняла кивки, рухи рук, знизування плечима та інші дії;
- могла одночасно обробляти мовлення та жест, що його супроводжував.
Штучний інтелект аналізував електричну активність мозку, після чого слова з’являлися на екрані, а розпізнані рухи відтворював персоналізований цифровий аватар.
Технологія поки залишається експериментальною
Дослідження в Nature Neuroscience поки є демонстрацією концепції, а не готовим медичним пристроєм. Для встановлення системи потрібне хірургічне втручання, а алгоритми необхідно адаптувати до конкретної людини.
Водночас розробка демонструє можливість створення єдиного нейроінтерфейсу, який повертає не лише слова, а й частину невербального спілкування. У перспективі такі системи можуть зробити комунікацію людей із тяжким паралічем значно природнішою.
