Симбиоз мозгового имплантата и ИИ позволил женщине с тяжелым параличом заговорить вновь — через цифровой аватар.
Что известно
На поверхность мозга женщины с тяжелой формой паралича имплантировали 253 электрода, они перехватывали сигналы мозга и отправляли их на компьютер.
Далее специалисты обучили алгоритмы искусственного интеллекта распознавать речевые сигналы мозга и создали систему, которая декодирует слова из фонем — строительных блоков речи. Например, слово «hello» состоит из четырех фонем: «HH», «AH», «L» и «OW».
Чтобы «вернуть» ей голос, ученые использовали видео со свадьбы женщины и обучили ИИ синтезировать ее речь. Следующий шаг — создание анимации лица, основанное на мимике и движении лицевых мышц.
Почему это важно
Как итог, появилась единая система, которая обрабатывала мысли и выражения лица женщины — и транслировала их через цифровой аватар, который озвучивал то, что она хотела бы сказать. Очередной прорыв: мозговой имплант, который умеет читать мысли и синтезировать их в речь. Пока что устройство работает не очень быстро, но довольно точно. Следующий шаг инженеров — беспроводной девайс для повседневной жизни.