Имплант в мозге позволил парализованным людям одновременно говорить и жестикулировать через виртуальный аватар
Людям, запертым в неподвижном теле, возвращают не только слова, но и язык тела — общение через ИИ становится почти полноценным.
Команда нейрохирурга Эдварда Чанга (UCSF) опубликовала в Nature Neuroscience работу с тремя пациентами после инсульта ствола мозга и с БАС: сетка из 253 электродов на поверхности коры записывает сигналы речевых и двигательных зон. Машинное обучение переводит попытки говорить, махать рукой, кивать — в том числе одновременно — в текст и движения аватара во весь рост; у двоих участников это сработало. Декодер, обученный на совмещённых речи и жестах, оказался точнее, чем обученные раздельно.
Источники 2