Группа исследователей из Калифорнийского университета в Беркли и в Сан-Франциско поделилась результатами свежего эксперимента. Новая технология, включающая в себя мозговой имплант, вернула женщине возможность говорить.
Современные ИИ-синтезаторы голоса уже помогли пациентам с параличом заговорить «родным» голосом: модель обучается на записях реальных разговоров человека и затем может генерировать более естественную речь. Упомянутая ниже разработка ориентирована на пациентов, которые совсем утратили способность говорить самостоятельно.
Технологию тестировали на парализованной женщине по имени Энн. Она потеряла возможность произносить слова несколько лет назад из-за неизвестного несчастного случая.
Учёные имплантировали в мозг женщины специальное устройство, способное собирать данные о нейронах в области, отвечающей за контроль речевой моторики. Специалисты фиксировали активность мозга в момент, когда Энн беззвучно произносила или изображала мимикой фразы, показанные на экране.
Энн показали сотни предложений, включавших в себя 1024 ключевых словарных слов. Далее исследователи приступили к расшифровке мыслей пациентки.
«По сути, мы перехватываем сигналы, когда мысль преобразуется в артикуляцию, и в середине этого процесса управления движением», — пояснил соавтор исследования Чхоль Джун Чо.
Расшифрованные данные обработали при помощи модели ИИ, преобразующей текст в речь: предварительно её обучили на старых записях голоса Энн.
Как итог, женщина смогла молча прочитать целые предложения, которые преобразовывались в речь с задержкой менее 80 миллисекунд. В числе первых фраз, которые произнесла «обновлённая» Энн были: «Ты меня любишь?» и «Так ты это сделала».
«Услышав свой голос почти в реальном времени, она ощутила своё тело», — поделилась соруководитель исследования Гопала Ануманчипалли.
Нескучно о культуре
