Американские ученые разработали технологию, позволяющую восстановить песню, которую прослушал человек, по сигналам активности его мозга. Для этого использовали сотни микроэлектродов.
«Результаты наших экспериментов помогут сделать более музыкальными и естественными новые нейроинтерфейсы для людей, утративших способность самостоятельно говорить», — рассказал профессор Роберт Найт.
Ученые сделали свое открытие, наблюдая за 29 пациентами с эпилепсией. Им имплантировали электроды в мозг, а затем предложили прослушать запись песни Another Brick in the Wall, Part 1 рок-группы Pink Floyd.
Исследователи наблюдали, какие ноты, аккорды и звуки голоса звучали в каждый момент изменения мозговой активности. Этот анализ позволил «синхронизировались» сигналы от верхней височной извилины со звучанием композиции.
Затем они разработали систему машинного обучения, которая смогла практически полностью реконструировать прослушанную песню по данным от 346 электродов, подключенных к мозгу.
👀 Ранее ученые посмотрели на мир глазами мышей, расшифровав сигналы мозга.