Ученые из Сеула восстановили воображаемые мелодии по сигналам мозга

Как мозг «проигрывает» музыку внутри нас
Эксперимент, опубликованный в журнале eNeuro, проводился на 10 пациентах с эпилепсией. Им уже были имплантированы электроды для медицинского наблюдения. Ученые Джи Квон и Чун Ки Чун использовали эту возможность для записи ЭКоГ (электрокортикографии). Это метод, при котором сигналы снимаются прямо с коры головного мозга, минуя череп и кожу. Картинка получается в разы четче, чем при обычной ЭЭГ. Схема выглядела обманчиво просто. Участник слушал несколько тактов знакомой детской песенки. Затем звук обрывался, и человек должен был мысленно продолжать напевать ее про себя. В этот момент алгоритм анализировал активность мозга и пытался понять, какую ноту «слышит» пациент в своей голове. Модель успешно научилась распознавать шесть классов высоты тона: до, ре, ми, фа, соль и ля.«В чем суть? Декодер работает не с абсолютными частотами, а с относительными интервалами между нотами. Мозг запоминает мелодию как последовательность переходов, а не как набор конкретных герц. Именно поэтому мы узнаем песню в любой тональности, и именно поэтому алгоритм смог уловить логику музыкального мышления».Это принципиальный момент. Если бы система пыталась угадывать конкретную частоту звука, она бы провалилась. Человек мог представить мелодию в более высокой или низкой тональности, чем оригинал. Но логика переходов осталась неизменной, и именно её уловил алгоритм.
Почему это не просто игрушка для меломанов
У технологии два пути развития. Первый — научный. Сейчас система различает лишь ноты, но не темп или громкость. Следующий шаг — декодирование ритма и динамики. Это позволит воссоздавать не просто последовательность нот, а полноценную музыкальную фразу с эмоциональной окраской. Второй путь — медицинский, и он куда важнее. Пациенты с боковым амиотрофическим склерозом (БАС) теряют способность двигаться и говорить. Их мозг остаётся ясным, но тело становится тюрьмой. Нейроинтерфейс, основанный на этом подходе, мог бы дать им инструмент для самовыражения. Человек сможет «играть» музыку силой мысли. Это не развлечение — это способ общения с миром, когда слова недоступны.Честный взгляд на ограничения
Стоит сохранять трезвость. Пока что система работает с простыми детскими песенками. До симфонических оркестров в голове — дистанция огромного размера. Исследование лишь доказывает саму концепцию: мысленная музыка оставляет измеримый след в мозге, который можно расшифровать. Личное наблюдение автора: меня больше всего цепляет не техническая часть, а философский аспект. Мы привыкли, что музыка — это социальный акт. Её нужно сыграть или спеть, чтобы поделиться. Но если внутренний слух можно транслировать напрямую, меняется само понятие творчества. Композитор сможет записывать партитуры, не прикасаясь к инструменту. Человек, лишенный голоса, сможет спеть любимую колыбельную своим детям.«Важно понимать: это первый шаг, а не финальная точка. Но именно такие шаги превращают научную фантастику в инженерное задание».Технология открывает дверь в мир, где мысль становится интерфейсом. И пусть сейчас это всего лишь шесть нот, завтра это может стать целой симфонией, которая звучит внутри нас.
По материалам: iXBT


