Science Advances: мозг различает речь и музыку по свойствам звука


Фото: Warner Bros.

Гарри Поттер помог ученым понять, как мозг различает речь и музыку.

В фильме, где персонажи говорят на фоне музыки, человек одновременно воспринимает и слова, и мелодию. Канадские и французские исследователи определили, какие характеристики звука позволяют мозгу разделять эти потоки. При узнавании речи главную роль играют быстрые временные изменения звука, тогда как для музыки важнее распределение звука по частотам. Зачем ученым потребовались первые минуты «Гарри Поттера» и какие результаты дали записи мозговой активности, рассказывается в материале «Известий».

Зачем ученым понадобился «Гарри Поттер»

В ходе эксперимента использовали примерно восемь минут аудиодорожки из фильма «Гарри Поттер и философский камень» с французским дубляжом. В этом отрывке речь и музыка присутствовали как отдельно, так и вместе. Прежние исследования нередко опирались на короткие изолированные звуки. Материал из фильма дал возможность понять, действуют ли найденные закономерности в ситуации, когда звуки накладываются друг на друга, а их комбинация непрерывно меняется.

Этот же фрагмент прослушали две группы. В первую вошли 19 здоровых взрослых людей. Они нажимали кнопки, фиксируя моменты, когда слышат речь, музыку либо оба компонента. Вторую группу составили 11 пациентов с эпилепсией, которым ранее установили внутричерепные электроды для обследования. Они слушали запись без дополнительных заданий, а специалисты записывали активность их мозга. Благодаря этому ученые смогли сопоставить восприятие одной группы с реакцией слуховой коры другой на тот же материал.

Что выдает речь и музыку

Звук имеет временной и частотный рисунок. В речи слоги сменяют друг друга быстро, а короткие всплески звука чередуются с паузами. Если звучит несколько нот, их сочетание создает иной ориентир — характерное распределение энергии между низкими и высокими частотами. Перемены сигнала во времени и по частотам исследователи называют спектрально-временными модуляциями. Анализ продемонстрировал, что для распознавания речи больше сведений несли быстрые временные изменения, а для распознавания музыки — детали частотной картины.

В слуховых зонах обоих полушарий специалисты обнаружили 39 точек, в которых мозговая активность стабильно изменялась вслед за указанными акустическими признаками. Компьютерные модели восстанавливали характеристики звуковой дорожки по записям с электродов. После этого ученые проверяли, возможно ли по ним предсказать, в какие моменты участники из другой группы нажимали кнопку, отмечая речь или музыку.

Согласно данным отдельных точек записи, модели предсказывали отметки о наличии речи с точностью 54–60%, а музыки — 54–71%. В обоих случаях значения оказались выше порога случайного угадывания, равного 50%. Когда акустические признаки анализировали напрямую из звуковой дорожки, точность достигала 97–99% для речи и 99–100% для музыки.

Выявленную закономерность проверили и на другом материале. Пятеро участников прослушали специально составленную смесь речи и органной музыки. В этой записи исследователи заранее знали, где звучал каждый компонент. Анализ показал сходный результат: для распознавания речи вновь большее значение имели временные изменения, а для музыки — особенности ее частотного состава.

Как полушария обрабатывают звук

С временными изменениями звука сильнее всего были связаны быстрые колебания мозговой активности в гамма-диапазоне. За частотными деталями лучше следовали более медленные колебания в альфа-диапазоне. Обработка речи и музыки шла с участием обоих полушарий. При этом активность слуховых участков слева точнее повторяла акустические особенности речи, а справа — особенности музыки.

Сходную асимметрию часть авторов отмечала еще в 2020 году. В тот раз они записали пропетые фразы на английском и французском языках, а затем обработали записи двумя способами. Если из звука удаляли часть информации о временных изменениях, участникам становилось труднее различать слова. Если убирали часть частотных деталей, хуже распознавалась мелодия. В той работе мозговую активность измеряли при помощи функциональной МРТ. Эксперимент с фильмом дал возможность проследить похожую закономерность по сигналам с электродов, пока реплики и музыка сменяли друг друга или звучали одновременно.

Как мозг воспринимает пение

Итоги эксперимента показывают: отличие речи от музыкального сопровождения можно определить уже по тому, как слуховая кора фиксирует свойства звука.

«Сами акустические характеристики уже содержат информацию, необходимую для такого различения», — пишут авторы.

Открытым остается вопрос о том, какую роль в этом процессе играют области мозга, избирательно отвечающие на отдельные типы звуков. Один пример такой избирательности выявили в 2022 году. В слуховой коре исследователи описали группу нейронов, которая сильно реагировала на пение и заметно слабее — на обычную речь или инструментальную музыку. В новом эксперименте перед учеными стояла другая задача. Они смогли показать, по каким признакам мозг различает два звука, когда голос и музыка слышны одновременно и каждый сохраняет собственный акустический рисунок.