Музыка – это больше, чем звуковые волны

Когда вы слышите мелодию, ваше восприятие формируется формами и движениями, которые вы с ней ассоциируете.

Когда вы слышите, как поет Бейонсе, сколько времени проходит, прежде чем вы представляете, как она танцует на сцене? Или когда из динамиков раздаются гитарные соло Джими Хендрикса — вы можете видеть, как Хендрикс позирует со своей гитарой?

Имитируете ли вы пение перед зеркалом, используя расческу в качестве микрофона, или слушаете музыку в полуха во время уборки дома, движения, которые вы ассоциируете с музыкой, играют определенную роль в том, что вы на самом деле слышите.

Это потому, что музыка – это больше, чем просто хорошая лирика или мелодия. Музыка – это взаимодействие всего, что вы чувствуете.

“Просто подумайте о том, что вы чувствуете, когда кто-то берет действительно высокие ноты”, – говорит исследовательница музыки Теджасвини Келкар, и продолжает:

“Что мы на самом деле замечаем, так это усилия, прилагаемые певцом. Мы знаем это, потому что это физическое. Нам даже не нужно видеть певца, потому что мы так тонко настроены на интерпретацию нюансов голоса, который, например, говорит нам о чувствах певца”.

Келкар изучает формы, которые мы ассоциируем с музыкой, и исследовала это, изучая, какие жесты люди делают при прослушивании музыки. Выражение лица и положение ног – это лишь некоторые из вещей, которые, по ее мнению, влияют на восприятие слушателя. Результаты ее исследования опубликованы в журнале Scientific Reports.

Во время пения вы также используете руки

Теджасвини Келкар сама исполняет песни, и ее интерес к жестам развился, когда она осознала, что существует разница, как мы используем наши руки при исполнении западных и индийских песен.

“В детстве я научилась петь североиндийские песни. Там принято использовать жесты рук, чтобы помочь детям, когда они учатся петь. Когда вы на сцене, вы должны петь так же, как и на репетиции. Вы сосредотачиваетесь на том, что песня исполняется между вами и комнатой, вместо того, чтобы думать о зрителях”.

Позже, когда она обучалась западному классическому пению, она начала использовать похожие жесты.

“Но мне довольно твердо сказали, что так делать не стоит”.

Ей стало любопытно: что на самом деле означают эти жесты?

“Вы можете подумать, что эти движения оказывают вам какую-то анатомическую помощь или что они формируют то, как вы используете свой голос. В этом случае некоторые жесты рук могут подойти для индийской музыки, а не для западной”.

Для Келкар различные правила, применяемые к жестам, также служили доказательством чего-то еще: чтобы понимать музыку, нужно думать о том, как она заполняет пространство в комнате.

Мелодии могут иметь разную форму

Музыка воздействует на все наши органы чувств, потому что она многомерна – она воспроизводится в разных режимах. Для Келкар основным режимом является пространственность. Она ссылается на математика Рене Тома, который сказал: “Чтобы что-то понять, нам нужно понять геометрию этого”.

“Я верю, что он прав: все имеет пространственность. Время, которое важно в музыке, является хорошим примером. Мы связываем прошлое и будущее с нашим телом – что-то лежит перед нами или позади нас”.

Чтобы лучше понять, как музыка воспринимается пространственно, Келкар провела несколько экспериментов. В одном из них она попросила участников несколько раз прослушать одно и то же музыкальное произведение и нарисовать или объяснить, что они визуализировали в своем сознании.

“Люди часто воспринимают определенные формы или используют метафоры движения. Несколько участников описали или нарисовали музыку как волну, которая проходила мимо них — как звуковые волны или линию электрокардиограммы”, – объясняет она.

“В то время как другие визуализировали круг, особенно если они замечали, что один мотив в мелодии постоянно повторяется”.

В другом эксперименте она попросила участников двигать руками таким образом, чтобы они чувствовали, что это соответствует музыке. Она все задокументировала, используя технологию отслеживания движений для поиска закономерностей.

“Некоторые участники пытались нарисовать контуры музыки, идущие вверх или вниз. Это отражало высоту звука, но также и другие характеристики музыки – тембр, мотивы и закономерности”.

Выражение лица влияет на звуки, которые мы слышим

Тот факт, что наш мозг устанавливает связь между тем, что мы видим, и тем, что мы слышим, уже изучался исследователями языка.

“Это наблюдается как лингвистический феномен, в том числе явление, которое называется эффектом МакГарка”, – говорит Келкар.

Эффект МакГарка заключается в том, что мы слышим что-то среднее между тем звуком, который в действительности звучит, и тем, как его выражает лицо. Классический пример этого – когда мы слышим, как произносится буква “B”, но при этом видим лицо, выражающее букву “G”, то в конечном итоге услышим букву “D”.

Келкар недавно со своими коллегами Бруно Лаенгом и Сарджо Куятехом провела исследование, целью которого было выяснить, происходит ли то же самое, когда мы поем:

“Мы на самом деле нашли признаки, указывающие на то, что выражение лица певца влияет на то, как люди воспринимают мелодию. Интервал между двумя тонами может звучать по-разному, если меняется мимика певца”.

“Шазам” для движений

Подобно тому, как мелодия и ритм позволяют нам распознавать музыку, формы, которые мы ассоциируем с мелодией, могут помочь нам в том же самом. В своем исследовании Теджасвини Келкар снабдила искусственный интеллект различными задокументированными движениями, полученными в результате ее экспериментов, что позволило искусственному интеллекту использовать движения для распознавания музыки. Эта технология может быть использована для разработки новых инструментов.

“Представьте себе технологию, похожую на приложение для распознавания музыки “Shazam”, но представьте, что оно сканирует движения, а не звуки. Если бы вы сделали жест, соответствующий поздравлению “С днем рождения”, такое приложение могло бы найти для вас песню”.

Хотя эта технология относительно новая, поиск мелодий на основе контуров – старая идея. В 1975 году Денис Парсонс опубликовал свой “Справочник мелодий и музыкальных тем”, в котором он каталогизировал около 15 000 классических произведений на основе их мелодических контуров – того, как высота звука движется вверх и вниз. Таким образом идентификация музыки по ее контурам называется “Кодом Парсонса”.

Также Метод Келкар похож на другие инструменты, доступные в Интернете. “Например, сегодня у нас есть сайт musipedia.org, который позволяет искать музыку на основе ее контуров”, – говорит она.

Слушатели меняют музыку

Звук, текст и пространство – вот некоторые из режимов, включенных в музыку. То же самое относится к действиям или просто размышлениям о них.

“Если вы визуализируете танец, музыка, которую вы слышите, вероятно, будет звучать иначе, чем если бы вы этого не делали”.

Исследовательница музыки также подчеркивает то, как мы воспринимаем концерты, и что сильно изменилось за многие годы.

“Существуют музыкальные жанры, когда люди сидят спокойно и почтительно слушают, но это что-то новенькое, потому что многие из наших классических композиторов создавали музыку для танцев. Теперь мы играем мазурки и менуэты в концертных залах, а зрители сидят и почтительно смотрят на музыкантов. То же самое относится и к джазу, который был жанром клубной музыки, предназначенным для того, чтобы люди танцевали”.

Она указывает, что это говорит о чем-то фундаментальном в многомерности музыки.

“Ваше восприятие музыки формируется тем, что вы видите и делаете, но также верно и обратное: то, что вы делаете, повлияет на музыку”.

Поделиться ссылкой