S.假设你在一场音乐会上,一位朋友俯身在你耳边轻声说:“那是什么颜色的音乐?”这似乎是一个奇怪的问题,但对有些人来说,答案是完全不言而喻的,也许你的朋友就是其中之一。这些人患有一种神经系统疾病,称为“声音到颜色的联觉”,或“色觉”,他们在听音乐和其他声音时,毫不费力地自发地体验自己的光显示。1有趣的是,许多嗜铬者在成长过程中认为每个人对声音的视觉反应都是一样的,当他们发现事实并非如此时,他们感到震惊!
色觉是相对罕见的,仅发生在大约1 / 3000个人。尽管如此,还是有相当多的著名视觉艺术家和音乐家属于这一精英群体,包括文森特·梵高、瓦西里·康定斯基、大卫·霍克尼、尼古拉·里姆斯基-科萨科夫、伦纳德·伯恩斯坦和杜克·艾灵顿。康定斯基实际上在创作他的画作时使用了色觉。他写道,对他形成影响的一次经历是听瓦格纳的作品罗恩"我看到了我灵魂中所有的色彩,就在我眼前。在我面前勾勒出了一些疯狂的、近乎疯狂的线条。”
当我们听音乐时,大多数人都没有经历过色光表演。但最近的科学证据表明,许多非联觉者确实有音乐到颜色的关联,类似于嗜色者的跨模态体验。在加州大学伯克利分校(University of California, Berkeley)的实验室里,我们一直在寻找有关联觉者和非联觉者的音乐与颜色对应关系的本质问题的答案。2,3我们的结果令人大开眼界。他们揭示了人类大脑惊人的联想能力,也许最重要的是,强调了情感在我们精神生活中的中心地位。
为了理解我的意思,让我们从一个小实验开始。我邀请你听五个不同的音乐片段,然后选择你觉得最适合每一个的三种颜色。我先不给曲调命名,因为我不想让它影响你选择的颜色。
从下面的例子A开始。点击声音条上的三角形箭头来听示例。听音乐的时候,从左边的一组音乐中选择你觉得最适合的三种颜色,首先选择最好的一种。对每个音乐片段执行相同的步骤。在第五段视频之后,你会看到15个颜色阵列,总结了每个人的选择,包括你的。
例子A来自巴赫的勃兰登堡第二协奏曲。这首歌是大调的,节奏轻快,像跳舞,喇叭独奏在室内管弦乐队的伴奏下跳跃。正如你所看到的,人们选择了各种各样的颜色,但它们在明亮、生动和以黄色为主这一点上有很强的相似性。
实施例B是从相同勃兰登堡协奏曲的不同部分。在这里,小提琴和双簧管贸易在相同的室内乐团小调慢得多的旋律线。我们的参与者选择的颜色是从他们选择了相同组成的另一部分的人明显不同,是更惊人的黑色,灰色和蓝色。
例子C是20世纪90年代BBM乐队的摇滚音乐的器乐节选。它的主要特点是突出的鼓点节奏,快节奏的吉他重复段,和响亮的,高能的声音。选择的颜色与勃兰登堡的两个选段明显不同。在这种情况下,它们主要是红色、黑色和其他深色。
例如D是“easy-listen”音乐,其特点是悠闲的节奏,小调,以及简单的钢琴旋律的安静声音。选择的颜色是柔和的,以各种深浅的蓝色和灰色为主的冷色。
最后,例子E是一首萨尔萨歌曲的节选。这是一首节奏快,充满活力的小调乐曲,以大量的铜管乐器和朗朗上口的鼓和其他打击乐器节奏为特色。颜色绝大多数是红色和其他“辛辣”的颜色,如橙色和黄色。
W.那么,我们要选择我们想要的颜色吗?答案的一个重要部分来自音乐本身的某些特征。大调式中节奏快的音乐,如例子A,往往会引出明亮、生动、温暖的色彩,如强烈的黄色。在小模式中慢节奏、安静的选择,如示例B和D,更有可能唤起更深、灰色、冷色,如蓝色、紫色和灰色的阴影。
节奏快、复杂、充满活力、节奏强劲、声音失真的音乐,如C例,比其他任何一种都更能让人联想到红色和黑色。例如E,它有点不同寻常,节奏快,充满活力,但是小调,有复杂的,独特的,非洲古巴拍。这些特征导致人们选择生动的“辣”颜色,甚至可能被称为“辣”。
正如这些简短的描述所暗示的,决定人们选择颜色最重要的音乐特征包括节奏(从慢到快)、能量(从低到高)、音量(从轻到大声)、调式(从小调到大调)、音调(从低到高)、和声和旋律内容(从辅音到不协和)、复杂性(从简单到复杂)、和扭曲(从清晰到扭曲)。
但还有另一种看待这些选择的方式,一种以情感为中心的方式。考虑一下你如何描述前四首音乐选段的情感特质。粗略地说,例子A听起来快乐而坚强,例子B听起来悲伤而虚弱,例子C听起来愤怒而坚强,例子D听起来平静而有点悲伤。
为什么我们要选择这样的颜色呢?答案的一个重要部分来自音乐本身的某些特征。
如果颜色具有类似的情感特质,人们可能会简单地选择与音乐情感最匹配的颜色。再看一遍颜色排列,看看哪一个看起来最快乐,哪一个看起来最悲伤,哪一个最愤怒,哪一个最平静。我们让参与者对37种颜色中的快乐、悲伤、愤怒和平静进行打分,然后计算出他们对不同音乐片段选择的颜色中每种情绪的平均值。结果显示,A组包含最快乐的颜色,B组包含最悲伤的颜色,C组包含最愤怒的颜色,D组包含最平静的颜色。
这些发现表明,非联觉者通过选择与音乐的情感联系最匹配的颜色来执行音乐到颜色的联想任务。我们计算了一种统计方法,来衡量人们选择的音乐的情绪评级在多大程度上预测了人们选择的最适合该音乐的颜色的情绪评级(反之亦然)。对于我们研究的四个情绪维度——快乐/悲伤,愤怒/平静,强壮/虚弱,活泼/沉闷——相关性极高。他们表明,如果你知道一段给定的音乐听起来有多快乐(或悲伤),你就可以非常准确地预测他们选择的最适合这段音乐的颜色有多快乐(或悲伤)。颜色可能在许多方面有所不同,但它们都倾向于“快乐”的颜色。
我们进一步测试了我们对情绪的直觉,调查了参与者对表达各种情绪的面孔的反应。我们要求参与者再次进行同样的测试,但这次,他们看到的是表达各种情绪的面部照片。我们发现,表情脸的情绪评级——高兴、悲伤、愤怒、平静——与37种颜色的情绪评级之间的相关性非常高。音乐选择的情绪评分和情绪面孔之间也有很强的联系。这些结果进一步支持了我们所发现的从音乐到颜色之间的联系与情感有关的说法。
我们与墨西哥的合作者重复了同样的实验,使用相同的音乐和相同的颜色,以检验音乐与颜色关联的文化差异的本质。墨西哥和美国的研究结果几乎是相同的,在音乐与颜色的关联上,人们的情绪相关度同样高。这些发现表明,在非联觉者中,这种基于情感的映射在跨文化中是强大的,甚至可能是普遍的。
T.非联觉者在音乐到颜色的联想中存在情感效应,这为了解颜色感觉的本质提供了一扇窗。鉴于视觉、听觉、触觉、味觉和嗅觉这五种感官的信号进入人类大脑的不同解剖区域,你可能会问,听觉和视觉体验为何会相互影响。最重要的原因之一就是让我们的大脑整理感觉事件从不同形式对应于相同的活动时我们的眼睛看到玻璃粉碎成碎片注册为撞到了地面的同时,我们的耳朵注册它打破的声音。感官之间的跨模式连接使我们的大脑能够整合并理解一直困扰我们的复杂的多感官输入。
科学家们还没有完全理解颜色感觉背后的生物机制。一些人提出,联觉是由大脑不同感觉区域之间的神经“交叉布线”造成的,比如在色觉的情况下,听觉皮层和视觉皮层之间存在直接的神经连接。4.其他的建议,负责联觉的神经回路都比较复杂,包括在其他脑区,通过活性调解。5,6根据这一观点,听觉皮层的神经活动会引起大脑中其他一些中介区域的激活,而这些活动反过来又会引起视觉皮层的联觉活动。
如果嗜色者表现出与非联觉者相似的情绪影响,这就意味着嗜色感觉更可能依赖于通过调节大脑区域的神经活动,如杏仁核或参与情绪处理的边缘系统的其他结构,而不是听觉和视觉皮层之间的直接联系。(因为这两种可能性并不相互排斥,直接联系和间接联系也有可能同时起作用。)
为了研究联觉体验和非联觉联想之间的关系,我们使用了上述相同的范式。我们在伯克利附近找到了11个在音乐中体验色彩的嗜铬者。我们还测试了11名在年龄、性别、音乐训练和颜色训练方面与联觉者相匹配的非联觉者。
每个人都首先选择了三种颜色供18个:六位分别由巴赫,莫扎特,勃拉姆斯和。唯一的区别是他们的任务。非联觉者选择了“去最好”的音乐色彩,正如您在我们的小实验一样。该联觉者,然而,选择了人的颜色“最相似的,而听音乐的他们经历的颜色。”执行此音乐与颜色的任务后,大家额定每首音乐的选择和每种颜色为他们的情感特质。感兴趣的主要问题是如何的联觉者的选择会与那些非联觉者在他们的情感相关的条款。
下面的图2显示了11名音乐颜色联觉者和11名匹配的对照组参与者对6种古典音乐选择的第一选择:巴赫、莫扎特和勃拉姆斯的三个快速大调音乐选段听起来快乐而强烈,而同一位作曲家的三个缓慢的小调音乐选段听起来悲伤而虚弱。
如你所见,嗜色者报告的颜色与他们的联觉体验最相似(图2B),与非联觉者选择的最适合同一音乐的颜色非常相似(图2A)。节奏快的大调音乐同样产生了生动、明亮、略带黄色的颜色(图2A和2B左侧),而节奏慢的小调音乐同样产生了暗、单调、略带蓝色的颜色(图2A和2B右侧)。
我们还分析了来自联觉者和非联觉者的数据,通过计算音乐的情绪评级与被选为最适合该音乐的颜色的情绪评级之间的相关性,以获得情绪影响的证据。结果显示,非联觉者在所有五个情绪维度上的相关性都很高,在统计上高于概率(图3)。联觉者在快乐/悲伤、主动/被动和强/弱方面的情绪相关性同样高且可靠,但与平静/激动和生气/不生气的概率相比,概率较低且不可靠。
这些结果表明,联觉者表现出他们听音乐的复杂时自发地体验到色彩的情绪影响。他们似乎是强于联觉者在非联觉者对一些情绪。这种相似意味着一些潜在的音乐与颜色联觉的神经机制的被激活的大脑区域这一过程的情感影响。这是联觉者比非联觉者对某些情感维度较弱的事实表明,在听觉和视觉皮层之间的直接神经连接也可以通过稀释其中的一些情绪的影响影响联觉者的色彩体验。
那么,什么颜色是给定音乐作品呢?答案取决于音乐(快/慢,主要/次要,大声/安静,高亢/低调,清晰/变形)和情绪这些功能在听者引起的两个特征。快速,响亮,高亢,音乐的声音搅动,例如,而缓慢,安静,低调的音乐听起来平静。
我们还不完全清楚为什么会这样。但一个有趣的可能性是我喜欢称之为“音乐拟人化”的假设。也许我们认为音乐是一个人表达情感的方式。节奏快、声音大、音调高的音乐可能会让人感觉焦躁不安,因为当人们焦躁不安时,他们的动作会更快,音调和音量都会提高。同样,缓慢、安静、低沉的音乐听起来可能更悲伤或更平静,因为当人们悲伤或平静时,他们的动作更慢,说话声音更低。
目前还不清楚为什么大调音乐对大多数人来说比小调音乐听起来更快乐。音乐神人同形同性论表明,它可能导致歌曲小调“下垂”更多的情感比相同的歌曲主要键,鉴于小范围内的所有标准notes,不同于那些在大范围内是一个半音低,在同一个说话者中,较低的音调发声与悲伤的情感有关。
人类的大脑是发现我们的感官之间的关系令人难以置信的强大,多用途关联引擎。
在有联觉者和非有联觉者中,关于音乐与颜色的联系,最重要的信息也许是情感在我们的精神生活中所扮演的中心角色,即使它并没有立即明显的相关性。音乐和颜色几乎没有共同的感官特性:音乐是听觉的,具有诸如节奏、音调、音色和节奏等特性。色彩是视觉的,具有明度、鲜明度和色相的特性。但是音乐和颜色都映射了情感的各个方面。
色彩有它自己的拟人化形式。红色和愤怒之间的紧密联系可能是因为血液是红色的,这使得愤怒的脸比平静的脸更红。愤怒也会导致暴力,而暴力反过来又会导致流血。从亮黄色到快乐,从深蓝和灰色到悲伤的联系并不清楚,但可能来自人们对不同天气条件的情绪反应。在阳光明媚的日子里,人们通常会感到快乐,因为明亮、温暖、略带黄色的光线;而在阴天里,当光照较暗、灰色、略带蓝色时,人们会感到悲伤。我们经常把抑郁的人说成“心情忧郁”或“生活在阴云之下”。
在我们的生活中,情感将我们与许多不同的事情联系在一起,以至于我们不得不思考它的进化目的。似乎情绪反应将感觉信息引导成倾向于特定行为方式。快乐往往导致接近和参与,悲伤导致退缩和不作为,愤怒导致侵略和暴力,恐惧导致恐惧和逃跑。
我们的实验继续。目前,例如,我们正在研究在土耳其和美国音乐与颜色配协会情绪的影响,用传统的土耳其音乐从西方音乐的不同不仅在乐器使用,但因为它有更多模式(makams),而不是西方的大调和小调。
到目前为止,我们一直对我们的研究结果感兴趣。人类的大脑是一个难以置信的强大的、万能的联想引擎,用来发现不同感官输入之间的系统关系。情绪与我们经历的几乎所有事情都潜在相关,即使这些经历是由大脑不同区域的不同信息引起的。我有一种感觉,当科学家们更全面地研究人们对不同感官输入的反应时,情感在创造综合的、有意义的体验中的重要性将会引起比现在更深刻、更共鸣的共鸣。
斯蒂芬·e·帕尔默(Stephen E. Palmer)是加州大学伯克利分校心理学研究生院的教授。他是本书的作者视觉科学:光子现象,最近的和共同编辑审美学:连接头脑,大脑和经验。
参考文献
1. Cytowic,R.E.,&Eagleman,D.周三是靛蓝色:发现大脑的联觉麻省理工学院出版社(2009)。
2.帕尔默,S.E.,城堡,K.B.许,Z.,与普拉多 - 莱昂,L.R.音乐色彩协会是由情感介导的。美国国家科学院院刊110, 8836 - 8841(2013)。
3.帕尔默,S.E.,朗格卢瓦,T.A。,&宫,K.B.音乐与颜色的关联非联觉者单行的钢琴旋律。多种感觉的研究(2015).
4.德兰,V.S.&哈伯德,E.M.通感,一个窗口,感知,思维和语言。意识研究杂志8.3-34(2001)。
5.细胞,R.E.联觉:现象学和神经心理学。普赛克那2,(1995)。
6.情感介导联觉。认知神经心理学21,761-772(2004)。