Your Eyes Can Change What You Hear

你的眼睛能改变你听到的声音

Ross Cline — iLearn.tw

你说的语言,就是你思考的逻辑 — 第二篇

你的眼睛能改变你听到的声音

一个小实验,看看眼睛和耳朵如何合作 — 以及为什么这种合作在每种语言里都不一样。


先试一件事。看看下面这段短视频。第一次,闭上眼睛,只用耳朵听。第二次,睁开眼睛再看一遍。

声音从未改变。你的耳朵也没有动。但你听到的声音可能变了 — 因为第二次,你的眼睛正在帮你听。

🔊 点击视频并打开声音 — 这个体验必须有声音才行。

刚才发生了什么?

这是大脑一个著名的把戏,叫做麦格克效应(McGurk effect)。当我们听别人说话时,用的不只是耳朵。我们还会看他的嘴唇、牙齿、舌头和下巴。然后大脑把听到的看到的混合起来,交给我们一个单一的声音。

大多数时候,眼睛和耳朵是一致的,所以我们从不察觉。但当它们不一致时 — 耳朵听到一个音,眼睛却看到另一个音 — 令人惊讶的事情就发生了。很多时候,眼睛赢了。

1976年的一次幸运意外

这个效应有名字,甚至有出生地。它是在1976年由两位科学家哈里·麦格克约翰·麦克唐纳在英国萨里大学意外发现的。当时他们正在研究婴儿如何学会理解语言。

有一天,一位技术人员把“ba”这个音,配到了一段嘴巴在说“ga”的视频上。当科学家们播放时,两人都听到了第三个音 — “da” — 这个音既不在音频里,也不在视频里。他们的大脑悄悄地把眼睛和耳朵合在一起,造出了一个全新的声音。他们把这件事写成一篇短文,发表在科学杂志《自然》上,标题非常动人:《Hearing Lips and Seeing Voices》(听见嘴唇,看见声音)。此后,科学家们引用这篇论文已超过4,800次

听,并不只是耳朵在做的事。那是你的大脑做出的判断 — 用上它能找到的每一条线索。

有趣的表亲:当大脑听到它所预期

能骗过耳朵的不只是眼睛。你的预期同样可以。英国喜剧演员彼得·凯(Peter Kay)正是用这个想法,做出了他最著名的段子之一。他放一小段大家都熟悉的歌,然后告诉观众错误的歌词 — 于是所有人突然听到的都是那个滑稽版本,而不是真正的歌词。奇怪的地方在这里:一旦你按他说的听到了,就再也听不回正确的那一句了。

彼得·凯,The Tour That Didn’t Tour Tour — 他经典的“听错歌词”段子。

麦格克效应用的是你的眼睛;彼得·凯用的是你的预期。但两者打开的是大脑里同一扇门:我们并不是简单地接收声音 — 我们是在它,用上我们已经知道的一切。听错的歌词甚至有自己的专有名词:mondegreen

为什么这是第二篇

在第一篇里,我们说过你说的语言塑造你思考的方式。第二篇更深一层,也更奇怪一层:你说的语言,还能塑造你感知世界的方式 — 甚至是你的方式。

研究者用来自许多国家的人测试了麦格克效应。他们发现,眼睛与耳朵之间的联系在每个人身上并不一样强。

  • 联系较强:说英语、西班牙语、意大利语、德语、荷兰语和土耳其语的人,往往强烈地感受到这个错觉。他们的眼睛把耳朵拉得很紧。
  • 联系较弱:说汉语普通话和日语的人,常常感受得弱得多。他们的耳朵稳稳地守住了自己。

为什么会这样?科学家仍在研究,但有两个有趣的想法。第一,汉语和日语把大量意义放在声调和音高里 — 这是耳朵必须非常仔细捕捉的信息 — 因此这些听者也许学会了更信任自己的耳朵。第二,围绕目光接触和看人脸的文化习惯,可能也起了作用。

还有一条线索说明这是养成的,而不是天生的。在讲英语的孩子身上,这种眼耳配合在6岁到8岁之间明显变强。在日本孩子身上,它则平稳得多。所以其中很大一部分,是我们成长其中的语言和文化悄悄塑造出来的。

如果你正在学英语,这意味着什么

如果你的母语更依赖耳朵,英语听力可能会显得比实际更难。英语把很多信息藏在嘴唇和脸上。好消息是:你可以训练眼睛来帮忙。

看嘴形:在课堂上看见每个声音的形状

面对面时,每个声音都有可以看见的形状。

看嘴巴。选视频,而不只是音频。在我们的课堂上,老师会特意面对学生,好让他们能看见每一个声音的形状。读唇不是作弊 — 那正是听力流利的人早已在做的事,只是他们自己都没察觉。

需要认识的词

错觉(illusion) — 大脑被骗,感知到实际上并不存在的东西。

知觉(perception) — 大脑理解感官所传达信息的方式。

整合(to integrate) — 把分开的东西混合成一个。

mondegreen — 大家普遍听错的一句歌词或短语。

声调语言(tone language) — 像汉语这样,音高会改变词义的语言。

线索(cue) — 帮助你理解某事的一个小信号。

最后一点想法

我们喜欢相信,听是很简单的事:一个声音进来,我们就知道它是什么。但两个人可以坐在同一个房间里,听同一个声音,却真真切切地听到两个不同的词 — 只因为他们从小说的语言不同。

你的语言不只在你的嘴里。它在你的耳朵里 — 而且,原来它还在你的眼睛里。

第一篇

你说的语言,就是你思考的逻辑

阅读第一篇 →

想和一位真正的老师一起训练你的耳朵眼睛吗?
到 rosscline.com 预约课程 →

自2009年起教授英语
返回博客

发表评论

请注意,评论必须在发布之前获得批准。

Registrations and Appointments