阅读我的嘴唇：在语音感知中使用多种感官（视频）

当有人跟你说话时，你会看到他们在说什么吗？我们倾向于将言论视为我们所听到的言论，但最近的研究表明，我们使用各种感官进行语音感知 - 大脑将言语视为我们听到的东西，看到甚至感觉。在一个新的报告中心理科学当前方向心理学家劳伦斯·罗森布鲁姆描述了一项研究，该研究考察了我们的不同感官如何融合在一起，以帮助我们感知语言。

我们通过视觉线索接收很多语言信息，比如唇读，这种视觉语言在所有文化中都存在。这不仅仅是来自嘴唇的信息——当有人和我们说话时，我们也会注意到牙齿、舌头和其他非口腔面部特征的运动。人类的语言感知很可能已经进化到将多种感官整合在一起。换句话说，演讲不仅仅是要被听到，还要被看到。

McGurk效果是我们在与我们交谈时所看到的和我们听到的内容之间的整合的详细榜样。当具有显示出不同声音的脸部的视频被称为脸部时，发生这种现象时发生这种现象。例如，音频可能正在播放“ba”，而脸部看起来好像在说“va”。当面对这一点时，我们通常会听到“VA”或两个声音的组合，例如“da”。有趣的是，当学习参与者了解配音或被告知仅在音频上集中注意力时，麦基克效果仍然发生。Rosenblum表明这是一旦感官集成在一起，就不可能将它们分开。

最近的研究表明这种集成在语音过程中非常早期发生，即使在音素之前（语音的基本单位）建立。Rosenblum表明语音的物理运动（即，我们的嘴巴和嘴唇移动）产生具有类似形式的声学和视觉信号。他认为，就语音大脑而言，听觉和视觉信息永远不会是真正分开的。这可以解释为什么我们如此容易地整合语音，并以这样的方式，使得音频和视觉语音信号彼此无法区分。

Rosenblum得出结论，视觉-言语研究具有一系列临床意义，特别是在自闭症、脑损伤和精神分裂症领域，“这些领域的康复项目都包含了视觉-言语刺激。”

资料来源:心理科学协会

---

---