当你的眼睛覆盖你的耳朵时:新的洞察力进入McGurk效果

当你的眼睛覆盖你的耳朵时:新的洞察力进入McGurk效果
仍然框架从演员的录影中拍摄了一个简单的音节。人类可以使用他们在谈话者的嘴唇中看到的统计关系以及他们在演讲者的声音中听到的东西,以确定它们的匹配程度。所看到的讲话和听说演讲之间的比赛越好,大脑越依赖两个提示来创造感知。信用:magnotti jf和beauchamp ms,ccby sa

看到并不总是相信 - 视觉语音(嘴巴运动)与听觉语音(声音)不匹配,可能导致完全不同的信息的感知。这种神秘的幻觉被称为McGurk效果。在新研究中,发表于PLO计算生物学,神经科学研究人员创造了一种算法,揭示了对大脑有时会使人类体验中最重要的一方面混淆的原因。

调查结果将有助于理解患者赤字和建筑计算机能够理解听觉和视觉演讲。

“所有人类都长大了数万的言语例子,结果是,我们的大脑包含任何给定对的可能性的全面绘图讲话的声音和言语博士说,贝勒医学院和高级作者的神经外科教授博士博士说,贝勒的博士后研究员。“在日常情况下,我们经常面对多个讲话者发出听觉和视觉语音线索,以及必须决定是否整合语音和面部的特定组合。“

“尽管我们的感官不断被信息轰炸,但我们的大脑毫不费力地选择了从这个Cacophony的对话伙伴的口头和非语言演讲,”Magnotti说。

McGurk效果是何时出错的示例。当看到的嘴巴运动可以覆盖听到的东西时发生,导致一个人会感知不同的声音而不是实际所说的。只有当眼睛关闭时,只有在听到声音时,可以感知正确的信息。例如,视觉“GA”与听觉“BA”相结合导致“DA”的感知。(看http://openwetware.org/wiki/bauchamp:mcgurk_ci_stimuli.举些例子)

Magnotti和Beauchamp能够基于因因果推断的原理来创建一个多思科语音感知的算法模型,这意味着给出了一对特定的听觉和视觉音节,大脑计算它们来自单个讲话者的可能性,并使用这种可能性确定最终的语音感知。

“我们将模型与替代模型进行了比较,除了它总是整合可用的线索,这意味着没有偶然推断语音看法,”Beauchamp说,他也是贝勒的高级MRI核心主任。“使用来自大量科目的数据,具有因果推动的模型更好地预测人类将如何或不会集成视听语音音节。”

“结果表明,在多师语演讲感知期间,大脑中发生了因果推断类型计算的基本作用,”Magnotti说。

研究人员已经了解大脑单独编码听觉语音和视觉语音的方式以及位置,但是该算法在整合的过程中闪烁。它将作为一个指导,突出显示对多用户言语感知至关重要的特定大脑区域。

“了解大脑如何结合来自多种感官的信息将提供洞察力,因为典型的老龄化而甚至是开发可以增强寿命听力的言论的言语感知的途径的洞察力,”Beauchamp说。


进一步探索

阅读我的嘴唇:在语音感知中使用多种感官(视频)

更多信息:Magnotti JF,Beauchamp MS(2016)A因果推断模型解释了McGurk效应和其他不一致的视听言论的看法。PLOS计算BIOL.12(12):E1005229。DOI:10.1371 / journal.pcbi.1005229
信息信息: PLO计算生物学

引文:当你的眼睛覆盖你的耳朵:进入McGurk效应的新见解(2017年2月16日)从Https://medicalXpress.com/news/2017-02-yes-override-earsights-mcgurk.html
本文件受版权保护。除了私人学习或研究目的的任何公平交易外,没有书面许可,没有任何部分。内容仅供参考。
52.分享

反馈到编辑

用户评论