用你的眼睛听到 - 西方的言语感知
当你听他们说话时,你看一个人脸的哪些部分?唇部运动会在聆听有人说话时影响来自耳朵的语音信息的看法,但本土日语扬声器大多不受该部分的影响。日本最近的研究揭示了两组人,母语讲师和母语人士之间的大脑网络激活差异,在面对面的声乐通信中。
众所周知,诸如唇部运动的视觉语音信息影响与面对面的人说话时从耳朵中的语音信息的感知。例如,唇部运动可以帮助人们在嘈杂的条件下更好地听到更好。相反,被称为电影内容,其中唇部运动与扬声器的声音冲突,给出了听众的幻觉听到另一种声音。这种错觉被称为“McGurk效应”。
根据先前行为研究的分析,本土日语扬声器不会受到视觉的影响唇部运动尽可能多的英语扬声器。为了进一步检查这种现象,来自熊本大学的研究人员测量和分析了凝视图案,脑波和反应时间,在两组20个母语人士和20名母语扬声器之间进行语音识别。
差异很清楚。当自然语音与唇部运动配对时,母语扬声器在出现任何声音之前将他们的凝视聚焦在扬声器的嘴唇上。然而,日本母语人士的目光并不是固定的。此外,当地语言和视觉提示时,母语英语扬声器都能够更快地了解语音,而当地唇部运动时,本机日本扬声器显示出延迟的言语。
“母语扬声器试图通过使用嘴唇的信息来缩小候选人来缩小候选声音的候选人,在发声之前开始移动几百毫秒。母语日语扬声器,另一方面,他们的重点只是对听证会,以及视觉信息似乎为了需要额外的处理,“熊本大学的Kaoru Sekiyama教授,领导了研究。
熊本大学研究人员随后与札幌医科大学和日本先进电信研究机构国际(ATR)的研究人员使用功能磁共振成像(FMRI)来测量和分析脑激活模式。他们的目标是阐明两种语言之间的大脑活动的差异。
涉及听力和处理视觉运动信息的区域之间的大脑之间的功能连接分别在母语母语的扬声器中更强大,而不是在日本本地扬声器中。这结果强烈建议在英语扬声器大脑中的信息处理的早期阶段相互关联,而关联在日本扬声器大脑中的稍后阶段。听觉与函数之间的功能连接视觉信息并且,两种不同语言扬声器之间的处理两种类型信息的处理方式的方式被证明是清楚的。
“据说,视频材料在研究外语时会产生更好的结果。但是,还有人们亦已报告视频材料对本土日本人没有非常积极的影响扬声器塞基亚山教授说。“这可能是日本人处理音频信息的独特方式,这与我们最近的研究中所示的有关,这是这种现象。”
这些发现在Nature.com杂志中发表科学报告2016年8月11日和10月13日。
进一步探索
J. Shinozaki,N.Hiroe,M. Sato,T. Nagamine,K.Sekiyama等,“语言对视听演讲集成功能连通性的影响”,SCI。代表。,卷。6,不。八月,p。31388,2016年8月。DOI:10.1038 / srep31388。
用户评论