什么时候视觉演讲(口感)与听觉语音(声音)不匹配,可以改变感知,并且可以理解完全不同的信息。新的研究提出了一种潜在的机制,解释了这种现象,也称为麦格克效应。
该研究发表在期刊上PLOS计算生物学,详细详细介绍了研究这种感知幻觉的神经科学研究人员使用的算法。
麦格克效应,研究人员揭穿
这项研究可以更好地了解患有语音知觉缺陷的患者,并且也可以用于构建能够理解视觉和听觉语音的计算机。
因为实际上每个人都在长大后才接触到数千个语音示例,所以人的大脑通常具有绘制配对的可能性的能力听觉和视觉演讲而不会受到干扰。此外,人的大脑在对话中选择语音模式,在没有任何努力的情况下获取信息。
“在日常情况下,我们经常面对多个发出听觉和视觉言语提示的谈话者,大脑必须决定是否整合声音和面部的特定组合,”著名的贝勒医学院神经外科教授,研究高级作者Michael Beauchamp博士。
McGurk效应描述了理解消息并非如此自然而来的情况。当受试者感知口腔动作,有时会重叠声音时,大脑会扭曲听到的信息,理解完全不同的声音。同时,当闭上眼睛并且只能感知听觉演讲时,相同的主题会传达正确的信息。
科学家团队还设计了一个算法模型,具有综合的多感官语音感知,其作用于因果推断的原则。当视觉和听觉音节重叠时,大脑将计算出刺激是否来自一个或多个发射器的可能性是否更有可能,并根据这种可能性确定最终感知。
科学家将他们的模型与另一个模型进行了比较,除了整合可用的提示外,这在各个方面都是相同的。模型之间的主要区别在于,第二个模型没有在理解语音中使用任何休闲推断。
“尽管不同受试者报告了虚幻的麦格克感知和不同刺激在唤起它的功效的频率上存在差异,但我们不知道有任何反向麦格克刺激的报道引起了虚幻的感知,如非CIMS模型所预测的。”研究。
许多人遵循的步骤
更好地理解基于人脑通过多种感官感知的信息结合信息的模式,可以帮助提高语音下降的速度,通常是由于衰老引起的。基于这一发现的进一步研究甚至可能导致开发一种可以改善的设备听力整个人的一生。
这项研究还指出:“这些结果很重要,因为语音是人类交流的最重要形式,并且从根本上是多感官,可以利用说话者脸上的视觉信息和说话者的声音中的听觉信息。”