为什么“看嘴型”也会听错话?科学家画出了一张“嘴型词网络”
有时候在嘈杂环境里,你会不自觉地看对方嘴巴来“猜他说了什么”。但奇怪的是,即使盯着嘴唇看,我们还是很容易看错——比如把“bat”看成“pat”。为什么明明看得很清楚,大脑却还是容易“误读”?这项研究就专门研究了这种现象。
研究者提出了一个新概念叫“visome”(可以理解为“嘴型词网络”),用网络科学的方法,把“看起来相似的单词”连接在一起,建立了一张视觉语言的关系图谱。结果发现,很多单词在嘴型上其实是“长得一样”的,比如某些发音对应同一类“视位(viseme)”,导致一个嘴型可能对应多个词。分析两组唇读错误数据后,研究发现:使用频率高的词更容易被误判;而那些“外观相似的词(viseme twins)”越多,它就越难被准确识别;同时,如果一个词在这个网络里“邻居”很多(即和很多词只差一个嘴型变化),人就更容易看错。甚至错误往往集中在“同一个小圈子”里——也就是视觉上相似的一组词之间互相混淆。
这项研究说明,唇读并不是简单地“看到什么就是什么”,而是受到大脑中“视觉语言网络结构”的限制。对普通人来说,这意味着:即使专心看嘴型,也不可能100%准确理解语言;对听力障碍人群或AI唇读技术来说,这类研究能帮助设计更好的辅助工具。不过要注意,这项工作主要基于英语词汇和数据库分析,人类真实交流中还会受到语境、表情等多种因素影响,因此结论不能简单推广到所有语言和场景。
📖The Journal of the Acoustical Society of America
📃The visome: Using cognitive networks to examine lip-reading errors in English words
🗓2026-06-23
#唇读 #视觉语言 #visome #语言网络 #认知科学
Via:提前退休卡皮🐟
🧬 频道 | 🧑🔬 群组 | 📨 投稿
有时候在嘈杂环境里,你会不自觉地看对方嘴巴来“猜他说了什么”。但奇怪的是,即使盯着嘴唇看,我们还是很容易看错——比如把“bat”看成“pat”。为什么明明看得很清楚,大脑却还是容易“误读”?这项研究就专门研究了这种现象。
研究者提出了一个新概念叫“visome”(可以理解为“嘴型词网络”),用网络科学的方法,把“看起来相似的单词”连接在一起,建立了一张视觉语言的关系图谱。结果发现,很多单词在嘴型上其实是“长得一样”的,比如某些发音对应同一类“视位(viseme)”,导致一个嘴型可能对应多个词。分析两组唇读错误数据后,研究发现:使用频率高的词更容易被误判;而那些“外观相似的词(viseme twins)”越多,它就越难被准确识别;同时,如果一个词在这个网络里“邻居”很多(即和很多词只差一个嘴型变化),人就更容易看错。甚至错误往往集中在“同一个小圈子”里——也就是视觉上相似的一组词之间互相混淆。
这项研究说明,唇读并不是简单地“看到什么就是什么”,而是受到大脑中“视觉语言网络结构”的限制。对普通人来说,这意味着:即使专心看嘴型,也不可能100%准确理解语言;对听力障碍人群或AI唇读技术来说,这类研究能帮助设计更好的辅助工具。不过要注意,这项工作主要基于英语词汇和数据库分析,人类真实交流中还会受到语境、表情等多种因素影响,因此结论不能简单推广到所有语言和场景。
原来嘴巴也有“撞脸词”😂
📖The Journal of the Acoustical Society of America
📃The visome: Using cognitive networks to examine lip-reading errors in English words
🗓2026-06-23
#唇读 #视觉语言 #visome #语言网络 #认知科学
Via:提前退休卡皮🐟
🧬 频道 | 🧑🔬 群组 | 📨 投稿