研究发现语言可动态调控人脑视觉信息处理

来源：《自然·人类行为》

中国研究团队通过比较多模态深度学习模型与人脑在处理视觉信息时的表现，并结合脑卒中患者数据，揭示了语言对视觉处理的主动调控作用。研究发现，能够关联图文信息的CLIP模型比纯视觉模型（如ResNet、MoCo）更贴合人脑枕颞叶皮层（VOTC）的神经活动模式；而脑卒中患者若连接VOTC与语言区（左角回）的白质受损，其脑活动与CLIP模型的相似度会降低，与MoCo模型的相似度则升高。这表明语言系统动态参与了人脑视觉表征的塑造，为构建更类脑的人工智能模型提供了新依据。