人类能够对自然界中的物体进行概念化,这一认知能力长期以来被视为人类智能的核心。当我们看到“狗”“汽车”或“苹果”时,不仅能识别它们的物理特征即尺寸、颜色、形状等,还能理解其功能、情感价值和文化意义。这种多维度的概念表征构成了人类认知的基石。随着ChatGPT等大语言模型(LLMs)的爆发式发展,一个根本性问题引起学界关注——这些大模型能否从语言和多模态数据中发展出类似人类的物体概念表征?
近日,中国科学院自动化研究所与脑科学与智能技术卓越创新中心合作,结合行为实验与神经影像分析,首次证实多模态大语言模型(MLLMs)能够自发形成与人类高度相似的物体概念表征系统。这项研究为人工智能认知科学开辟了新路径,更为构建类人认知结构的人工智能系统提供了理论框架。
传统的人工智能研究聚焦于物体识别准确率,却鲜少探讨模型是否真正“理解”物体含义。自动化所研究员何晖光提出,“当前AI能区分猫狗图片,但这种‘识别’与人类‘理解’猫狗的本质区别仍有待揭示。”该团队从认知神经科学经典理论出发,设计了一套融合计算建模、行为实验与脑科学的创新范式。团队采用认知心理学经典的“三选一异类识别任务”,要求大模型与人类在物体概念三元组中选出最不相似的选项。通过分析470万次行为判断数据,团队首次构建了AI大模型的“概念地图”。
该研究在海量大模型行为数据中提取出66个“心智维度”,并为这些维度赋予语义标签。研究发现,这些维度是高度可解释的,且与大脑类别选择区域的神经活动模式显著相关。研究还对比了多个模型在行为选择模式上与人类的一致性。结果显示,多模态大模型在一致性方面表现更优。
进一步,研究发现,人类在做决策时更倾向于结合视觉特征和语义信息进行判断,而大模型则倾向于依赖语义标签和抽象概念。研究表明,大语言模型内部存在着类似人类对现实世界概念的理解。
相关研究成果发表在《自然-机器智能》(Nature Machine Intelligence)上。研究工作得到国家自然科学基金、中国科学院基础与交叉前沿科研先导专项、北京市自然科学基金及脑认知与类脑智能全国重点实验室的支持。
论文链接
代码
数据集
实验范式示意图。a、物体概念集及带有语言描述的图像示例;b-d、分别针对LLM、MLLM和人类的行为实验范式和概念嵌入空间。
金属表面超疏水在自清洁、防腐、减阻和防冰等领域具有潜在的应用价值。当前,金属表面超疏水性能的实现依赖于传统的二元协同设计思想,即在材料表面制作微/纳米结构,进而采用低表面能有机物进行修饰。这种依靠粘附 本报北京11月11日讯(记者 林焕新)11月8日,十四届全国人大常委会第十二次会议表决通过了《中华人民共和国学前教育法》(以下简称“学前教育法”),标志着学前教育步入“有专门法可依”新阶段。今天,教育部召开新闻发布会,解 新华社利马11月14日电 当地时间11月14日,在赴利马对秘鲁进行国事访问并出席亚太经合组织第三十一次领导人非正式会议之际,国家主席习近平在《秘鲁人报》发表题为《让中秘友好之船扬帆远航》的 中国教育报-中国教育新闻网讯(记者 周洪松 通讯员 马利)秋韵正浓时,河北保定市满城区早慧幼儿园里喜气满园,一场别开生面的“二十四节气中医智慧健康教育分享活动”于近日举行。满城区教体局于今 学龄前时期是儿童身心发展的重要阶段,学前教育是国民教育体系的重要组成部分。习近平总书记强调:“要加强对基础教育的支持力度,办好学前教育。”为实现“幼有所育”,规范和促进学前教育发展,满足 党的十八大以来,天津市委、市政府深入学习贯彻习近平总书记关于教育的重要论述,全面落实党中央、国务院决策部署和全国教育大会精神,坚守为党育人、为国育才的初心使命,教育强市建设取得积极进展 。本文链接:研究揭示多模态大模型涌现类人物体概念表征http://www.sushuapos.com/show-12-1253-0.html
声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。
上一篇: 教育部党组理论学习中心组举行集体学习会