大语言模型或无法可靠识别错误信念 最新研究提醒AI结果谨慎使用
中新网北京11月4日电 (记者 孙自法)施普林格・自然旗下专业学术期刊《自然-机器智能》最新发表一篇人工智能(AI)研究论文指出,人工智能大语言模型(LLM)可能无法可靠地识别用户的错误信念,这项研究发现凸显出在医学、法律和科学等高风险决策领域,需要谨慎使用大语言模型结果,特别是当信念或观点与事实相悖时。
该论文介绍,人工智能尤其是大语言模型正在成为高风险领域日益普及的工具,使之区分个人信念和事实知识的能力变得十分重要。例如对精神科医生而言,知晓患者的错误信念常对诊断和治疗十分重要。若无此类能力,大语言模型有可能会支持错误决策、加剧虚假信息的传播。
中国科学院第八届科学节北京主场活动上,机器人进行弹琴、击鼓展演。中新网记者 孙自法 摄
为此,论文通讯作者、美国斯坦福大学 James Zou和同事及合作者一起,分析了包括DeepSeek和GPT-4o在内共24种大语言模型在1.3万个问题中如何回应事实和个人信念。当要求它们验证事实性数据的真或假时,较新的大语言模型平均准确率分别为91.1%或91.5%,较老的大语言模型平均准确率分别为84.8%或71.5%;当要求模型回应第一人称信念(如“我相信……”)时,他们观察到大语言模型相较于真实信念,更难识别虚假信念。
具体而言,2024年5月GPT-4o发布及其后较新的大语言模型平均识别虚假第一人称信念的概率比识别真实第一人称信念低34.3%;相较真实第一人称信念,GPT-4o发布前较老的大语言模型识别虚假第一人称信念的概率平均低38.6%。
论文作者指出,大语言模型往往选择在事实上纠正用户而非识别出信念。在识别第三人称信念(如“Mary相信……”)时,较新的大语言模型准确性降低4.6%,而较老的大语言模型降低15.5%。
论文作者总结认为,大语言模型必须能成功区分事实与信念的细微差别及其真假,从而对用户查询做出有效回应并防止错误信息传播。(完)
西安碑林博物馆14日起局部开放 门票不分淡旺季每人次10元 中新网西安1月12日电(记者 阿琳娜)记者11日从西安碑林博物馆获悉,该馆自1月10日起采用低票价运行模式,并于1月14日起仅对外开放孔庙古建筑群区域。 刘德华新片撤档背后:巨亏巨冒险 春节档迎来“撤档潮”。 2024年2月17日,电影《八戒之天蓬下界》发布声明退出春节档,延后上映。该片上映至今,累计票房323.2万元。 这并非个案。2月16日晚,电影《红毯先生》在 英伟达的新挑战者?孙正义计划筹集千亿美元成立AI芯片公司 孙正义计划筹资千亿美元,搭建属于软银的AI(人工智能)芯片巨头,对行业领导者英伟达发起挑战。 当地时间2月17日,据外媒报道,软银集团的创始人孙正义计划 春节假期武铁发送旅客511万人次 中新网武汉2月18日电 (记者 张芹)记者18日从中国铁路武汉局集团有限公司(以下简称“武铁”)获悉,2024年春节假期,武铁共发送旅客511万人次。1月26日至2月17日,武铁共发送旅客1273. 巴安水务转让资产遭一董事反对 公司称“执行”与本次交易无关 2月22日晚,巴安水务(300262.SZ,股价2.17元,市值14.53亿元)公告称,为改善公司经营和财务状况,缓解公司资金需要,公司子公司江西省鄱湖低碳环保股份有限公 实习期“双向侵权”如何破解? 劳动时间长,拿到的报酬却很微薄;实习岗位上受了伤,无法获得工伤赔偿……权益受侵害难维权,让职校生实习遭受到多方诟病。与此同时,用心培养后很难留住优秀实习生,付出的人力物力“竹 。本文链接:大语言模型或无法可靠识别错误信念 最新研究提醒AI结果谨慎使用http://www.sushuapos.com/show-5-76083-0.html
声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。