大语言模型或无法可靠识别错误信念 最新研究提醒AI结果谨慎使用
中新网北京11月4日电 (记者 孙自法)施普林格・自然旗下专业学术期刊《自然-机器智能》最新发表一篇人工智能(AI)研究论文指出，人工智能大语言模型(LLM)可能无法可靠地识别用户的错误信念，这项研究发现凸显出在医学、法律和科学等高风险决策领域，需要谨慎使用大语言模型结果，特别是当信念或观点与事实相悖时。
该论文介绍，人工智能尤其是大语言模型正在成为高风险领域日益普及的工具，使之区分个人信念和事实知识的能力变得十分重要。例如对精神科医生而言，知晓患者的错误信念常对诊断和治疗十分重要。若无此类能力，大语言模型有可能会支持错误决策、加剧虚假信息的传播。
中国科学院第八届科学节北京主场活动上，机器人进行弹琴、击鼓展演。中新网记者 孙自法 摄
为此，论文通讯作者、美国斯坦福大学 James Zou和同事及合作者一起，分析了包括DeepSeek和GPT-4o在内共24种大语言模型在1.3万个问题中如何回应事实和个人信念。当要求它们验证事实性数据的真或假时，较新的大语言模型平均准确率分别为91.1%或91.5%，较老的大语言模型平均准确率分别为84.8%或71.5%；当要求模型回应第一人称信念(如“我相信……”)时，他们观察到大语言模型相较于真实信念，更难识别虚假信念。
具体而言，2024年5月GPT-4o发布及其后较新的大语言模型平均识别虚假第一人称信念的概率比识别真实第一人称信念低34.3%；相较真实第一人称信念，GPT-4o发布前较老的大语言模型识别虚假第一人称信念的概率平均低38.6%。
论文作者指出，大语言模型往往选择在事实上纠正用户而非识别出信念。在识别第三人称信念(如“Mary相信……”)时，较新的大语言模型准确性降低4.6%，而较老的大语言模型降低15.5%。
论文作者总结认为，大语言模型必须能成功区分事实与信念的细微差别及其真假，从而对用户查询做出有效回应并防止错误信息传播。(完)
英伟达的新挑战者？孙正义计划筹集千亿美元成立AI芯片公司 孙正义计划筹资千亿美元，搭建属于软银的AI(人工智能)芯片巨头，对行业领导者英伟达发起挑战。 当地时间2月17日，据外媒报道，软银集团的创始人孙正义计划 春节假期中国跨区域人员流动量预计超23亿人次 中新社北京2月17日电 (记者 刘文文)17日(正月初八)是中国龙年春节假期最后一天。来自2024年综合运输春运工作专班的最新数据显示，2月10日至17日(农历正月初一至初 作者：秦天宝（武汉大学环境法研究所所长）2023年11月，中央全面深化改革委员会第三次会议审议通过了《关于全面推进美丽中国建设的意见》《关于加强生态环境分区管控的指导意见》等重要文件。习近平 新华社记者付敏、姚雨璘在寸土寸金的厦门岛市区，面积约3公顷的骑马山片区保护区隐匿在林立的高楼大厦中。该保护区设置于2011年，是厦门五缘湾栗喉蜂虎市级自然保护区的重要组成部分——一种 大叔追“鸟”、小伙爱“骆驼”，北面户外业务“群狼环伺” 王涵艺 近日，威富集团(VFC.N)发布2024财年第三季度财报(截至2023年12月30日的三个月内)，集团收入同比下滑16%至29.60亿美元(约合213亿元人民币)，净利润 2023年澳门旅客总消费同比增近三倍 中新社澳门2月22日电 澳门特区政府统计暨普查局22日公布，在入境旅客人次同比上升近4倍的带动下，2023年全年澳门旅客总消费(不包括博彩)比2022年增加近3倍，至712.5亿元(澳门元， 。本文链接：大语言模型或无法可靠识别错误信念 最新研究提醒AI结果谨慎使用http://www.sushuapos.com/show-5-76083-0.html
声明：本网站为非营利性网站，本网页内容由互联网博主自发贡献，不代表本站观点，本站不承担任何法律责任。天上不会到馅饼，请大家谨防诈骗！若有侵权等问题请及时与本网联系，我们将在第一时间删除处理。