近日，中国科学院合肥物质科学研究院研究团队开发出新型AI医疗诊断系统MultiXpert。该系统能够在“零样本”条件下对胸片进行智能诊断，无需任何标注数据，甚至可识别出从未见过的疾病，使AI具备更接近医生诊断思维的能力。
胸片是临床常用的影像学检查手段之一，但人工判读耗时且依赖专家经验。传统AI系统在一些任务上能够媲美专家，却依赖大量人工标注数据，难以应对新发疾病或不同医院之间的数据差异，导致模型泛化能力有限，无法满足复杂临床环境下精准诊断的需求。
研究团队提出了多模态双流协同增强的新思路，构建了无需额外标注数据即可实现零样本高精度诊断的胸片智能分析系统。该系统能够同时处理图像与文字信息，并利用大语言模型和放射科专家知识优化病灶描述，实现图像与语言的深度融合。这一成果让AI在未见疾病中也能“看懂”胸片，其思考逻辑更趋近于专业医生的水平。
在图像分支中，通过引入病灶感知掩码机制，MultiXpert能够在无显式标注情况下提升对潜在病灶的特征表达能力；通过分层记忆矩阵实现全局解剖信息与局部病灶特征的动态平衡，提升模型对复杂影像的结构化理解能力。在文本分支中，联合大语言模型与临床专家知识，MultiXpert能够对疾病描述进行语义校准与结构化重构，生成同时具备解剖精准性与临床标准化的病理描述文本，增强医学语义的表达一致性。通过跨模态语义对齐模块实现多粒度信息的互补融合，提升了模型在零样本条件下的病灶识别与诊断性能。实验结果显示，MultiXpert在四个单标签公共数据集上平均AUC提升达7.5%，在零样本场景下较主流视觉语言模型平均提升3.9%。
这一研究为胸片零样本智能诊断提供了新的技术路径，为医学AI从“依赖标注”迈向“自主理解”提供了新范式。
相关研究成果发表在Information Processing and Management上。研究工作得到国家自然科学基金等的支持。
论文链接
多模态双流协同增强模型MultiXpert结构示意图
近日，在2024年全国数字建筑创新应用大赛总决赛中，华北理工大学师生荣获国家级一等奖1项、二等奖2项、三等奖3项。 印度夏季风（西南季风）是亚洲季风系统的重要组成部分。每年6月左右季风爆发，通过大规模水汽输送为印度半岛贡献超过70%的年降水，影响整个东亚地区的水文状况。然而，季风环流的异常波动会引起旱灾、洪涝及其他极端气候 本报北京11月14日讯（记者 欧媚）记者从今天举行的教育部新闻发布会上获悉，2024年世界职业技术教育发展大会将于11月20日—22日在天津举办。这是全国教育大会后我国首场教育领域的主场外交活动，是贯彻落实全国教育大会 中国教育报-中国教育新闻网讯（记者 方梦宇）记者日前从中国科学技术大学获悉，该校与合肥国家实验室相关研究人员合作，利用激光冷原子方法制备成基于自旋的薛定谔猫态，其寿命达到分钟量级，有助于提升 11月6日，曲阜师范大学举办首期教育家精神思政大课，学校党委副书记、校长张洪海带领同学们走进“校长讲校长——跨越时空的对话”，通过问道、论道、就道、弘道四个环节，在教师博物馆为青年教师和 数学能力是评估个人综合素养的关键维度之一，而小学数学教育具有为学生奠定坚实数学基础的重要作用。小学数学教育要进一步满足学生发展需要，必须打破传统教学的桎梏，让数学学习变得生动有趣，以营 。本文链接：研究开发出新型AI医疗诊断系统http://www.sushuapos.com/show-12-2097-0.html
声明：本网站为非营利性网站，本网页内容由互联网博主自发贡献，不代表本站观点，本站不承担任何法律责任。天上不会到馅饼，请大家谨防诈骗！若有侵权等问题请及时与本网联系，我们将在第一时间删除处理。