近日,中国科学院合肥物质科学研究院研究团队开发出新型AI医疗诊断系统MultiXpert。该系统能够在“零样本”条件下对胸片进行智能诊断,无需任何标注数据,甚至可识别出从未见过的疾病,使AI具备更接近医生诊断思维的能力。
胸片是临床常用的影像学检查手段之一,但人工判读耗时且依赖专家经验。传统AI系统在一些任务上能够媲美专家,却依赖大量人工标注数据,难以应对新发疾病或不同医院之间的数据差异,导致模型泛化能力有限,无法满足复杂临床环境下精准诊断的需求。
研究团队提出了多模态双流协同增强的新思路,构建了无需额外标注数据即可实现零样本高精度诊断的胸片智能分析系统。该系统能够同时处理图像与文字信息,并利用大语言模型和放射科专家知识优化病灶描述,实现图像与语言的深度融合。这一成果让AI在未见疾病中也能“看懂”胸片,其思考逻辑更趋近于专业医生的水平。
在图像分支中,通过引入病灶感知掩码机制,MultiXpert能够在无显式标注情况下提升对潜在病灶的特征表达能力;通过分层记忆矩阵实现全局解剖信息与局部病灶特征的动态平衡,提升模型对复杂影像的结构化理解能力。在文本分支中,联合大语言模型与临床专家知识,MultiXpert能够对疾病描述进行语义校准与结构化重构,生成同时具备解剖精准性与临床标准化的病理描述文本,增强医学语义的表达一致性。通过跨模态语义对齐模块实现多粒度信息的互补融合,提升了模型在零样本条件下的病灶识别与诊断性能。实验结果显示,MultiXpert在四个单标签公共数据集上平均AUC提升达7.5%,在零样本场景下较主流视觉语言模型平均提升3.9%。
这一研究为胸片零样本智能诊断提供了新的技术路径,为医学AI从“依赖标注”迈向“自主理解”提供了新范式。
相关研究成果发表在Information Processing and Management上。研究工作得到国家自然科学基金等的支持。
论文链接
多模态双流协同增强模型MultiXpert结构示意图
区域简况 湖北鄂州历史悠久,常住人口107万,是古铜镜之乡,也是驰名中外的“武昌鱼”的原产地。近年来,鄂州市全面加强党对教育事业的领导,建设“生本课堂”、建立“一生一导师”,打造“明、 今年以来,该校深入推进“一校一品”建设,以排球运动促进学校“五育”融合发展,通过社团活动、班级联赛等形式,让学生们感受排球运动魅力,培养团队意识和拼搏精神,促进体质健康发展。(中国教育报-中 中国教育报-中国教育新闻网北京11月11日讯(记者 林焕新)学前教育法明确“幼儿园应当把保护学前儿童安全放在首位”。实践中如何落实?在今天教育部举行的新闻发布会上,教育部基础教育司司长田祖荫 中国教育新闻网讯(记者 李小伟)11月4至5日,第二届山东省幼儿体育大会在风景秀丽的临沂奥体公园体育馆举办。临沂市幼儿体育试点园优选体育游戏展示;各显神通、力拔山河、腰旗橄榄球、手球等试点 “欢迎小主人回家。天黑了,已经为你打开客厅灯光和空调,电视正在播放你喜欢的新闻联播……”“老师快看!‘小飞’和我互动了!”在天津益中学校的人工智能实验室里,学生们在老师的指导下操控平板电 ◎摘 要 军工文化是国防科技工业系统在长期的建设与发展过程中形成的宝贵精神财富。作为中国特色社会主义文化的有机组成部分,军工文化既是军工特色高校上好“大思政课”的“活教材”,也是“ 。本文链接:研究开发出新型AI医疗诊断系统http://www.sushuapos.com/show-12-2097-0.html
声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。