与传统光学遥感相比,高光谱遥感图像具有数百个独立光谱波段,能够更精确地识别地表物质。然而,标注样本稀缺长期以来严重制约了其实际应用。现有研究普遍采用少样本学习范式,虽在一定程度上缓解了样本不足的问题,但由于缺乏对跨域光谱信息的一致性约束,加之数据稀缺导致模型规模难以扩展,其跨域泛化能力仍然受限。
针对上述问题,中国科学院西安光学精密机械研究所团队,创新性地提出了一种基于视觉大模型的高光谱少样本分类框架SpectralDINO。该框架通过源域光谱对齐模块统一各数据域的光谱信息,增强模型学习跨域通用特征能力。团队同时设计了一种新型低秩适应(LoRA)模块,并使用交替训练策略对视觉大模型进行微调,通过双混合子空间的设计,解决了原始LoRA无法区分跨域数据的结构性问题。
实验显示,该方法有效提升了模型从少量样本提取特征的泛化能力,提高了模型在高光谱少样本分类任务中的表现,在多个公开数据集上超越现有先进方法并实现了最佳分类准确率,为环境检测、精准农业等遥感应用提供新的技术路径。
相关研究成果发表在《IEEE地球科学与遥感学报》(IEEE Transactions on Geoscience and Remote Sensing)上。研究工作得到国家自然科学基金、陕西省自然科学基础研究计划、陕西省重点研发计划等的支持。
论文链接
SpectralDINO模型框架
不同方法在Pavia University数据集上的分类结果
中新社北京11月7日电(记者梁晓辉)中国人力资源和社会保障部部长王晓萍7日在北京表示,加强高校一流师资引育,重点是加 应秘鲁总统博鲁阿尔特邀请,习近平主席将于11月13日至17日赴利马出席亚太经合组织第三十一次领导人非正式会议并对秘鲁进行国事访问。这是习近平主席时隔8年再次访问秘鲁,也是第二次赴利马出席 中国教育报-中国教育新闻网讯(记者 刘玉)日前,以“筑梦青春志在四方,规划启航职引未来”为主题的辽宁省第二届大学生职业规划大赛正式拉开序幕。大赛旨在加强高校生涯教育和就业指导,增强大学生职 《中华人民共和国学前教育法》(以下简称学前教育法)第七章详细规定了各级政府及有关部门对学前教育在安全管理、收费管理、经费预算、督导问责、质量评估、信息公开等方面的监管责任,为解决实践 中国教育报-中国教育新闻网讯(通讯员 胡宜芳 李婷婷)近日,由中国信息技术教育杂志社主办的第二届全国基础教育数字化论坛暨明德云学堂2024年学术年会在北京国家会议中心举行。来自全国30个省份 ◎摘 要 有文化自信的民族,才能立得住、站得稳、行得远。思政课建设要以中华优秀传统文化、革命文化和社会主义先进文化为力量根基,才能更好地坚定学生的文化自信,厚植思政课的文化底蕴。要遵 。本文链接:基于视觉大模型的高光谱遥感处理研究取得进展http://www.sushuapos.com/show-12-1914-0.html
声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。
上一篇: 反射式超表面产生完美涡旋光束研究取得进展