《电子测量技术杂志》发表论文赏析
作者:周晨菡,许晓阳,魏伟
单位:西安科技大学人工智能与计算机学院 西安 710054
摘要:针对遥感图像在跨模态检索任务中存在图像冗余信息干扰、多尺度信息提取不足、全局与局部信息无法有效融合导致的检索精度较低等问题,提出一种适用于多尺度任务的遥感图文检索模型IGMR。首先,设计多维感知增强卷积模块MFE,提取局部信息的同时过滤冗余特征,并通过融合多注意力模块来关注图像高频信息,提升特征表达能力。其次,设计多尺度分块注意力网络RFPA,捕获不同尺度的上下文信息。随后,构建自适应特征融合模块AFFM,将提取到的全局与局部特征进行动态融合,增强对高质量信息的关注。在公开数据集RSICD和RSITMD上的实验结果表明,提出的IGMR方法在遥感跨模态检索任务中,平均召回率mR分别提高了1.83%、3.21%,检索精度达到了19.73%和31.83%,总体检索性能显著提升。
关键词:遥感图像;跨模态检索;多维感知增强卷积;多尺度空洞卷积;自适应特征融合;多注意力机制
基金资助:国家自然科学基金(12071367)、西安科技大学优秀青年基金(2024YQ2-08)项目资助