基于ResNet50与卷积稀疏表达的红外与可见光图像融合算法

来源：计算机应用与软件杂志2024年第5期北京时间：

作者：邵大光, 邵现振, 刘鹏, 赵闯, 陶青川

摘要：提出一种基于ResNet50神经网络与卷积稀疏表达的红外与可见光图像融合算法。通过低通滤波将红外与可见光图像分解成基础层和细节层;运用卷积稀疏表达对基础层进行处理得到新的基础层，使用ResNet50神经网络对细节层进行特征提取，对得到的特征图进行L1正则化和最大选择策略得到最大权重层，经过权重分配得到新的细节层;对新的基础层和细节层进行重建，得到融合图像。该算法针对基础层和细节层提出了新的融合策略，并且能较好地保留细节信息和结构信息。实验结果表明，该算法在主观和客观指标证明上优于对比算法。

关键词：图像融合, ResNet50, 卷积稀疏表达, 红外图像, 可见光图像