基于阶段特征融合的图像融合行人检测

来源：电子测量技术杂志2024年第24期北京时间：

作者：葛荣泽，武一

单位：1.河北工业大学电子信息工程学院 天津 300401; 2.河北工业大学电子与通信工程国家级实验教学示范中心 天津 300401

摘要：目前可见光与红外图像融合行人检测算法中存在特征不平衡与特征融合不充分等问题。针对上述问题，提出一种分阶段特征融合可见光红外图像的行人检测网络MIFNet。构建的双流网络同时处理可见光与红外输入；设计模态间信息融合模块，改变网络的结构减少特征不平衡造成的影响，提取-注入结构在特征提取的过程中自动学习如何提取多模态全局信息并将其有效地注入可见光与红外特征中，提升网络鲁棒性与特征融合效果。设计并嵌入特征增强融合模块，增强两种模态的独特信息，进一步提升特征融合效果。实验结果表明，算法漏检率仅为9.74%，与基线算法相比降低了6%，有效的提升了算法的检测性能。

关键词：行人检测;双流网络;特征融合