特征级监督的毫米波雷达和视觉融合的目标检测

来源：电讯技术杂志2025年第4期北京时间：

作者：黄晓红,何卿,田子然

单位：(1.华北理工大学 人工智能学院，河北 唐山 063000; 2.河北省工业智能感知重点实验室，河北 唐山 063000)

摘要：针对毫米波雷达和视觉传感器融合算法在特征融合层面缺乏有效监督的问题，提出了一种引入激光雷达监督的多模态融合三维目标检测算法（Radar and Camera Fusion Based on Lidar Supervision，LRCFusion）。该算法首先分别提取视觉传感器、激光雷达和毫米波雷达各自的数据特征；接着使用知识蒸馏的方法，利用激光雷达特征作为教师模型监督毫米波雷达特征，以提升毫米波雷达特征的表达水平；然后引入注意力机制实现毫米波雷达和视觉特征融合，并采用基于点云的三维物体检测方法对融合的特征进行目标检测和3D锚框预测；最后，使用预测的3D锚框更新融合前的3D参考点。与基线算法进行比较，所提算法的平均精度提高1.2%，归一化检测得分提高1%。

关键词：毫米波雷达；目标检测；特征级监督；激光雷达；视觉传感器；

基金资助：国家科技部重点研发专项(2017YFE0135700)；深圳市科技创新委员会项目（JCYJ20210324120002007）；广东省科技厅先进智能感知技术重点实验室科技计划项目（2019B121203006）