瞬态场景下基于光流法的红外视频插帧算法研究

来源：机械与电子杂志2024年第04期北京时间：

作者：李文波;王玉;王明泉;商奥雪;丰晓钰

单位：中北大学信息与通信工程学院,山西 太原 030051

摘要：针对现有红外图像插帧方法,在瞬态场景下均不能得到鲁棒性较好的插入帧红外图像,提出了一种基于注意力的多尺度、多分支光流网络,提取相邻 2 帧红外图像光流信息,每个分支分别学习一种光流信息,利用多尺度特征融合模块在每个尺度上聚焦局部重要信息。设计了一个多光流特征重加权模块,根据通道注意力自适应地选择每个光流的特征。经实验结果证明,所提方法可以很好地完成插帧任务,其性能与最先进的方法相比较更具有优越性。

关键词：红外视频插帧;注意力机制;光流;特征融合

基金资助：山西省重点研发计划( 201803D121069 );山西省高等学校科技创新项目( 2020L0624 )