改进Deeplabv3+的双注意力融合作物分类方法

来源：计算机工程与应用杂志2024年第8期北京时间：

作者：郭金, 宋廷强, 孙媛媛, 巩传江, 刘亚林, 马兴录, 范海生

单位：1.青岛科技大学 信息科学技术学院，山东 青岛 266061；2.青岛科技大学 大数据学院，山东 青岛 266061；3.岭南大数据研究院 时空大数据研究室，广东 珠海 519000

摘要：近年来，卷积神经网络（convolutional neural networks，CNN）在农作物分类研究中不断取得新进展，但在建模长期依赖关系方面表现出一定的局限性，对农作物全局特征的捕获存在不足。针对以上问题，将Transformer引入Deeplab v3+模型，提出了一种用于无人机影像农作物分类的并行分支结构——DeepTrans（Deeplab v3+with Transformer）模型。DeepTrans以一种并行的方式将Transformer和CNN结合在一起，利于全局特征与局部特征的有效捕获。通过引入Transformer来增强图像中信息的远距离依赖关系，提高了作物全局信息的提取能力；加入通道注意力机制和空间注意力机制加强Transformer对通道信息的敏感度及ASPP（atrous spatial pyramid pooling）对作物空间信息捕获能力。实验结果表明，DeepTrans模型在MIoU指标上可达0.812，相较于Deeplab v3+模型提高了3.9%，该模型在五类作物的分类中精度均有提升，对于容易错分的甘蔗、玉米和香蕉三种作物，其IoU分别提高了2.9%、4.7%、13%。由此可见，DeepTrans模型在农作物分类图像的内部填充和全局预测方面有着更好的分割效果，有助于更准确地监测农田作物的种植结构及规模。

关键词：农作物分类,无人机影像,Deeplab v3+,Transformer,注意力机制