常识辅助细粒度数据增强方法

来源：计算机工程与应用杂志2024年第6期北京时间：

作者：李华超, 康彬, 王磊

单位：1.南京邮电大学 物联网学院，南京 210003 ；2.南京邮电大学 通信与信息工程学院，南京 210003

摘要：数据增强的代表性研究主要针对ImageNet等常规分类数据集展开。考虑到细粒度识别数据集中测试样本类内及类间关联性与常规分类数据集差异明显，因此针对细粒度识别的数据增强方法尚待深入研究。为此，从细粒度识别任务以及数据集的特殊属性入手提出基于常识辅助的细粒度语义图块混合策略。所提方法利用常识知识挖掘样本标签间潜在关联，以此为基础设计结构化图像混合策略的多支路卷积神经网络结构，使图像混合过程更关注目标的细微差异。通过大量性能测试可验证所提方法的性能明显优于主流的基于图像混合的数据增强方法。同时，通过实验验证，所提出的常识知识有助于多种基于混合图像类的数据增强模型性能提升。

关键词：数据增强,常识图谱,多支路卷积神经网络