基于双线性特征融合的皮肤病分类研究

来源：计算机技术与发展杂志2023年第02期北京时间：

作者：黄志伦;';刘俊;';郑萌

单位：1. 武汉科技大学 计算机科学与技术学院,湖北 武汉 430065;2. 智能信息处理与实时工业系统湖北省重点实验室(武汉科技大学),湖北 武汉 430065;3. 武汉理工大学 计算机科学与技术学院,湖北 武汉 430070

摘要：皮肤覆盖肌肉、骨骼和身体的每个部分,是人体中最大的器官。 由于其暴露于外界,所以感染更容易发生在皮肤上。 皮肤病作为一种常见疾病,利用计算机技术对其进行辅助诊断,有助于减轻医生负担。 针对常规卷积神经网络应用于皮肤病图像分类时由于不同种皮肤病图像之间的类间相似性以及同种皮肤病图像之间具有类内差异性导致分类困难的问题,提出一种改进双线性特征融合模型。 使用经过剪枝的 Inception-ResNet-v1 和 v2 版本作为特征提取器并行提取图像特征,对特征进行双线性融合,获取更多阶数的特征信息可以提高模型对图像细节的敏感度。 然后添加额外的软注意力模块,通过加权和的方式进行过滤或者加强,给图像每个位置给予不同的权重以达到对模型的加强效果。 在 skin -cancer-classesisic 数据集上的 7 种皮肤病图像上进行训练,与 S-CNN、MobileNet 和 Incremental CNN 的对比证明了该模型的有效性,在 Precision、Recall 和 F1-Score 指标上该模型均为最优。

关键词：肤病;深度学习;双线性特征融合;注意力机制;图像分类