融合关键点属性与注意力表征的人脸表情识别

来源：计算机工程与应用杂志2023年第3期北京时间：

作者：高红霞, 郜伟

单位：1.河南工程学院 软件学院，郑州 451191；2.信息工程大学 理学院，郑州 450001

摘要：人脸的表情变化非常细微，通常表现在图像中某些局部点区域的改变，现有的人脸表情识别方法难以捕捉到表情的细微变化，对非表情区域干扰不具有鲁棒性。为了获得描述人脸表情变化的高效特征表示，提出了一种融合关键点属性与注意力表征的人脸表情识别方法。通过添加通道注意力和空间注意力的神经网络提取人脸图像中的关键点信息，实现不同维度和位置的权重分配，有效避免非表情区域的干扰，捕获图像中局部关键点的特征表征。引入Transformer模块学习不同关键点之间的相关联系，引导网络构建对表情类型更具分辨力的特征表示，从而实现精准识别。通过在CK+、JAFFE、FER2013三种公开数据集上进行实验的结果表明：提出算法的识别准确率分别达到了99.22%、96.57%、73.37%。

关键词：人脸表情识别,关键点属性表征,注意力机制,卷积神经网络,学习特征图