基于注意力网络集成的联机空中手写识别研究

来源：计算机技术与发展杂志2024年第10期北京时间：

作者：张墨逸;邢蕾;叶洪昶;陈海燕

摘要：针对联机空中手写识别的数据样本少、模型泛化能力不足、识别率低等问题,提出一种基于注意力网络集成的联机空中手写识别方法。 该方法首先通过在形状特征中融入“联机”的时序特征,构建原始的多维数据;然后对多维融合数据降维投影到三个正交平面上,得到三组投影特征;其次,构建卷积神经网络用于提取视觉特征,同时引入字符嵌入作为图像的类标签,将类标签字符级语义特征通过注意力检测机制与三组视觉特征融合形成三组语义信息丰富的特征图,并基于特征图构建 SoftMax 分类器;最后,通过基于主学习器集成投票方法进行分类与识别。 在两组空中手写数据集与哈工大(HIT-OR3C)联机数据上进行多组实验,在小样本的情况下,该方法识别率优于其他方法,分别达到 95. 68% ,93. 02% ,94. 96% 。 实验结果表明,该方法在小样本数据的情况下,充分发掘联机空中手写数据中有效特征,提高了空中手写识别效率。

关键词：空中手写;联机手写;小样本学习;数据融合;注意力网络;集成学习;手势识别