多尺度方法结合卷积神经网络的行为识别

来源：计算机工程与应用杂志2019年第2期北京时间：

作者：盖 赟1，荆国栋2

单位：1.中国社会科学院大学 计算机教研部，北京 100089；2.中国气象局气象干部培训学院 远程教育中心，北京 100081

摘要：为了同时计算行为序列样本在时间和空间的特征，提出了一种基于包含多尺度卷积算子的卷积神经网络识别模型。首先通过叠加的方式将序列样本中的骨骼向量信息整合为一个行为矩阵，然后将矩阵输入识别模型。为了挖掘具有不同邻接关系的骨骼点在描述人体行为时的作用，将卷积神经网络各层中的卷积算子拓展为多尺度卷积算子，并使用该网络得到的特征进行分类。实验在MSR-Action3D数据集和HDM05数据集获得较好的识别率。

关键词：行为识别,时空特征,深度卷积神经网络,深度学习,行为矩阵