基于Leap Motion和Unity3D的虚拟沙画手势识别及交互

来源：计算机工程与应用杂志2017年第24期北京时间：

作者：宁亚楠，杨晓文，韩 燮

单位：中北大学 计算机与控制工程学院，太原 030051

摘要：虚拟仿真技术的快速发展及体感设备的不断更新为沙画动画这一全新的艺术创作形式带来新的灵感。针对沙画现场作画工序复杂的问题，结合Leap Motion设备和Unity3D开发环境完成手势识别并驱动虚拟手实现虚拟沙画效果。首先，依据Leap Motion捕捉到的手势坐标及方向信息提取手部关键点；然后提出角域划分的方法并引入新的特征向量，将其与提取信息串联作为手势分类依据；最后，根据自行定义的沙画手势语义驱动虚拟手完成虚拟沙画创作。实验证明，利用Leap Motion完成近距离手势识别效果较其他方法结果更加精准，实时性较高，手势跟踪稳定，虚拟沙画绘画过程沉浸感强。

关键词：虚拟沙画,角域划分,手势识别,Leap Motion,Unity3D