动态视觉手势识别下手工装配时序控制的智能防错方法

来源：计算机集成制造系统杂志2017年第7期北京时间：

作者：尹旭悦,范秀敏,顾岩,汪嘉杰

单位：1.上海交通大学机械与动力工程学院计算机集成制造研究所2.上海市网络化制造与企业信息化重点实验室

摘要：为提高手工装配生产过程的效率,提出一种保证过程时序性的手势视觉识别与防错方法,通过识别信号控制增强现实装配引导系统,减少装配过程中检错和返工消耗的时间。在第一视角下采集手工装配过程的样本视频,用预定时间方法分析单步操作的标准手势和时间序列。在虚拟装配环境中建立了装配操作序列仿真引导模型。用肤色检测获取装配图像的手部区域,定义了区域几何特征并进行概率分布拟合,提取装配手势特征及其识别条件。基于装配动作的时序约束,建立了时序锁定的装配手势识别方法,进而判断装配状态,触发推送、隐藏或更新引导信息。计算机主板装配实例表明,所提出的智能防错方法提高了装配序列的执行效率和一次完成率。

关键词：手势识别,Poka-Yoke,时序控制,手工装配,增强现实

基金资助：国家自然科学基金资助项目(51205328,51405403);教育部人文社会科学研究青年基金资助项目(12YJCZH296);四川省应用基础研究计划资助项目(2014JY0232)。