《机器人杂志》发表论文赏析
作者:贾迪, 杨柳, 徐驰, 何德堃
摘要:在融合人体姿态的多个可行解时现有方法没有充分学习假设间的依赖关系,易导致融合结果精度不高。为此,提出了一种融合双层语义信息的3维人体姿态估计网络。首先,提出一种层次特征提取模块,对人体关节点的内在结构信息进行建模,提取包含不同层次语义信息的假设特征,同时提高关节点位置信息的利用率;其次,为进一步提高网络性能,设计特征细化模块对假设特征进行自我信息传递,以增强关节点间位置的关联性;最后,提出一种层次特征融合模块及关联计算子模块,学习多假设特征间的依赖关系,并根据该关系在假设特征间进行跨假设信息传递,使其融合为一个精准的假设特征,以此充分利用不同假设的不同层次语义信息来获得最终的3维人体姿态估计结果。分别在Human3.6M、MPI-INF-3DHP以及HumanEva-I数据集上验证所提模型的表现,实验结果表明,本方法能提高3维人体姿态估计的准确性,且可有效应对人物自遮挡及姿势复杂等情况。
关键词:3维人体姿态估计, 多假设融合, 层次特征提取, 特征细化