骨骼平面显示与集成成像手势交互联动系统

来源：计算机工程与应用杂志2023年第19期北京时间：

作者：韦健, 郭校源, 籍风磊, 郭绍源, 胡笑含, 贾勇, 王世刚

单位：1.吉林大学 通信工程学院，长春 130012；2.吉林大学 第一医院，长春 130061；3.吉林大学 护理学院，长春 130021

摘要：基于鼠键控制的医用平面显示不易同时呈现骨骼的多视角空间信息，还存在占用空间和细菌感染的问题；集成成像被普遍认为是发展潜力最大的裸眼三维显示技术。提出一种支持手势交互的平面显示与集成成像联动系统，挖掘Optix和Leap Motion分别在光线投射和精准手势识别方面的实时性，根据虚拟相机阵列的位姿与手势数据之间的数学关系，通过即时的手势指令检测、虚拟相机位姿更迭及显示内容快速渲染，允许观看者利用手势同步调整骨骼二维视图和裸眼三维影像的视角和尺度。实验结果表明，该系统在二维与立体（26视点）画面的屏幕分辨率皆为2?160×1?280的情况下，在单块GTX 1080Ti GPU上的帧率达到36帧/s，有效和流畅的隔空交互、混合联动显示有助于提升骨骼三维可视化的观看体验、感官冲击和实际应用价值。

关键词：集成成像,手势交互,双屏联动,三维医学成像