17、焊接动作与混合现实、WebRTC技术的研究进展

焊接动作与混合现实、WebRTC技术的研究进展

焊接动作中打瞌睡状态分析

在焊接工作里，打瞌睡状态和注意力姿势的检测极为关键，它关乎着工作的安全与质量。通过对焊接动作的分析，能够有效识别操作人员的状态。

在打瞌睡状态检测方面，有相关的可视化结果。借助对眼睑运动和姿势的识别，可判断操作人员是否处于打瞌睡状态。从实验结果来看，该检测系统具有较高的准确性。例如，在对不同身体朝向（左、前、右）相对于UVC相机的注意力姿势检测中，三种模式的准确率都高达约95%。

这个检测系统具备诸多优势：
- 能够基于目标识别和姿势估计，在焊接过程中进行危险检测。
- 打瞌睡状态检测的可视化结果表明，该系统是行之有效的。
- 可以为初学者和残疾人安全学习焊接技术提供支持。

混合现实空间中多用户虚拟对象共享系统的开发

近年来，混合现实（MR）技术备受瞩目。它能让用户利用MR设备将虚拟对象叠加到真实空间中。研究人员开发了一种虚拟对象共享系统，该系统可使多个用户共享叠加在真实空间中的虚拟对象。

系统配置

在这个系统中，多个佩戴Microsoft Holens2的用户可以在真实空间中放置虚拟对象并进行共享。同时，用户之间还能通过语音通话进行交流。虚拟对象的位置、大小和方向等信息可以在多用户之间共享，并且可以对其进行替换和颜色更改操作。

虚拟对象的放置与删除

• 放置 ：用户通过虚拟菜单选择要放置的虚拟对象，所选对象会出现在用户前方。用户还可以通过手势抓取来改变虚拟对象的位置、大小和方向，借助Hololens