基于增强现实为肌电信号采集期间的截肢者提供视觉反馈
1. 设备设置
本项目使用的设备如下:
- 戴尔XPS 13笔记本电脑:用于接收来自Myo的数据,并将其发送到HoloLens。
- Thalmic Labs Myo手势控制臂带:可穿戴设备,用于识别手部动作。
- 微软HoloLens:增强现实头戴式设备,用于显示全息手和物体。
- JETech蓝牙迷你键盘:用于校准Myo臂带和重置虚拟场景。
Myo手势控制臂带由八个医疗级不锈钢肌电传感器和一个九轴惯性测量单元(IMU)组成,IMU包含三轴陀螺仪、三轴加速度计和三轴磁力计。该设备通过蓝牙连接到笔记本电脑,能识别5种预定义的手部动作(包括休息位置共6种):握拳、张开手指、向内挥手、向外挥手和双击。
微软HoloLens配备了定制的全息处理单元(HPU),这是一款由台积电制造的28纳米协处理器,拥有24个Tensilica DSP(数字信号处理)核心。此外,它还具备惯性测量单元(IMU),能够识别语音和手势命令。软件是使用Unity 3D平台开发的,该平台可用于构建2D和3D游戏,并将其部署到各种设备上。
2. Myo软件
Myo软件的主要功能是持续接收来自Myo的数据,并相应地修改虚拟手的外观。Myo臂带配有校准工具和实时手势识别算法,但制造商未提供分类器和所用时间窗口长度的相关信息。其算法和软件可直接提供估计的手部姿势。
由于Myo SDK不支持HoloLens使用的通用Windows平台(UWP),因此需要创建一个通道来将Myo数据传输到HoloLens。考虑到应用程序需要实时运行,选择了用户数据报协议(UDP)进行数据传
超级会员免费看
订阅专栏 解锁全文
813

被折叠的 条评论
为什么被折叠?



