基于可穿戴式多模态人机接口的机械臂运动控制方法OA北大核心CSTPCD

现有的人机接口系统存在指令较少、操作困难、任务能力受限等问题,无法有效拓展到机械臂的多维运动控制。本文提出了一种基于可穿戴式多模态人机接口的机械臂运动控制方法。该方法结合用户的眼电、头部姿态和语音等多模态信号,将其转换成控制指令,从而实现对机械臂在任意角度下的2维和3维连续运动控制。由10名受试者完成了指令输出、2维目标跟踪、字母书写和3维物体抓取等测试。结果显示,系统利用眨眼动作生成指令的平均准确率为96.67%,平均响应时间为1.51 s,平均信息传输率为142.53 bit/min,平均误报率为0.05次/分钟。此外,系统在2维平面沿2条不同路线跟踪目标的均方根偏差分别为0.12和0.14(归一化),抓取3维物体时的平均轨迹效率为92.65%,系统的控制效果与手动控制效果相当。实验结果验证了利用该多模态人机接口实现机械臂高效运动控制的可行性以及它在上肢运动功能辅助方面的应用潜力。