重庆理工大学学报(自然科学) ›› 2020, Vol. 34 ›› Issue (3): 128-136.doi: 10.3969/j.issn.1674-8425(z).2020.03.019

• 智能技术 • 上一篇    下一篇

基于语义分割与脑机接口的机械手抓取方法研究

巢娅,肖南峰   

  1. 华南理工大学计算机科学与工程学院,广州510006
  • 收稿日期:2019-03-22 出版日期:2020-04-14 发布日期:2020-04-14
  • 作者简介:巢娅,女,硕士,主要从事智能机器人研究,Email:imcy1994@163.com;通讯作者肖南峰,男,博士,教授,主要从事智能机器人研究,Email:xiaonf@scut.edu.cn。
  • 基金资助:
    国家自然科学基金资助项目(61573145);广东省自然科学基金资助项目(2015A030308018)

  • Received:2019-03-22 Online:2020-04-14 Published:2020-04-14

摘要: 对生产环境中的未知物体进行抓取是仿人机械手执行各种复杂任务的基本能力之一,针对抓取目标进行自动识别定位、如何控制机械手完成平稳和准确的物体抓取等机器人控制领域亟待解决的关键问题,提出将5指型仿人机械手作为机械臂的末端抓取器,改进语义分割神经网络ENet(efficientneuralnetwork)应用于抓取目标的识别定位。仿真结果显示:其在测试数据集上IoU(IntersectionoverUnion)达到0.92,单张检测时间达到23ms,连接四层神经网络能够从候选区域中有效检测出最优抓取区域。此外,训练神经网络和随机森林指令识别模型识别脑机接口输入的脑电波信号来控制仿人机械手完成抓取,这种方法有效地增加了仿人机械手运动控制的灵活性。

关键词: 仿人机械手, 语义分割, 脑机接口, 抓取方法

中图分类号: 

  • TP241