基于视觉技术的工业机器人手势识别技术研究  

作　　者：温成卓[1] 郭俊梅[1] 刘栋[1] 

机构地区：[1]云南机电职业技术学院,云南昆明650203

出　　处：《南方农机》2024年第S01期188-191,198,共5页

基　　金：云南省教育厅科学研究基金项目“基于深度学习的手势识别与运动跟踪人机交互系统的开发与研究”(2022J1348)。

摘　　要：基于手势的人机交互模式具有易于掌握、交互灵活等优势,应用前景广阔。文章研究了基于智能视觉的手势识别技术,并将识别结果转换为工业机器人的控制代码,实现对机器人动作控制。对深度学习SSD模型进行了优化,对手势图像进行特征匹配,提取图形边缘特征作为模板用于手势形状识别。构建了由相机、PLC、机器人、计算机、HMI组成的工业通信网络,采用Modbus/TCP通信协议实现了智能视觉系统、PLC和工业机器人的数据互传,编制PLC控制程序用于实现依据视觉手势识别结果控制机器人运动。实验结果表明,视觉学习模型有效,手势识别正确率高。环境光照强度影响视觉识别正确率,可通过提高补光灯亮度和增加相机曝光时间提升环境光照强度,进而提升手势识别正确率。构建的控制系统可以准确依据手势识别结果控制工业机器人完成对应的运动动作。

关 键 词：工业机器人 视觉 手势识别 工业网络 PLC 

分 类 号：TP241.2[自动化与计算机技术—检测技术与自动化装置]