基于深度学习的机器人抓取位姿检测系统研究

来源 :广东工业大学 | 被引量 : 0次 | 上传用户:rongcs
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着“制造强国”战略目标的提出,机器人在各行各业中的应用越来越广泛,尤其在工业生产领域,应用机器人实现自动化生产不仅可以有效解决企业用工荒的难题,还能提高生产效率和产品质量。机器人抓取作为工业机器人的一项重要功能,其传统的实现方法为通过示教编程的方式使机器人按照既定程序重复执行规定的抓取动作,只能实现对摆放位置固定且种类单一的物体进行抓取。为了应对现代工业制造快速多变的特点和满足日益增长的复杂性要求,工业机器人不仅要能够长期稳定地完成重复工作,还需要具备智能化的特性。本文针对工业机器人利用二指夹持器对散乱摆放的多种物体进行抓取的视觉检测场景,对卷积神经网络在多物体抓取规划场景中的应用进行了详细研究,提出一种基于深度学习的物体抓取位姿检测方法,并通过实际检测实验说明本文提出的抓取位姿检测系统的有效性。本文完成的工作主要包含以下几个方面:1.首先对抓取位姿检测系统进行总体方案设计,确定算法处理流程;分析两种不同的硬件平台设计方案的优劣,根据视觉传感器和机器人的具体选型确定本文选用的设计方案为Eye-to-Hand并且针对抓取位姿检测的需求确定控制软件架构设计。2.针对视觉传感器获取的彩色图像与深度图像信息不匹配及配准后边缘区域信息缺失等问题,进行图像配准及修复等预处理;搭建基于SSD框架的物体检测网络模型并以迁移学习的方式进行训练;提出一种抓取位姿图形表示方法,以向量的形式数值化表示抓取位姿,为后续算法计算提供特征基础;然后基于物体的轮廓特征进行候选抓取位姿采样,采样生成的候选抓取位姿均满足距离、方向和力封闭特性等条件。3.对经典残差块结构进行改进,提出两种新残差块结构作为抓取位姿分类网络GPCN的卷积模块,通过对比分析确定优化后的网络结构,其验证集精度对比由经典残差块结构组成的检测网络提高了1.42%,达到98.80%。为了解决输出的抓取位姿结果可能偏离物体重心点等问题,提出一种抓取位姿优化算法,针对不同种类的物体进行相应的优化计算,通过对比实验表明该优化算法的有效性。4.最后为验证抓取位姿检测系统的性能,搭建机器人抓取实验平台,完成相机标定、手眼标定和确定抓取位姿与机器人抓取参数的映射关系等物体定位的相关实验;设计抓取位姿检测实验和机器人自主抓取实验,以不同形状的多种物体作为检测样本进行多次实验,有效抓取位姿检测成功率和实际机器人抓取成功率总计分别为91%和84%,实验结果表明本文提出的抓取位姿检测系统具有一定的可行性及有效性。
其他文献
高中和大学教育是两个相延承的阶段,两阶段的教学质量是相辅相成的,中学化学教学是为大学化学教学打基础,在保证高中教学质量的基础上,才会有较好的大学教学质量。近些年发现,大学无机化学教学效果有些方面有待改进,如:有些大一学生出现兴趣不高、主动性较弱、不适应大学学习习惯等一些不良的现象。从大学生学习过程中出现的问题着手可以发现在中学化学教学和学习过程中出现的漏洞,通过对问题展开研究,提出合适的解决策略,
气动力误差来源复杂,气动力真值通常未知,气动力误差传递数学模型的建立非常困难,因此直接将信息融合技术应用于气动力数据融合目前还不可行。迄今为止,未见气动力数据融合的
电子数据作为一种基于信息技术产生的独立证据种类,在司法实践中发挥着越来越重要的作用。但由于电子数据具有即时性和易损改等特点,导致其固定保全难度较大,另外传统的证据保全程序繁琐被动,难以满足各方对电子数据保全的需求。这就要求一种高效便捷、安全可靠的电子数据保全系统,在保证电子数据证据效力的同时满足当事人的效率要求。由此,第三方存证平台1应运而生,并在司法实务得到了广泛应用。在法学领域研究较多是诉讼中
目的发掘与肺癌相关的特异性miRNA用于肺癌的分型分期和预后判断.方法对47例肺癌患者手术切除的肺癌组织和癌旁正常肺组织用SYBR Green实时荧光定量PCR对miRNA-192进行定量检
<正>加强基层党建工作,是党的全部工作的基础。筑牢基层党建根基,必须抓源头、打基础、补短板,找准基层党建与农村工作的结合点、着力点,充分发挥农村党组织的战斗堡垒作用。
追溯军民融合培养军队人才思想的中国历史起源,梳理党的军民融合培养军队人才的思想演进脉络,对深度拓展新时期军民融合培养军队人才的实践领域,丰富融合要素,提升人才培养效
目的 本研究旨在探讨安氏Ⅱ1 类错软硬组织面型之间的相互关系及软组织覆盖特点。为临床诊断和治疗设计提供指导。方法 选取 11~ 16岁之间的安氏Ⅱ1 类错儿童 12 1名 ,
随着铁路货运能力的逐步提高,制动系统作为保障重载组合列车安全运行的核心部件,保障其正常运行至关重要。由于制动系统是一个结构复杂、模式多变的多层次混合系统,其故障并
使用随机前沿分析(SFA)模型,比较集装箱港口的纯效率值和全效率值,对我国珠三角的5个集装箱港口效率进行实证分析,得出如下结论:港口腹地进出口贸易总额直接影响效率,而不影
目前,社会岗位需求的变化导致高职教育改革的深化,高职领域的专业群建设得到了重视。以专业群建设为导向,建设综合性实训室已经成为各高职院校实训室建设的一项突出的、重要的内