基于深度学习和深度相机的移动机器人抓取方法研究

来源 :长沙理工大学 | 被引量 : 1次 | 上传用户:tangwang1986
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目前,无论是在日常生活还是工业上,自动化技术都在朝着智能化的方向快速发展。智能化的发展离不开智能的算法,也离不开其载体——机器人。拥有一个性能优越的视觉感知系统是机器人的智能化表现之一。近些年,随着计算机性能的提升,大数据以及机器学习技术得到了前所未有的发展,机器学习中的深度学习的方法也为传统机器视觉领域打开了一扇新的大门。尽管深度学习的目标检测算法已经日益成熟,但是将这种理论算法应用于实际机器人上的发展却相对缓慢。论文以移动机器人平台为载体,针对深度学习中的Faster R-CNN目标检测算法进行改进,建立了新的目标检测网络模型,此外,借助于深度相机提供的深度图像信息,实现了目标物体的抓取点定位。最后,在实际移动机器人上完成了指定目标的抓取任务。主要研究内容包括:深度学习中目标检测算法的理论研究;数据集中的标注真实框对训练目标检测网络的影响,并以此设计了自适应数据集的锚框选取算法;改进的Faster R-CNN目标检测网络模型的搭建与训练;以及基于深度相机的抓取点定位与位姿估计。论文首先对10类日常商品:牙刷、牙膏、薯片、饼干、牛奶、可乐、纸巾、洗发水、书、果汁制作了图像数据集,总共包括4000幅图像,每类400幅,其中各类数据集分别以6:4设置了训练集与验证集。在数据集中,各类商品以不同的姿态、角度摆放在不同的光源的场景下,实验表明,这样的数据集能够训练出一个鲁棒性更好的目标检测网络模型。接着,基于目前深度学习领域的主流目标检测方法(YOLO、SSD、Faster R-CNN)分别建立了目标检测网络,并在制作的日常商品数据集上分别训练了3种网络模型,并设计实验探究了它们之间性能的差异。最后,针对论文的数据集以及Faster R-CNN目标检测算法的特点,改进了其区域生成网络部分,并设计了自适应数据集的锚框选取算法,从而形成了改进的Faster R-CNN目标检测算法。训练了 A、B、C、D、E、F、G、H共8组权重模型以进行对比实验,实验表明,论文提出的改进的Faster R-CNN目标检测算法在没有大幅度降低算法检测准确率的基础上明显地减少了 Faster R-CNN目标检测算法的时间开销,从而能更好地达到实时检测的目的。然后,基于深度相机提供深度图像的特点,以改进的Faster R-CNN算法的预测框为基础,结合了深度图与图像处理的方法,对目标物体的几何中心进行定位。并针对深度相机、物体以及移动机器人,建立了各坐标系之间的转换关系,求得了物体上抓取点相对于相机的位姿,用于完成后续的抓取实验。最后,搭建了移动抓取机器人系统,用于验证论文提出的基于深度学习和深度相机的抓取方法的可行性,并进行了 10类日常商品的抓取实验。实验探究了机器人与物体之间的距离对抓取成功率的影响,在10cm到50cm的距离下分别对10类商品各进行了50次抓取实验(共500次),实验结果表明论文提出的抓取方法能够成功地应用于移动抓取机器人,并在距离为30cm时使用权重模型F完成了 431次成功抓取,成功率达86.2%。
其他文献
以钛酸四丁酯为前驱体,采用溶胶-凝胶法在室温下制备了Fe^3+-Ag/TiO2纳米微粒。用Fe^3+-Ag/TiO2做光催化剂,以10mg/L的亚甲基蓝溶液为模型化合物,在紫外光下进行了催化降解实验。结果
【正】Objective To investigate the clinical effect of valvuloplasty on infective endocarditis ( IE) . Methods antimicrobial susceptibility was tested by K - B p
期刊
ECC(Engineered Cementitious Composites)材料具有显著的应变-硬化特性和多缝开裂现象,目前广泛应用于建筑物特殊构件、水电大坝修补和钢桥面铺装。传统的薄层罩面材料缺点显著,阻碍薄层罩面技术的推广应用。本文将ECC材料应用于水泥混凝土路面薄层罩面层,配合早强水泥的使用,该材料在1d龄期抗折强度达到5MPa以上,能够快速开放交通,同时拥有抗冲击性能高,耐磨性能好等特点
本翻译项目节选自欧佩克产油国2017年10月11日发布的官方《欧佩克月度原油市场报告》。此报告主要分析并预测了原油价格走势、大宗商品市场、世界经济以及世界原油供需状况。
按照省委宣传部《关于开展全省基层党员教育阵地建设情况调查的通知》要求,哈尔滨市委高度重视,迅速行动,立即下发了《关于开展全市基层党员教育阵地建设情况调查的通知》,利
目的 通过对一项电针治疗原发性痛经的临床试验的相关数据进行分析,探讨子宫位置与经穴效应的关系。方法 通过超声对每位受试者子宫位置进行评估,采用视觉模拟评分法(VAS)评估
党中央大张旗鼓地抓廉政建设,严肃认真地惩治贪污腐败,各地区各部门都抓了一批大案要案,仅就报刊年披露的案例就是触目惊心、发人深省的,不少相当级别的干部,就是最近几年有
苏云金芽孢杆菌(Bacillus thuringiensis)在生长过程中形成的伴孢晶体具有对农业害虫特异性杀灭功能,农业上利用B.thuringiensis制备微生物杀虫剂。然而逆环境会导致B.thuringiensis芽孢萌发率降低,紫外线导致伴孢晶体失效。目前伴孢晶体在紫外线辐射下活性的提高有文章报道,而针对B.thuringiensis芽孢逆环境下萌发率提升没有报道。芽孢的重新萌发形成营养
目的探讨重点患者风险管理模块在提高临床护士风险意识和风险管理能力,降低护理不良事件发生率中的应用效果。方法运用文献回顾、专家小组会议和现况调查等方法设计重点患者
罗蒙不太一样了!提到罗蒙,首先出现的一定是“老牌男装经典”、“西装王国”、“红帮品质”这一系列关键词。而始创于1978年,作为中国著名服装企业,一直传输“儒雅、正直、向