基于卷积神经网络的机器人抓取位姿检测算法研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:sunfor
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
抓取是机器人技术在现实生活中最为常见的表现手段,也是机器人操作中最具挑战性的任务之一,其对于解放人类双手、提高工业生产力具有重要意义。传统机器人抓取操作多在结构化环境下进行,需要事先获取被抓取物体三维模型并离线规划机械臂抓取轨迹,适用场景相对固定且物体形状、颜色、大小等特征单一,缺乏灵活性和鲁棒性。为实现机器人在非结构化环境下对任意物体的精确抓取,首先需要解决的就是抓取位姿检测问题。本文以RGB-D相机为基础,深入研究了基于卷积神经网络的抓取位姿检测算法,分别实现了已知物体与未知物体的抓取位姿高效鲁棒检测,并进行了抓取实验验证,主要研究内容包括:研究了基于深度图像的机器人抓取位姿表示方法,使用二维图像检测代替三维空间抓取位姿检测。将多接触点表示法与二维旋转矩形框表示法相结合,提出两点式抓取位姿表示方法以表示机器人三维抓取位姿,更加符合二指平行夹持器执行捏取式抓取操作要求。结合深度数据并限定抓取方向,将二维抓取参数唯一地映射回三维抓取空间。提出了一种针对已知物体的两步法抓取位姿检测算法,将目标检测与抓取位姿检测相结合,利用小样本数据集训练网络模型,对物体位姿变化具有较高的适应性。基于SSD_Mobile Net网络模型进行目标检测,采用阈值化分割技术将物体从背景中分离出来,利用主成分分析法可同时对多个物体进行抓取位姿确定。与传统方式相比,在有效减少构建抓取数据库时间的同时达到了87%的抓取成功率,性能较为优异。提出了一种针对未知物体的端到端抓取位姿检测算法,采用仿真方式构建抓取数据集并训练全卷积网络模型,直接输出深度图中各位置所对应的抓取位置、角度和质量,在极大减少数据集搜集时间的同时提升了抓取检测精度,通过抓取质量预测函数评价抓取位姿的优劣。该算法在验证集上的准确率达到0.899,超过原始GQCNN的准确率。且对于未知物体的抓取位姿检测平均时间为0.65s,较原始网络提升了31.6%。抓取质量Q值较高,且较为集中均在0.79以上,相比之前Q值不稳定且整体偏小有了较大提升。搭建了机器人抓取实验平台,通过对不同形状的未知物体进行抓取实验以验证抓取位姿检测算法的性能。实验结果表明端到端抓取位姿检测算法的抓取位姿检测准确率和机器人抓取成功率均达到较高水平,抓取过程灵巧且稳定。
其他文献
随着几何造型工业的迅速发展,传统的Bézier方法、B样条方法以及NURBS等方法已经难以满足造型设计中的各种需求。作为传统Bézier方法的扩展,带形状参数的广义Bézier曲线曲面如今已经成为CAGD领域研究的新热点。这类曲线曲面通过引入形状参数,提高了其局部和整体形状的可调性。造型软件中的复杂几何体通常是由满足几何连续约束的低次曲线曲面光滑拼接而成的,因此研究带参广义Bézier曲线曲面的几
当前,我国公路货物运输安全状况趋于好转,但形势依然严峻。本文从运输安全事故发生的原因入手,深刻剖析存在问题,并在货物运输驾驶员、运输企业、监管部门等方面提出了建议,对建设平安交通,保障公路货物运输安全,促进运输业健康持续发展具有指导和现实意义。
随着中国制造2025战略的实施,以及我国智慧矿山建设的不断推进,井下机电设备联系日渐紧密,并向着自动化、智能化的方向快速发展,这对煤矿的安全生产提出更高的要求。异步电机作为煤矿作业的核心驱动力,其能否在恶劣的环境下可靠工作将会直接影响到生产的稳定性。开展井下异步电机故障诊断研究对发现电机早期故障、防止故障范围扩大、保障煤矿的高效生产具有重要意义。本文首先从电磁学角度对异步电机转子断条故障、静态气隙
空化是液体介质在局部压强剧烈变化时发生相变的现象,空化现象广泛地存在于各种液体流动中。向液体介质中加入可溶性高分子聚合物可以得到具有粘弹性性质的聚合物溶液。本文基于CFD商业软件,对聚合物溶液中的空化现象进行仿真模拟,研究聚合物添加对空化现象的影响规律。数值模拟中采用FENE-P模型描述聚合物溶液的粘弹性特征,同时应用混合多相流(Mixture)模型模拟流场中的空化现象。本文分别应用雷诺平均模型(
城市更新是推进城市高质量发展的重要举措,是节约集约利用土地的基本途经,更是改善城市居民生活环境、美化城市空间风貌的惠民行动"十四五"规划纲要提出:加快转变城市发展方式,统筹城市规划建设管理,实施城市更新行动,推动城市空间结构优化和品质提升。城市更新是将城市中已经不适应现代化社会生活的地区作必要的、有计划的改建活动,旨在完善城市功能,优化产业结构,推进土地资源的节约集约利用,
期刊
随着科技的发展,机器人已经在诸多领域得到了广泛的应用。传统的轮式以及履带式机器人,由于其结构本身的限制,导致它们的运动往往需要连续的支撑面,因此难以应对较为复杂的非结构化地形,如沟壑、陡坡。相比于传统的机器人构型,足式机器人的运动只需要离散的支撑面,因此具有更好的地形适应性。而离散支撑面具有高度和间距不断变化的特点,传统的步态规划方法往往难以适用。因此,本文对仿人机器人在离散支撑面下的步态规划和自
生态补偿机制是新时代生态文明建设的重要内容,不断发展的森林生态旅游,既给旅游地生态环境保护带来了资金支持,又给旅游地的生态环境造成了一定的损害。因此有必要建立健全森林旅游生态补偿机制,并探索以市场化经济工具辅助实现森林旅游生态补偿的目的,以法律制度的形式将森林旅游生态补偿的概念、范围以及多元化的方式等予以明确规定,为我国森林旅游生态补偿形成长效实施机制提供法律保障。
近年来,随着用户和法规对工程机械舒适性要求的日益提高,国内工程机械厂商正面临着降低产品振动的挑战。本文针对某厂商的一款轮式装载机存在的两类典型振动问题展开研究,以期采用科学的分析方法明确振动问题的机理,优化并降低该款装载机的振动水平,为类似问题形成有参考价值的分析方法及解决案例。针对怠速状态座椅振动过大问题,建立了座椅振动传递路径模型并实施了工况传递路径实验,从相干分析和响应合成两方面验证了分析模
图像作为人类生产生活中不可或缺的信息载体,扮演着至关重要的角色。真实场景中的图像常常受到成像器材以及成像环境的制约,分辨率往往无法满足观看的要求。超分辨率重建技术旨在从一张或多张模糊的低分辨率图像中重建出对应的高分辨率图像,从而实现图像分辨率的提升。本文基于真实场景下的未知模糊核盲超分问题、非配对数据半监督模型和超分辨模型轻量化,针对相应的科学问题提出了三个超分辨率重建算法,主要研究工作概括如下:
铜锌锡硫(CZTS)化合物作为铜铟镓硒(CIGS)在太阳能电池中吸收层的替代者,具有与CIGS相似的结构与光伏效应,组成元素储量丰富且无毒,是光伏应用的理想选择。选用经济高效的制备方法,是实现CZTS光伏材料工业化生产的基础。非真空沉积工艺是制备CZTS薄膜最有潜力的方法,而制备过程中的硫化参数是影响薄膜质量的关键。本文采用球磨法制备CZTS前驱体溶液,喷涂完成前驱体薄膜沉积后,通过改变硫化参数,