机器人柔性喷涂生产线三维视觉感知技术研究

被引量 : 0次 | 上传用户:eden_1005
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着智能制造技术的快速发展,以机器人为核心的柔性喷涂生产线,因其具有高效灵活、环保安全等优点,在工业领域得到广泛应用。然而,传统专注于大规模集中制造的固定流程作业模式,已经难以满足日益增长的以小批量、多品种为特点的定制化喷涂需求。为实现灵活柔性化作业,大型喷涂企业常采用三维视觉感知技术获取工件形貌特征,实现在线工件识别和喷涂路径规划。然而,高昂的成像设备及技术成本让诸多中小企业望而却步。为降低机器人柔性喷涂技术的成本与门槛,本文提出一套基于低成本RGB-D相机的工件在线三维测量方案,围绕3D成像、工件识别、工件重建、位姿估计等关键视觉感知技术展开研究,为机器人路径规划和自主作业提供支撑。本文的主要研究内容和创新点如下:1)针对机器人柔性喷涂作业中对工件三维形貌测量的需求,设计一套基于低成本、消费级RGB-D相机的流水线工件在线3D成像系统。该系统采用对侧安装的RGB-D相机,在不影响生产节拍的情况下全方位采集在位运动工件的RGB-D数据流。为实现系统的高质量成像,从两方面标定系统:第一,针对低精度RGB-D的深度测量误差问题,提出一种基于多因子误差建模的深度测量值补偿方法。该方法结合RGB-D相机的测量原理及工件的几何属性,分析视角及空间距离变化对深度误差的影响,采用多元高阶建模的方式补偿测量值。第二,针对无重合视场的相机系统外参标定难题,提出一种基于双面标定板的交点共面联合优化的标定方法。该方法利用同名点在物理空间的一致性设计一种双面参考标定板,并以点线共面及先验物理模型为约束建立距离误差目标函数,优化求解参考点的坐标,实现系统外参的精确标定。2)针对柔性喷涂生产线小批量、多种类工件识别需求,提出一种多模态特征结合的识别方法,解决结构相似工件识别不准确的难题。首先,通过离线增强的小样本数据集训练Mask R-CNN模型,利用其在2D图像上尺度及方向空间的不变性,实现相似工件的聚类;然后,在初步工件识别定位的基础上,利用3D点云特征对局部细节的强区分性,采用关键点检测、矢量化、特征配对的思路,以配对率为评价指标对粗分类工件进一步精确识别。其中,针对相似工件特征误配对的问题,提出一种特征对分步验证算法,即以矢量化特征的线性相关度为初配标准,再以拓扑结构及空间变换关系的一致性为约束,实现工件3D特征的准确配对。实验中,采用1000多个工件对所提算法进行测试。结果表明:识别率高达99.26%,单工件识别耗时低于1.5 s。3)针对部分工件无先验模型、无法满足机器人自主编程需求的问题,提出一种基于运动恢复(Sf M)的多视RGB-D图像融合的工件在线3D重建方法。该方法利用成像系统采集的多视数据流,按照工件分割、位姿估计、点云融合、对侧工件拼接的步骤,实现喷涂工件的完整建模。首先,提出一种基于彩色图引导的RGB-D工件分割算法。因彩色图质量优于深度图,以Background Matting模型准确分割的彩色图工件为引导图,通过导向滤波增强被噪点干扰的深度图工件,并作为掩膜快速高质分割深度图工件。然后,提出一种局部ICP配准与全局误差优化算法,估算多帧工件间的位姿。该算法基于工件近似线性的运动特性,通过简化目标函数改进ICP算法,快速估算相邻帧工件位姿,再以配对点对距离最小为约束全局优化多帧工件位姿的累计误差,实现位姿的准确估计。接着,基于点云的空间概率密度分布以及点云质量与视角变化的相关性,提出一种联合加权点云融合算法,滤除对齐点云中的噪点及错误点,实现多视点云的高质融合,并得到单侧工件的3D模型。最后,基于成像系统的外参矩阵拼接两对立面工件点云,实现工件的完整重建。实验表明:所提算法的建模误差小于5 mm,耗时约为1.5s,满足实际生产需求。4)针对流水线非规则运动或悬挂错位造成工件与参考位模板存在位姿偏差的问题,提出一种基于增强型深度特征En-3DMatch的位姿测量方法。首先,针对3D数据集标注效率低的问题,基于RGB-D数据的2D图像与3D点云的内部映射关系,将大量提取及配对的ORB特征点转换为降质的配对3D特征点面片,以此作为标签实现数据集的自动标注;再利用标记数据训练3DConv Net深度模型,获得一种描述性和区分性更强的En-3DMatch特征;然后,针对特征匹配中误配对点及离群点的干扰问题,将应用于2D图像的Ada LAM算法扩展到3D点云,实现误配对特征的准确滤除;最后,以配对特征点的距离最小为目标,通过非线性优化求解的方式准确测量工件的位姿。实验表明:所提算法能够精准快速的测量工件的位姿,基于低分辨率的消费级RGB-D相机采集的数据,位姿测量误差为4.022 mm,耗时低于1s。
其他文献
奥尔夫音乐教育理念更加强调音乐课堂教学内容的综合性与实际贴合性,其以培养幼儿综合音乐感知能力为出发点,充分尊重幼儿在学前阶段的成长与学习能力的形成规律,将音乐与语言、图像、演唱、乐器弹奏及体操舞蹈等形式糅合,通过实现音乐由单一途径向多元感知方向的发展,为幼儿音乐综合能力的构建创设足够的成长空间。本文对于奥尔夫音乐活动的概念、实践意义以及教学融合中产生的问题进行了具体阐述,并针对奥尔夫音乐活动在幼儿
期刊
羊毛/蚕丝混纺织物综合了羊毛纤维和蚕丝的优良特性,轻薄滑爽、手感柔软、拥有良好的抗皱性和柔和的光泽,穿着舒适美观,可作为一种高档的服用面料,具有广阔的市场前景。羊毛和蚕丝虽然同属于蛋白质纤维,但由于其极性氨基酸含量、分子结构、聚集态结构、表面形态结构、等电点等方面的不同,导致两种纤维在同浴染色时吸收染料的性能(如上染速率、饱和吸附值等)有很大差别,使得羊毛/蚕丝混纺织物一浴法染色时难以达到良好的同
学位
<正>近年来,“玛雅文明”这个词炙手可热,太多人误以为玛雅人、神庙、围城、金字塔早已随着文明的覆灭而淡出这座星球。其实,揭秘玛雅最好的方式就是飞跃太平洋,用眼睛去探访现代玛雅人的生活,爬一爬中美洲各国的金字塔,喝一杯龙舌兰,蘸着辣酱吃两口玉米饼,我们或许距离谜底不再遥远。当然,由于玛雅文明遍布中美洲五个国家,很多遗址秘藏于茫茫雨林之中,一般游客难以到达,并非所有人都有机会去亲自了解。可以跟着笔者采
期刊
随着人工智能、VR/AR、物联网、大数据等智媒技术的迅速发展,人工智能时代已经悄然来临。分析教育出版行业智媒化转型的可行性和必要性发现,行业间的相互交融丰富了教育出版智媒化的主体,智媒技术的创新发展为出版业融合发展注入了活力,同时互联网背景下的市场思维和用户思维变化整合了行业转型的理念,这都给教育出版智媒化带来有利条件;但同时,由于相关法律法规不健全,智媒技术的引入给教育出版业造成了数据共享与信息
学位
伴随我国2035年远景目标和“十四五规划”等国家战略的施行,电机系统占据着越来越重要的地位。然而电机时常需要运行于复杂甚至极端工况环境下,这将导致制造生产低效,甚至造成严重的经济损失和人员安全问题,所以研究智能电机故障诊断方法具有十分重要的意义。目前大多数方法集中于一维信号在时、频、时频域的细节特征提取,缺乏对信号的全局高维信息特征的关注,故存在一定的局限。可以注意到,人类可以将视觉和听觉等信号融
学位
边缘计算是一种能够支持时延敏感型应用需求的新型网络计算解决方案。然而,由于用户移动的高度动态性与不稳定性,动态服务迁移问题成为边缘计算系统中的一个重要挑战。由此,本文针对动态服务迁移策略设计展开研究。首先,本文定义并形式化建模多用户动态服务迁移问题,优化目标是最小化系统长期服务延迟,包括累计用户计算延迟、通信延迟与迁移延迟。然而,该问题存在网络环境复杂、用户移动频繁且具有不确定性、用户数量多导致的
学位
随着信息与通信技术(ICT,Information and Communication Technology)的飞速发展,无线网络在满足用户业务量爆炸式增长的同时,其消耗的能量也在急速增长。过高的基站能耗开销不仅对生态环境带来负面影响,也带来了运营成本的提高。基站能源消耗受制于网络中基站部署和控制的灵活性。近年来绿色节能通信技术得到了广泛而深入的研究,高能效基站控制技术作为提高网络能量效率的重要手
学位
目的:从循证医学角度探讨绝经后骨质疏松(POP)患者序贯治疗后应用地舒单抗对骨密度和骨标志物的影响。方法:全面检索万方数据库、维普数据库、中国知网、中国生物医学文献数据库、PubMed、Embase和the Cochrane Library,对已发表的地舒单抗用于POP序贯治疗的文献进行筛选评估,纳入研究进行质量评估,借助RevMan 5.3软件对疗效和安全性进行分析。结果:最终纳入7篇文献,共1
期刊
<正>骨质疏松是一种以骨量降低、骨组织微结构受损、骨脆性增加、易发生骨折为特征的全身性骨病[1],是老年常见的慢性病之一。美国、加拿大和韩国50岁以上的男性和女性骨质疏松的患病率分别为5.1%和16.5%、6.6%和15.8%、7.3%和38.0%,我国50岁以上的男性和女性骨质疏松的患病率为6.0%和32.1%,65岁以上人群骨质疏松患病率为32.0%,其中男性为10.7%,女性为51.6%[2
期刊
联合用药是提高抗肿瘤治疗效果和克服肿瘤耐药的重要临床措施。与联合用药相比,多靶点药物在发挥类似活性的同时,还能有效避免不良的药物-药物相互作用和提高病人依从性,因此是药物化学研究领域的热点之一。肿瘤的侵袭和转移是恶性肿瘤难以被治愈的原因之一,许多研究表明氨肽酶N(Aminopeptidase N,APN)可以降解细胞外基质(extracellular matrix,ECM)进而促进肿瘤转移。此外,
学位