机器视觉标定与目标检测跟踪方法及其应用研究

被引量 : 23次 | 上传用户:Tianzhh
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着现代社会的发展,对产品质量、生产效率、劳动条件、环境等要求不断提高,从大型生产线,高楼大厦窗户的自动擦洗,恶劣环境下的清洗工作,到国防武器装备制造等民用及军事应用的各种领域,智能化、自动化、机器人化是时代发展的必然趋势,而机器视觉技术是促进其发展的核心技术。研究机器视觉理论方法及其关键技术具有十分重要的理论意义及社会经济意义。为此,本论文开展了机器视觉系统标定,视觉目标信息检测跟踪方法,及其在大型冷凝器清洗机器人作业中的应用研究,全文的主要工作如下:论文首先分析了立论背景及意义,回顾了机器视觉理论、关键技术的发展现状,介绍了机器视觉的应用研究现状,总结和归纳出待研究的难点问题及研究主线,简要阐述了射影几何,机器视觉系统的视觉成像模型、成像视点,视觉几何的理论基础。提出了基于扩展摄像机成像模型的自标定算法,给出扩展成像模型,采用扩展模型在一幅图像中同时运用不同方向透视投影分析,建立不同方向的单应关系进而建立内参数约束方程,实现单幅图像标定。与以往由三幅图像基于单应阵的标定算法相比,克服了由于多幅图像的像点不对应而造成精度低的问题。标定成像模型外,提出了一种基于场景中单个目标点的手眼标定方法,精确控制机械手平台作五次以上平移及两次以上旋转运动,提取场景中单个目标点的像点,通过视差及景深反映摄像机的运动,建立机械手平台与摄像机两坐标系之间相对位置关系的约束方程组。线性求得摄像机内参数K的五个元素及手眼关系R、t,同时,可求得场景目标点深度值。算法中机械手平台作平移运动,无需正交,使得对机械手运动控制操作方便,易实现。提出了基于矢量差分的未标定摄像机的P5P问题的线性求解法,由5个控制点构成矢量差分,利用R的正交性,逐步建立摄像机姿态及相机矩阵的约束方程,从线性理论的角度给出未标定P5P的解析解;提出了基于平行线段对应的运动分析线性算法,在运动恢复结构(SFM)框架下,将线段表示为两要素:点,直线,利用平行性,由像线段恢复空间线段。根据运动学理论的螺旋定理,建立基于空间线段两要素的运动参数的线性约束方程,用四元数法线性求解运动参数,并建立PSO非线性优化算法对运动参数进行优化。姿态及运动参数的约束方程是线性的,有解析解,求解方便。讨论了基于MS迭代算法的视觉图像信息的检测、跟踪方法,目标的检测、跟踪相辅相成,为了提高目标模型颜色特征表征的抗噪性与匹配迭代的有效性,提出了通过MS聚类的方法进行检测,并用聚类模式点来表达目标模型;提出了分层MS匹配搜索的思想,给出分层MS匹配迭代跟踪算法,先将目标参考模型与目标候选模型的聚类模式点、聚类块匹配,再块内的像素匹配,分层执行估计出跟踪序列帧中目标质心模式点的位置。实验结果表明,与传统MS跟踪算法相比,分层MS确定性梯度迭代算法可取得较好的跟踪性能。跟踪单目标情况相对简单些,而多目标跟踪由于目标数目、交互运动等诸多的不确定因素,需在概率推论框架下进行状态估计来跟踪。提出一种基于RJMCMC的分层MS视觉多目标跟踪算法,多目标跟踪问题建模为贝叶斯推理下的最大似然估计,设计了四种可逆运动方式构造马氏链,并给出基于关联匹配阵的有效的先验建议分布,提高了目标的抽样置信度,进而提高算法迭代效率,基于分层匹配思想,给出像素级与聚类块级两级分层的似然度量。实验结果表明,分层跟踪在单目标、多目标跟踪中具有较强的鲁棒性。针对冷凝器清洗机器人作业的应用,开展了清洗机器人的视觉系统及其关键技术的应用研究,实现清洗机器人的自主移动及在线清洗大型冷凝器。为此:构建了视觉系统,由引导机器人定位导航的子系统和引导机械臂喷枪定位冷凝器管口的子系统组成,共四路信息通过图像采集卡连接传输给主控制柜,经视觉关键技术算法处理后,给出对机器人控制的决策信息。提出了移动机器人视觉三维SLAM定位导航算法,使机器人自主移动到当前待清洗的局部位置,执行清洗任务。利用3D相机获取二维三维信息作为观测量的两个属性值,耦合ICP,BA算法优化数据匹配及求解机器人任意时刻的运动量。根据视觉理论求解SLAM,实现机器人的6DOF定位,与三维地图的创建。视觉理论为三维空间下6DOF 3DSLAM过程分析提供了关键理论依据,视觉SLAM求解过程较传统的运动学KF, PF滤波更简洁,无须预测步,定位与地图创建为一个过程,且利用三维相机与三维激光相比,二维数据引导三维数据匹配,减小了三维数据的搜索范围,提高了三维SLAM的计算效率。设计了基于视觉的管口定位算法,辅助机器人确定冷凝器管口的位置。根据作业场地面积的大小及摄像机的有效视场,离线人工计算将工作面划分区域,分块粗定位,控制机器人移动,在机器人移动到粗定位的某一确定位置,利用机械臂视觉系统检测分割冷凝器管的管口,计算管口的中心像点位置,再根据视觉理论计算出管口的空间位置,实现对当前局部范围内每个管口的位置的精确定位。
其他文献
水是人类赖以生存的自然资源,一直以来,我国经济的不断向前发展,各种污染物随着工农业废水、城市污水进入了我们周围的水域之中,污染事件频发。随着人民的环保意识逐渐地增强
弗洛伊德是新写实画派的代表人物之一,通过深入研究弗洛伊德的绘画,从而解读他所在的新写实画派及产生的意义。弗洛伊德的绘画虽被归为新写实画派,但他的创作手法又区别于画
<正>1.高压板的功能在液晶彩电中,高压电路一般独立做成一个条状电路板,且输出的交流电压很高,故高压电路俗称为高压板或高压条。其实,关于高压板还有很多叫法,如逆变电路或
自1956年通用“克劳顿学院”成立开始,企业大学在全球范围内迅速风靡。在近60年的发展中,企业大学的内涵和外延不断丰富,其已不仅仅是一个以企业名称为品牌的培训组织,更是一
阐述我国当代教育存在的主要问题,在此基础上,论述了孔子有教无类等教育思想和因材施教、启发诱导等教育方法,以及其对当代教育的启示。
<正> 也许是命运导致悲剧,也许命运本身就是悲剧,总之,人类命运的主旋律似乎就是悲剧之歌。因此,尽管哲学家、美学家、艺术家们早已建立他们各自的悲剧体系,在悲剧的论坛上似
公司成本、质量和交货期一直都是衡量企业绩效和整体竞争力的三大指标。而离散制造企业的库存水平却与这三大指标都密切相关,库存一直都是企业很关心的一部分销售产品成本,JI
<正>创维8TT6机芯液晶彩电的I2C总线系统主控电路CPU采用W78E5161B,数字视频解码电路采用TVP5147,图像缩放电路采用MST9151D,音频功率放大器电路采用TAPl517,开关电源采用APl
对金鱼的孵化过程中脱膜的有效积温及鳃耙的发育、消化系统的发育进行了研究,确定有效积温,介绍了鳃耙、消化系统发育过程。
目的:探讨胎膜早破的胎盘胎膜病理变化与妊娠结局的关系。方法:对953例胎膜早破的胎盘胎膜病理与妊娠结局关系进行回顾性分析。结果:953例胎盘胎膜病检中,炎症改变(A组)占11.