遥操作机械臂视觉系统研究

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:shpeipei
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在一些不适合人工作业的极端环境(高温,黑暗,真空,核辐射等)或人力难以到达的环境中,为了监控环境内部部件的状态需要利用机器视觉代替人眼察看极端环境内部现场状态并检查内部部件受损情况。通过在机械臂末端搭载视觉检测工具,利用遥操作技术将视觉检测工具送入极端环境中完成视觉检测任务是一个不错的选择。本文所研究的视觉系统安装在柔性内窥机械臂末端,旨在为托卡马克装置内部部件第一壁提供全覆盖式和近距离观察,为后续维修工作提供依据。围绕遥操作机械臂视觉系统功能,本文主要解决两个问题。首先,针对传统的依靠查看图片序列或视频的视觉观测方式带来的繁琐不直观问题,提出了一种基于增强虚拟的第一壁场景复现方法。该方法基于增强虚拟的思想,首先设计一种鲁棒的第一壁单砖图像识别提取算法,从相机获取的真实第一壁场景图片中识别提取出真实的第一壁单砖图像,然后结合机械臂位姿信息并估计相机位姿,设计第一壁单砖图像虚实配准算法,将识别提取出的真实单砖图像通过纹理映射的方式叠加在虚拟的第一壁场景模型中的对应位置,达到虚实结合的混合现实效果。通过该方法,用户可以直接在三维虚拟的托卡马克腔体环境中察看第一壁真实图像,具有很强的三维立体感,可以任意视角观察,方便快速定位第一壁砖块受损位置,大大提高了观察的直观性和检测效率。其次,本视觉系统相机和光源均安装在机械臂末端,针对黑暗环境下,机械臂扫描运动过程中机械臂末端距离待观测第一壁表面的观测距离发生变化时,相机图像会出现过亮或过暗的问题,本文提出了一种基于图像亮度质量分析的自动照明方法,在机械臂运动过程中,自动调节光源亮度来平衡观测距离变化,维持图像亮度在合适的水平。该方法的实现是在观测距离可获取的情况下,首先采用特征学习的方式建立图像亮度质量评价模型提取图像亮度质量特征,然后建立图像亮度质量,观测距离和光源亮度三者之间的回归模型,以期望的图像亮度质量特征加上观测距离作为回归模型的输入离线预测出用于保障相机图像亮度的光源亮度值。在机械臂运动过程中,根据测距离的值,将光源亮度值设置为与观测距离相对应的值,进行实时自动照明。最后分别对基于增强虚拟的第一壁场景复现方法和基于图像亮度质量分析的自动照明方法的可行性和有效性进行实验验证。实验结果验证了方法的有效性。
其他文献
奶牛乳腺炎是牛场最常见的疾病之一,给养牛业带来了巨大的损失。迄今为止,使用抗菌药物仍然是大多数牧场治疗乳腺炎的首选方案,但抗生素滥用及抗生素残留对人类及动物健康造
模糊连接点聚类算法(Fuzzy Joint Points,FJP)是近年来出现的一种新型模糊聚类算法,其优点是不需要预先设定聚类个数,能通过数据点的连接关系判断数据点间的类别相似性,具有较好的鲁棒性。但应用中该算法也有若干不足:(1)FJP算法以划分结果中频率最高的聚类簇数为最佳聚类数,这种定夺方式在很多高维数据集并不适用,有一定的随机性,影响算法的准确率。(2)α划分水平衰减的范围过大会导致算法
目的:探讨新辅助化疗前乳腺癌患者血液学指标和临床特征与新辅助化疗疗效的关系。方法:选取2017年10月至2019年10月期间在我院甲乳外科就诊的乳腺癌患者共114例,收集新辅助化
中国经济运行进入“新常态”以来,国家宏观经济政策由原来的聚焦GDP转为更加注重经济运行的质量和效益,更加关注结构调整和转型升级。其中工业作为一个国家和地区经济发展的支柱,工业转型升级更是关键所在。近年来,全国各地纷纷制定了以工业转型升级为核心的中、长期发展规划。特别是党的十八大以来,政府更加重视工业转型升级,把工业作为转变经济发展方式、调整优化产业结构的主战场,通过政策的干预,以实现资源配置达成最
目的分析青春期子宫内膜异位症的相关危险因素,建立基于危险因素的青春期子宫内膜异位症临床风险评估模型。方法1.收集1998年1月至2018年5月在浙江大学医学院附属妇产科医院
目前,互联网(Internet)的高速发展带来了用户数量与应用种类的指数型增长,不断增长的数据流量与有限的网络带宽资源之间的矛盾正变得日趋突出。因此,如何充分利用网络资源进
随着科学技术的发展,越来越多的显示技术被科学家所发明并研究,它们中的很多已经运用于人类的生活、学习和工作中。如今,随着高分辨率的显示设备的普及,学术研究者已经不满足
背景:众所周知,帕金森病(Parkinson’s Disease,PD)与多巴胺能神经元中α-syn(alpha synuclein,α-syn)的过度聚集有关。过度聚集的α-syn具有毒性,它干扰脂质的组成并改变其
在我国经济发展进入新常态,应对国际和国内经济发展面临的问题和机遇的过程中,我国提出了“一带一路”发展战略和供给侧结构性改革策略。一方面顺应世界多极化、经济全球化、文化多样化、社会信息化的潮流,构建全方位、多层次、复合型的互联互通网络,实现沿线各国多元、自主、平衡、可持续的发展;一方面从提高供给质量出发,用改革的办法推进结构调整,扩大有效供给,提高供给结构对需求变化的适应性和灵活性,提高全要素生产率
随着互联网中流媒体服务的快速发展和智能移动设备的普及,人们对随时随地的流媒体服务产生了大量需求,网络中流媒体应用的流量占据极大一部分,并且仍在快速增长。无线Mesh网