基于在线语义分割机器视觉检测鉴别关键技术研究与应用

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:w__hailin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
机器视觉技术是智能制造装备涉及关键技术之一,广泛应用于精密制造生产线、在线产品质量检测等多个领域的智能制造装备中。本论文以“基于在线语义分割机器视觉检测鉴别关键技术研究与应用”为题,面向在线机器视觉检测鉴别,重点研究在线复杂背景语义分割方法、语义分割模型自动深度学习方法、多任务并行调度方法等关键技术问题,对于提高机器视觉检测技术及装备水平,具有重要学术价值与实际意义。论文从在线机器视觉检测鉴别的准确性、实时性出发,论述深度学习语义分割方法、自动机器学习方法、多任务调度方法等方面国内外研究进展,确定研究内容。论文主要工作包括:(1)基于在线语义分割机器视觉检测鉴别技术总体架构设计。从在线机器视觉检测鉴别的准确性、实时性需求出发,建立基于在线语义分割机器视觉检测鉴别技术总体架构、检测流程,主要指标包括平均交并比IoU、平均精度APIoUT等准确性指标,以及分割时间Tseg、训练时间Ttrain等实时性指标。分析指出整体构架关键技术,主要包括在线机器视觉语义分割、自动深度学习、多任务调度等,其中在线复杂背景语义分割方法有助于提高IoU、APIoUT准确性指标、降低分割时间Tseg,自动深度学习方法有利于降低训练时间Ttrain,多任务调度方法有利于减小各种检测任务下总分割时间Tseg。(2)面向机器视觉检测鉴别的在线复杂背景语义分割方法研究。深入研究基于多孔卷积架构网络模型轻量化优化、基于编-解码器架构网络的复杂背景语义分割、全卷积网络特征映射复用等关键技术,较好解决网络语义分割能力-计算开销、对象部件语义响应值-语义互斥关系、网络语义分割准确度-特征复用程度等矛盾,改进语义分割模型具有准确性评价指标IoU、APIoUT好,分割时间Tseg佳特点,方便在线机器视觉检测应用。(3)面向语义分割机器视觉检测鉴别的自动深度学习方法研究。系统研究机器视觉语义分割迁移学习技术、超参数优化配置与快速验证技术等,分别解决最大程度训练网络初始损失降低方法、收敛稳定性-计算开销等矛盾。提出兼具迁移学习、超参数优化的机器视觉检测自动深度学习方法,方法具有较少训练代数Ntrain、较高准确性APIoUT特点,便于检测部件、特征经常变化的检测环境应用。(4)面向在线语义分割机器视觉检测鉴别的多任务调度方法研究。建立面向在线语义分割机器视觉检测鉴别的多任务调度模块技术框架,系统研究高分辨率图像分块调度、多网络多图像分批调度、检测鉴别协同调度等关键技术,较好解决硬件使用率-峰值存储开销、预加载网络存储开销-GPU平均使用率、调度求解时间-调度优化时间等矛盾。使系统在高分辨率图像、多网络多图像、复杂检测鉴别等情况下,均具有总分割时间Tseg短特点,提高机器视觉检测实时性能。(5)在线复杂背景语义分割机器视觉检测鉴别应用实验研究。在实际应用需求中验证本文理论与方法功能、准确性、实时性等。在AK8银行票据防伪鉴别仪初步应用表明,应用本文方法的鉴别仪具有银行票据防伪特征类型、位置、形状的半监督学习功能,能胜任票据防伪鉴别需求的各项防伪信息鉴别准确率100%、票据鉴别时间≤1s;在MVAQ-2机箱标准件装配质量检测系统应用结果表明,系统具有不同装配件类型、位置、形状的半监督学习功能,能胜任机箱标准件装配质量检测需求实现各种标准件安装、漏装、误装情况检测,单个机箱的检测时间不超过5.3s,准确率达到100%,新机箱学习时间不超过20.2min;在DAE驾驶辅助评判系统初步应用表明,系统可根据考试过程中操作行为评定考核是否合格,满足驾驶辅助评判应用需求,控制器档位、操纵行为等核心功能识别准确率分别为Pgear=100%、Poperation=98.3%,考试总时间误差ΔTDAE、换挡操作时刻误差Δ Tforklift、转弯操作时刻误差ΔTturn不超过±0.31 0s。
其他文献
随着硅橡胶(silicone rubber,SR)在电子电器、高压电网和航空航天行业的快速推广,如何有效提高硅橡胶的阻燃性能成为亟需解决的研究难题之一。工业上主要通过添加大份量(>40 phr)的金属氢氧化物来改善硅橡胶的阻燃性能,但该类填料阻燃效率低,与基体相容性差,大量添加会恶化硅橡胶的加工性能和力学性能。近年来,研究学者发现六方晶型氮化硼(hexagonal boron nitride,h-
随着感知设备的普及,物联网技术的发展,以云计算、信息物理系统、大数据、深度学习、雾计算等为代表的新一代信息/人工智能技术与先进的制造技术结合,推动了制造物联模式的不断发展。本研究正是顺应制造物联发展对云雾融合的迫切需求,一方面利用雾层来采集和及时处理感知设备层实时数据,包括基于RFID的工件加工状态的监测数据、刀具加工过程中的振动及受力的传感数据,以及经过及时处理形成工件加工状态、刀具剩余使用寿命
随着新型显示技术的不断发展,以大尺寸、高分辨率、高刷新率和柔性化为特点的高性能显示面板在商用和消费领域的需求愈发强劲。以上技术特征要求显示驱动器件的电极既要降低特征线宽缩小特征尺寸,又要提高电导率降低信号延迟。以铝(Al)、钼(Mo)为代表的传统电极在性能提升方面渐显疲态,边际效益递减,已难以满足高性能显示的金属化布线需求。纯铜(Cu)电极导电性能优异但粘附性差,为提高与基板的键合能力,需要开发新
故障诊断理论与技术是提高现代化机械装备安全性、稳定性、可靠性的重要手段,是保障人民生命和财产安全甚至是国防安全不可或缺的技术,对我国制造业优化升级、提质增效具有非常重要的战略意义。机械装备在运行过程中可能多种关键零部件同时发生或先后级联出现故障,多种故障模式相互耦合形成复杂的关联关系,复合故障成为装备常见的故障。复合故障特征与故障模式类别之间的关联关系不明确,使得机械装备的故障诊断与预测性维护难度
2004年单原子层石墨烯的成功分离开启了纳米材料发展的新时代,石墨烯凭借独特的结构和优异的性质迅速获得科学界的青睐,成为当下最具前景的先进材料之一。石墨烯及其衍生物由于具备优异的力学、电学、光学等特性而被广泛应用于光热转换材料、智能穿戴器件和柔性储能器件等领域。而且伴随着人们对功能性材料越来越高的需求,关于石墨烯及其衍生物的相关研究日趋火热。将石墨烯作为纳米增强组分复合入聚合物,能有效改善聚合物的
财政是国家治理的基石,财政绩效评价是全面预算绩效管理的价值工具。审视近二十年我国财政支出绩效评价的理论研究和实践探索,大都呈现项目性评价特征,涉足地方及部门整体支出、财政政策绩效的评价有限。评价的实际效果与社会期待存在距离,各类项目普遍“绩效优良”与地方或部门整体支出绩效不彰形成落差。探究其中的原由在于:财政资金的累加属性并不等同的项目绩效的叠加效应。构建财政支出绩效评价结构体系,厘清绩效的生成机
随着压缩态光场产生技术的发展和成熟,其相关应用也得以迅速发展。在量子精密测量与量子传感领域,压缩光凭借其独特的噪声分布特性成为诸多光学测量技术中突破经典量子噪声极限限制的利器;在量子信息领域,压缩态光场凭借其正交分量上噪声相互关联的特性,成为重要的连续变量量子资源。目前,空间光学系统中的基于参量振荡和参量放大技术的压缩光源在压缩度以及稳定性等技术指标上已经能够满足绝大多数上述应用的需求。然而,这类
近年来新能源电动汽车保有量在持续不断增长,与此同时,国内外新能源电动汽车热失控扩散引起起火燃烧事故越来越多。事故诱因通常是电池系统在服役过程中由于过热、过充电、浸水、短路、碰撞变形、被异物刺入等情况引起的一系列不可控放热产气反应。本课题基于新能源汽车行业的事故调查分析,选取热诱发、电学诱发、机械诱发三项典型的热失控触发方法(加热、过充电、针刺),并结合锂离子电池的技术路线,对25 Ah的NCM 8
电动汽车长期续航及便携式可移动储能设备的需求激发人们持续开发高能量密度的锂离子电池。目前,以石墨和钛酸锂氧化物为主的锂离子电池负极材料的发展已经日趋成熟并实现商业化,然而其低的理论比容量严重限制了电池能量密度的提升。硅的理论比容量高达4200 m Ah g-1,几乎是石墨的10倍,因而备受人们瞩目。硅负极材料发展过程中遇到的核心问题是充电时锂离子会嵌入硅晶体内部晶格间,引起体积膨胀,造成电极结构的
结直肠癌作为全球和我国第三大常见癌症,其发病率和死亡率居高不下,严重威胁人民健康。肿瘤微环境在结直肠癌的诊断、治疗与预后评估中起着关键的作用。如何精准量化肿瘤微环境信息,是当前肿瘤领域研究的难点和热点问题。病理是肿瘤诊断的金标准,蕴含丰富的肿瘤微环境信息,临床术后病理切片为精准量化肿瘤微环境提供了材料。经过数字化扫描的全视野数字切片,可以提供从组织到细胞等不同尺度的肿瘤微环境信息,如肿瘤间质比、肿