基于孪生网络的视觉目标跟踪算法研究

来源 :西安工业大学 | 被引量 : 0次 | 上传用户:yanhui516
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视觉目标跟踪一直是国内外学者的研究重点,随着多年的研究发展,跟踪算法逐渐遭遇瓶颈,但深度学习技术的崛起为跟踪技术注入了新活力,使跟踪技术有了长远的发展,促使该领域迈向新台阶。目前,目标跟踪算法的性能在自然场景下仍会受到如光照变化,尺度变化,遮挡等各种因素的干扰,因此对其进行跟踪仍然具有很大的难度。本文针对算法在短时和长时运动场景下进行跟踪时,目标被遮挡导致跟踪失败或目标被相似物干扰导致跟踪精度下降的问题,以Siam RPN++作为基础算法,提出一种具有通道和空间注意力机制的孪生网络视觉目标跟踪方法,该方法以进行深度特征提取的孪生网络框架为主,自适应生成锚框的区域建议网络为辅,并引入多层特征融合和自适应模板更新策略,以此来准确预测目标位置,从而设计一种能够提取更加鲁棒的目标特征方法和决策模型,以提升算法的成功率和精确度。本文的主要研究内容及创新点如下:(1)针对传统目标跟踪算法中主干网络缺少在通道和空间上对特征信息进行判别的问题,提出一种结合双注意力机制及特征融合的孪生网络目标跟踪算法。首先,将通道和空间注意力机制与主干网络相结合,对目标在通道和空间上的有效信息进行加强,对无效信息进行压制,提高模型对目标的判别能力;其次,对各层的特征进行多层融合,使浅层网络也能获得深层语义信息,提高算法在复杂情况下的鲁棒性;最后,在OTB100和La SOT两种数据集上进行实验,证明该算法能够提取到更加精确的目标特征信息,从而使算法整体性能有一定的提升。(2)针对基于人工设计锚框的目标跟踪算法中,候选框无法框住特殊(特别高或特别宽)的目标,且产生无用样本多,正负样本不平衡以及计算量大等问题,提出一种基于自适应生成锚框的孪生网络目标跟踪算法。首先,采用基于自适应生成锚框的区域建议网络,解决锚框生成的问题;其次,采用像素级互相关操作解决模板和搜索特征融合时特征空间模糊的问题,这种操作可以使融合后的特征更加清晰,从而提高边界框定位的准确性,进而增强网络对复杂情况的建模能力;最后,在OTB100和La SOT两种数据集上进行实验,证明改进锚框生成方式和特征空间模糊问题后算法能够得到更加准确的跟踪框,有效提升了算法的成功率和精确度。(3)针对长时跟踪中,目标遭遇遮挡或特征信息缺失而导致跟踪漂移或失败的问题,提出了一种基于抗干扰物的模板更新孪生网络长时目标跟踪算法。该算法在第四章目标跟踪算法的基础上进行了改进,引入了自适应模板更新机制,通过更新当前帧的模板信息来提高算法应对目标遮挡时的跟踪性能;其次,还设计了一种模板更新损失函数对自适应模板更新机制进行训练;最后,在La SOT和UAV123中UAV20L数据集上进行验证,实验结果表明,该算法相较于没有模板更新机制的算法更具优势,可以在复杂场景下更好地解决长时跟踪中目标受遮挡问题,具有更强的鲁棒性。
其他文献
随着时代不断进步,物流运输业蓬勃发展。在物流运输中,货物受到一些人为的或不可预期的原因而发生事故的情况时有发生,特别是精度要求高、成本昂贵的重要机械设备,环境因素对于机械设备运输中的安全质量会产生重大影响,因此,设计一种能够监测重要机械设备运输过程的环境参数,记录运输过程信息,并对关键参数进行数据处理,以获取设备状态的设备运输状态监测系统是十分必要的。本文围绕重要机械设备运输全过程状态监测终端系统
学位
随着智能化车间和生产线的发展,冗余双臂机器人广泛应用于自动化装配、军事及医疗领域,其仿人性和高协调性都是单臂机器人无法比拟的优点。双臂机器人依据手眼视觉和软件控制系统之间的协调,可以完成工业生产中工艺步骤重复性高、需求较大的工件抓取和装配任务作业,但目前视觉伺服控制尚未发展成熟,在装配过程中仍借助外部设备辅助完成作业,在准确性和信息融合中存在一定误差。为了实现工件在复杂背景中的装配作业,本课题利用
学位
高温环境下的压力测量在航空航天、船舶海洋、能源勘探和石油化工等多个领域中有着广泛需求。在这些需求中,压力测量通常会受到极端高温环境的影响,引起测量偏差或使传感器无法工作。而光纤双法珀腔传感器耐高温、抗电磁干扰能力强,能够实现温度与压力的同时测量。本文对双法珀腔传感器的解调技术进行研究,在实现对双法珀腔腔长的高速度、高精度解调的同时研究双法珀腔高温压力传感器的温度漂移补偿方法,解决由温度耦合效应引起
学位
环境感知作为计算机视觉一个重要的研究方向,是实现不同场景理解的视觉任务的基础,是实现室内服务机器人智能化的关键,通过感知周围环境信息可完成服务机器人在室内的导航及其他室内作业。其中,环境感知涉及的目标检测和双目测距技术是本文的研究重点,该技术的应用可帮助室内机器人获取到室内环境中目标物体的位置、类别及距离信息,辅助其更好的进行下一步决策行动。同时,为了使室内服务机器人能更好的完成一些室内常见目标的
学位
为了克服雾、雨天气造成图像质量变差,摄像头成像精度降低导致后续目标跟踪、识别效果变差甚至无法完成工作任务的影响,必须对雾、雨天气下拍摄到的低质天气图像进行增强处理。本文针对交通场景下拍摄到的雾、雨图片降质问题,开展了面向动态场景的低质视频图像增强算法研究,以解决传统低质天气图像分类方法无法对任意场景图像分类、已有去雾算法对不符合假设的图像处理结果较差、以往去雨算法忽视雨中含有水汽及真实雨图复杂等问
学位
高熵氧化物是一种新型单相固溶体材料,因其独特的熵稳定效应而表现出优异的可逆储锂特性,近年来受到了广泛关注。然而,高熵氧化物作为锂离子电池负极材料仍存在可逆比容量较低,首次库伦效率低(<60%),电压滞后较大的问题。为解决这些问题,本文在综述高熵氧化物研究进展的基础上,通过合成气氛调控,预锂化以及阳离子调控策略对(Mg,Ni,Zn,Cu,Co)O基高熵氧化物负极材料进行了改性研究,系统研究了其结构特
学位
随着全球经济的飞速发展,信息技术的应用和创新已成为当今社会的重要驱动力,传统的生产模式正在逐渐转变,物流行业的发展也日益迅猛。在自动化仓储物流系统中,提高移动机器人的作业效率是降低企业成本的重要路径,而路径规划是提高移动机器人效率的重点研究内容。因此,本文在国内外研究的基础上,从企业需求出发,对料箱机器人路径规划进行研究,从而提高料箱机器人的工作效率,达到为企业降低成本的目的。主要研究工作如下:首
学位
全世界能源紧缺以来,电能作为应用最为广泛的能源,电力行业面临巨大的挑战,因而由可再生的清洁能源组成的微电网得到大力发展。但随着变频和节能技术被广泛应用到生活生产中,向微电网中引入了大量谐波,给微电网的稳定运行提出了挑战。因此,本文选择微电网中的谐波为研究对象,主要对谐波电流检测算法与电流跟踪控制算法展开了研究,主要研究内容如下:首先,建立了微电网模型与仿真。微电网由风力发电、光伏发电、储能系统以及
学位
随着计算机技术的高速发展,车间设备的信息互联互通成为热点。目前齿轮测量中心采取传统的单机测量模式,设备使用的数据为专有格式,形成“数据孤岛”,导致其与车间其他设备缺乏有效连接,阻碍了齿轮智能制造的发展。本文结合数字化生产线的发展需求,以车间网络化环境和管理平台为纽带,研究了齿轮测量中心数据交互方法和过程,主要研究内容如下:(1)通过对齿轮测量中心信息化发展的深入调研,结合信息流数据分析,比对传统的
学位
水生态环境与人类生活密切相关,由于科技和工业的飞速发展,我国水生态环境受到一定程度的威胁,水生态修复已经是当今社会的一个主题。生物浮岛是一项原位水生态修复技术,国内关于生物浮岛的研究主要以太湖、滇池、长三角地区以及三峡库区为主,较少以北方寒旱区水体为例。乌梁素海是北方寒旱区大型草原湖泊,本文通过静态模拟乌梁素海水体,研究适合于北方寒旱区湖泊水体富营养化修复的耐寒植物和混合植物搭配组合,为北方寒旱区
学位