基于轻量级神经网络和注意力机制的视频目标跟踪算法

来源 :长安大学 | 被引量 : 0次 | 上传用户:cyc2006
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视频目标跟踪技术在现实生活中应用广泛。实际跟踪过程中,存在着诸多影响跟踪效果的挑战性因素,例如背景相似、快速运动、形变等。因此,本文致力于改善视频目标跟踪算法的性能,使其满足实时性的同时提高精度与鲁棒性。本文基于经典孪生网络算法Siam FC的框架基础来进行改进,主要工作如下:1、提出一种基于轻量级的Mobile Net神经网络的跟踪算法。传统的Siam FC跟踪算法采用浅层的Alex Net网络,特征表达能力不足,而VGG19等深层网络参数量巨大,使得训练困难且跟踪速率不高。本文引入轻量级Mobile Net网络作为特征提取网络,使网络在加深的同时借助深度可分离卷积减小计算量,同时对网络的最后一层的尾部结构做出调整,进一步简化模型。然后,对不同层的特征进行了深浅特征融合,将低层的位置、细节信息引入高层特征。实验表明,本文的算法对于模型的性能有一定提升,在应对快速运动场景时的表现更好,兼顾了精度和速率。2、提出一种基于设定阈值的融合模板更新策略。一般的算法在跟踪过程中始终采用第一帧作为模板,使得在目标发生形变时跟踪精度不高。本文将最终得分图的相似度值与一个设定值进行大小比较,根据比较结果作为模板更新的依据,设定值通过重复实验进行寻找。为了使模板更加精准,对模板进行背景叠加后再与当前帧融合替换。在这一更新机制下,避免了逐帧更新带来额外计算量和引入过多背景信息的弊端。实验证明,这一更新机制可以提升算法在应对形变等场景下的精度。3、提出一种基于方向和自适应感受野的融合注意力模块。传统的空间和通道注意力存在计算量大,忽略位置信息等问题,在嵌入轻量级网络时的表现不佳。因此,本文提出一种融合注意力块,并在多层网络中使用。首先,采用两种尺寸的卷积核进行特征提取,使模型具有两种感受野,并通过通道权重调整,使得特征互补。然后,采用沿方向的一维卷积核进行特征池化,再进行像素依赖计算,获得方向注意力图以激励原特征,从而使网络的计算开销小,且具有方向性的位置关系。实验证明,加入融合注意力机制块的模型在尺度变化和背景相似干扰场景下提升较明显,对模型整体性能指标也有一定提升。最后,在OTB100和VOT2018数据集上分别进行了算法对比实验,证明了本文算法的有效性,取得了比其他算法更好的精度与鲁棒性。
其他文献
学生资助工作一直是我国高等教育改革发展的重要内容,作为重要的保民生、暖民心的工程,肩负着促进共同富裕、推动实现教育公平、建设高质量教育体系、培养时代新人的重要使命。随着脱贫攻坚战的全面胜利,我国已经进入以相对贫困和精神贫困为特征的后扶贫时代,相对贫困的学生基数更大、困难程度更模糊,学生对于资助工作的需求重点也由经济脱贫转变为能力脱贫、思想脱贫。在此背景下,高等学校学生资助作为一项复杂的系统工程,必
学位
交通流基本模型的参数标定试验是智能交通领域发展中的关键一环。现有城市摄像头拍摄的视频包含多种行为姿态的行人、不同运动轨迹的车辆、形态各异的道路,难以构建高效、高质量的交通数据集,导致交通流模型参数标定试验适应性较差;且基于单个摄像头拍摄的车辆视频较短,难以满足参数标定试验的需求;因此传统的参数标定试验均基于交通仿真软件的理论推导,未能将实际场景数据应用于实验研究,针对各国不同交通状态以及各国驾驶人
学位
随着输配水工程规模的增加,长距离输水工程沿线需要预留有分水口以便后期连接成支管供给特定用水点,同时在许多实际工程运行中,往往忽略了含气条件以及各种工况的校核,导致管道在运行过程中出现严重的断流弥合水锤引起的爆管、吸瘪等事故现象。为了确保供水工程的安全性,本文在搭建试验平台的基础上,对压力流树状管网在气液两相流状态下进行不同工况的停泵和末端关阀水锤模拟以及防护研究。首先,根据水锤计算基本理论和管网系
学位
镍基单晶高温合金由于其拥有良好的高温力学性能,是制造先进航空发动机中单晶涡轮叶片等重要热端部件的理想金属材料。由于航空发动机的迅速发展,对单晶高温合金的承温能力也提出了更高的要求。因此,近年来单晶高温合金中难熔元素(如Re、W和Ta)的含量在逐步增加。但是,高密度难熔元素的增加显著地增大了单晶高温合金的密度。因为航空发动机的推重比是其所产生的推力和重量的比值,其推动重量比的增加也可以节约燃料并增加
学位
随着科学技术的发展,移动机器人的障碍物检测与避障功能被广泛的应用于仓储、家用和军事等领域中,有着巨大的经济效益和研究价值。本文基于双目立体视觉系统,设计了一个可提高AGV工作效率的障碍物检测与避障系统。主要进行了以下研究:首先,对视觉AGV障碍物检测与避障系统中的双目视觉信息处理技术进行了探索和研究。利用MATLAB软件的标定工具箱进行相机标定,以获取准确的内外参数;为提高立体匹配的速度,采用Bo
学位
探究道路交通事故死亡人数影响因素,对于推动我国道路交通安全工作高质量发展具有十分重要的意义。在借鉴已有文献的基础上,构建了以人口因素、经济发展、车辆与道路、医疗卫生服务水平为外因潜在变量,以道路交通事故死亡人数为内因潜在变量的理论模型,并运用PLS-SEM模型量化分析了道路交通事故死亡人数的影响因素与作用机制。结果表明:人口因素、车辆与道路、经济发展均对道路交通事故死亡人数有显著的正向直接影响,其
期刊
科学合理的财政支出是政府有效履职的基础。我国高等教育事业的主要经费来源是政府的财政资金,但近年来伴随着高等教育的发展,相应的财政支出压力也不断攀升,高校对于财政经费使用效率低下的问题逐渐显现。现实表明,单纯依靠扩大财政支出规模来推进高等教育发展的方式已经不再适用。陕西省作为我国的高教大省,在财政支持高等教育事业发展的过程中绩效导向不强,供需矛盾突出。在此背景下,对陕西省高等教育财政支出进行绩效评价
学位
随着公路货运市场的不断变化,传统物流企业由于服务模式单一已经无法满足客户的个性化需求,网络货运的兴起,为公路货运行业提供了新的服务模式和创新的运营理念。网络货运平台利用互联网信息技术,集成并整合社会物流资源,全程透明化管理,合理优化配置,降低车辆空载率,提升运输组织效率,降低物流成本。但目前国内大多数物流企业不具备建立自身货运平台的条件,需要加入已经建立成熟的货运平台,从而顺应公路货运市场的发展,
学位
近年来,干旱半干旱地下水不合理开发利用正使地下水环境受人类活动的负面影响不断加剧。并在极大程度上制约了干旱半干旱地区经济社会与生态环境的可持续发展。定边平原地区地下水质空间分布不均,在水源地附近地下水水质较好,矿化度低,而在水源地周边则分布着大量劣质水体,由于水源井抽水导致区域地下水位下降,形成局部的降落漏斗,在水头差的作用下,水源地周边的劣质水体向水源地不断运移,导致水源地水质恶化。本文以定边平
学位
随着人工智能的迅猛发展,推动了许多领域的发展。移动机器人借助采集传感器对周围环境进行实时重建,然后通过深度学习对场景中的目标进行分割和识别,在识别过程中无需再人为的对待识别的物体进行特征标记,而是机器本身通过学习得到物体的特征,提高对物体识别的准确性。本文使用Real Sense联合RTAB-MAP对场景进行实时三维重建,但是场景中的物体显示轮廓不清晰以及场景重建信息缺失,因此采用粗配准与精配准结
学位