基于孪生网络的目标跟踪算法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:qcolin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着当今社会的不断发展,计算机视觉技术越来越广泛地应用于社会的各个方面,对人类社会起到越来越重要的作用。目标跟踪作为计算机视觉领域具有挑战性的研究方向,近年来吸引了众多学者,取得了大量的研究成果,但是由于存在如遮挡、快速运动等因素的影响,所以能够适应所有场景,高性能且速度快的跟踪器的设计仍然有很大的难度。近几年来,孪生网络跟踪算法由于能够在保持较高跟踪速度的同时取得较高的跟踪精度而得到了人们的广泛关注,但与其他类型的跟踪算法相比,其鲁棒性较差。为此本文以Siam RPN模型为基础,对基于孪生网络的目标跟踪算法进行研究,并重点关注模型的鲁棒性,改善模型对于复杂情况的应对能力,进而提升模型的跟踪性能,主要完成了如下工作。针对基准模型对复杂情况的应对能力不足以及使用深度卷积神经网络作为骨干网络时训练数据的数量和质量不足的问题,从三个方面对训练数据集进行扩充。增加正样本的数量,以提升模型的泛化能力;使用一些数据增强方法如颜色变化、随机擦除等,以使特征提取子网络能够更好地学习复杂情况下的特征模式;使用自举法对容易使模型跟踪失败的困难样本进行充分挖掘,以改善模型对于复杂情况的应对能力提升模型的鲁棒性。针对基准模型的准确率良好但鲁棒性较差的问题,提出了基于深度卷积网络的孪生网络跟踪算法Siam DC。使用深度残差神经网络作为孪生网络跟踪算法的骨干网络,并对残差网络的参数和结构针对目标跟踪任务进行了适应性调整,如使用相对较小的网络步长、适度调整感受野等。针对使用单一特征的模型性能不足的问题,分别基于两种特征融合方式提出了两个孪生网络跟踪算法。基于早期特征融合的孪生网络跟踪算法Siam EFF,直接对骨干网络不同层次的特征进行融合,以深层特征为主融合浅层特征,以提升跟踪模型的准确率;基于多解融合的孪生网络跟踪算法Siam MSF,对使用多个层次的特征得到的跟踪结果进行融合,使得多个跟踪结果能够优势互补得到更可靠的结果。分别在VOT2018、VOT2019和OTB2015三个数据集上进行了实验,并使用相应的性能指标对各模型性能进行了评估,实验结果表明,Siam EFF模型和Siam MSF模型在各数据集上的性能均有较为明显的提升,说明早期特征融合的方法能够提升模型的跟踪准确率,多解融合方法能够有效地提升模型的鲁棒性进而提升模型的性能。
其他文献
近年来,多源图像融合技术已广泛应用于医学诊断、遥感监测、视频监控、军事等领域,它能够将不同传感器或不同参数设置的同一传感器捕获的同一场景的多幅图像中的互补信息,合成一幅能更加全面描述场景信息的图像,从而提供关于观察对象的更完整的描述。但是,现有多源图像融合方案在实现过程中不能提升原始图像的空间分辨率,这限制了融合结果的进一步应用。利用超分辨率(SR)重建技术可从低分辨率源图像中重建出更高分辨率的图
肇州油田州254区块位于大庆长垣东侧、朝阳沟阶地地西的三肇凹陷南部,三肇凹陷是大庆长垣外围控制区主要的生油凹陷之一。而肇州油田经过几十年的开发,已经进入高含水开发期。因此,运用水平井技术提升采收率,增加可采储量成了目前最有效的手段。因此,针对肇州油田油层较薄、薄互层发育、井间连续性差、断层发育等地质特征及水平井开发效果好但目的层随钻难控制、钻遇薄砂层多、单砂体空间难认识等问题。本次研究开展薄互层窄
独立后的哈萨克斯坦经过多年的曲折发展,其国民经济环境不断在改善,已经成为中亚地区综合实力最强的国家。在教育水平、公共服务水平、能源产量和就业环境方面得到了突破性的
太极拳是中华民族宝贵的文化遗产,蕴含丰富的哲理和医理,是一项非常有价值的可终身进行锻炼的体育项目。随着全民健身计划广泛实施和高校体育教改的进一步落实,太极拳以其养身、健身等优势,成为高校体育教学中必修的科目之一。但是现在大学生的性格特点与太极拳本身具有的内涵不相符,导致学生认为太极拳内容老,练习起来枯燥乏味,所以对太极拳提不起兴趣,甚至很快就失去耐心,从而放弃练习太极拳,推广传统文化是各高校应自觉
奥克梯隆(ocotillol)型人参皂苷是一类C17位侧链含有五元含氧环的四环三萜类皂苷,ocotillol,RT5和F11是其主要活性成分。药效学研究表明其在抗心肌缺血、抗炎、抗肿瘤以及滋养
烟粉虱Bemisia tabaci(Gennadius)是一种危害农林植物的重要害虫,由于传统化学防治带来的烟粉虱抗药性及环境污染问题。因此,利用球孢白僵菌防治烟粉虱逐渐成为生物防治方面的研究重点,但是杀虫潜伏期长、容易受到环境因素影响等缺点限制了其发展。对白僵菌进行菌药复配或者剂型化处理,是有效地解决这些问题的潜在途径。主要研究结果如下:1.球孢白僵菌对烟粉虱的室内毒力测定:采用喷雾法测定出球孢
我国是一个多民族国家,国家对少数民族和少数民族地区的经济发展极为重视,先后针对民族地区出台了多个发展规划及一系列优惠政策。但是由于部分民族地区的地理条件、历史因素
当今中国对高校美术的教育越来越重视,中国的高等教育从精英型逐渐向大众型转化已成为一个不争的事实,但实现教育大众化不能只体现在人数上,更应该体现在高校培养出的人才能否适应社会发展的需求,与社会发展的需求相适应。所以中国高等教育无论是专业教育还是素质教育都对大学生的培养标准提出了更高的要求。而现在,高校版画逐渐成为当代版画创作的主要场所,担任着版画艺术传承非常重要的后备人才力量,为中国版画今后的发展源
由于出现了付费的门槛,知识获取者检索到知识后需要对知识付费才能够查看相应的内容,为此知识获取者需要通过其他消费者的评价或其他途径了解知识产品,然后会决定是否购买产
端到端任务型对话作为对话系统的一个重要分支,可实现用户输入到系统回复的直接映射,迁移能力强,具有较强的工业应用前景。但端到端方法的任务型对话仅处于研究初期,设计的模型大多结构简单,在语义回复能力、逻辑表述能力上和实际应用仍存在一定距离。目前大多公开研究工作中具体存在以下问题:1)端到端对话系统语义编码存在忽略多轮对话的轮级结构信息、长文本语义信息丢失问题。2)端到端对话系统的外部知识融合方法存在破