基于光流与全卷积神经网络的平面物体跟踪算法研究

来源 :郑州大学 | 被引量 : 0次 | 上传用户:crazyasp
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机设备的不断完善以及计算机视觉技术的不断发展,作为计算机视觉的核心技术之一,平面物体跟踪技术成为计算机视觉学术研究的热点领域,并在增强现实,监视,机器人视觉等方面具有广泛的应用。虽然近年来平面物体跟踪技术有了非常大的进展,但在尺寸缩放,旋转,透视失真等外界条件影响下,平面物体的跟踪识别可能会出现不同程度的丢失或延迟。为此,本文对平面物体跟踪算法展开深入研究,主要工作如下:(1)考虑到在实际应用中,跟踪算法需要时刻面对复杂多变的环境,而且目前大多数的平面物体跟踪数据集是在室内环境拍摄,这种缺乏复杂背景的图像序列无法很好模拟自然复杂多变的环境。因此,本文构建了一个用于平面物体跟踪的数据集,包含40个物体,共280个在自然采集并带有标注的图像序列。其中每个物体包含7种运动状态:尺度变换、旋转、透视失真、运动模糊、遮挡、移出视野以及无约束运动。此外,为了减轻人工标注的工作量,提出了一个半自动的标注框架辅助人工进行标注,并使用校正误差评测了16种先进的平面物体跟踪算法,并分析每个算法的性能。(2)基于关键点的平面物体跟踪算法能够很好的适应复杂的场景。而基于SIFT的平面物体跟踪算法作为这类方法中经典的方法,具有良好的跟踪效果。但是这类方法仍存在错误匹配点较多,影响跟踪精度的问题。在此基础上,考虑到输入图像序列具有时序性,而光流法能够很好地利用这种时序信息。因此,将光流法与基于SIFT的平面物体跟踪算法进行融合,提出了基于关键点并融合光流的平面物体跟踪算法。实验证明,基于关键点并融合光流的平面物体跟踪算法相比现有的平面物体跟踪算法性能更优。在所构建的自然场景平面物体跟踪数据集下,校正误差阈值为5时,提出的方法的跟踪精度相较于经典的平面物体跟踪算法平均提高了3.8%。(3)将局部特征匹配的深度学习方法应用于平面物体跟踪任务中虽然能够取得良好的效果,但速度受输入图像中关键点个数的制约。因此,本文提出了基于全卷积神经网络的平面物体跟踪算法,该算法能够缓解关键点个数对跟踪速度的影响。该网络的输出特征映射与输入图像具有相同的大小。在训练的过程中,由于训练过程存在正负样本极度不均的问题,导致网络训练的困难。为了缓解这个问题,采用了难样本采样的方式对最难负样本进行采样,将采样后的正负样本送入损失函数,从而进行网络的训练。实验结果证明,与基于深度学习的平面物体跟踪算法相比,本文提出的算法在校正误差阈值为5时,提出的方法相较于MATCHNET提高了4.1%,不受输入图像中关键点个数对跟踪速度的制约且在速度上具有较大的优势,并且该方法在通用的平面物体跟踪任务中也取得良好的效果。
其他文献
近年来,中国法治建设取得巨大成就,法律翻译对塑造中国对外形象、促进对外交往发挥着前所未有的作用。地方性法律法规作为中国特色社会主义法律体系的重要组成部分,其翻译工
随着信息技术的发展,我们的世界正在变的越来越小,智能设备和移动网络的完善使得社交媒体普及开来。微信自2011年推出以来,在众多移动社交应用软件中脱颖而出,成为了国内最受
工程科技人才尤其是高层次工程科技人才的培养一直在我国人才战略中占据重要地位。党的十九大、制造强国战略、技术的快速更新、全球竞争格局无不提出对高素质工程科技人才的
新《中华人民共和国环境保护法》已经明确了我国环保NGO的法律主体地位,本文将把环保NGO的主体资格作为一个法律问题,研究其的发展历程以及现状。文章分为五个部分,分别为引
人体行为识别技术(Human Activity Recognition,HAR)是普适计算和模式识别的一个活跃研究方向,在医疗护理、体育运动和智能家居等领域有着广泛的应用。随着计算机和微电子技
随着经济全球化的不断发展和“一带一路”倡议的提出,尽管国际政治与经济形势充满着不确定性,但中国和外国贸易往来日益密切仍然是主流大势。然而,对于母语为中文、英语水平
在目标跟踪领域,运动目标在跟踪过程中会遇到形变、遮挡或出现相似物体干扰等各种复杂情况,这些都是跟踪技术的难点。针对这些问题,目标跟踪技术不断完善、发展,相关滤波跟踪算法因为其快速跟踪特点和跟踪精度优势被广泛应用。本文主要对目前一些主流的传统相关滤波算法进行研究,通过分析其存在的缺陷以改进。在构建目标外观模型时,传统的相关滤波算法采用梯度直方图、颜色、纹理等特征描述目标信息,这些特征缺少目标语义信息
大学出版社是我国出版队伍的一个重要分支,在教育出版与学术出版中发挥重要功能。大学出版社依托高校而成立,对于提高所在高校的学术影响力也有重要作用。当前我国大学出版社
机会网络属于延迟容忍网络(Delay Tolerant Network,DTN)的一种,由于机会网络中的节点可以频繁的移动、断开和连接,造成端对端之间根本不存在一条完整的链路,因此机会网络主
为推动更广泛、更深层的东西方符号学对话,首届中国符号学基地联盟会议暨符号学高级研修论坛(以下简称为符号学大会)于2018年6月31日至7月2日在南京师范大学随园校区召开。报