基于共性特征的红外与可见光图像配准算法研究与应用

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:cyt200388
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
计算机科学和信息技术等相关领域的蓬勃发展,使各种类型传感器的普及度大大提高的同时,人们对采集不同模态与频段图像的需求也快速增长。单一传感器捕获的场景信息表现出一定程度的局限性,难以满足更多应用的需求。由于不同类型传感器获取的信息之间具有天然互补性,能够在不同应用场景下进行应用。多源图像融合技术旨在将多种不同频段不同模态的图像进行分析整合,从而获得更为全面的成像信息。该领域中最为典型的即是红外与可见光图像融合任务,其在智能监控、自动驾驶、环境监测等方面已有大量的应用。而作为图像融合的前提条件图像配准技术对于融合的效果具有举足轻重的作用,因此也一直是学术界和产业界的研究热点。本文通过对传统算法在红外与可见光图像配准任务中进行实验,分析了传统算法对于多光谱配准任务瓶颈:特征描述子对共性特征的抽象描述性能。本文将采用由简到繁的思想,循循渐进达到最终目标。首先对相对简单的单光谱航空图像与卫星图像配准算法进行实验,通过采用The Inria Aerial Image Labeling Dataset进行自我标注与训练,得到对于视角变换与尺度变化具有一定鲁棒性的特征描述子,在University-1652数据集中进行实验,验证了算法的有效性。由于航空图像对于地面目标的拍摄时的环绕飞行,采集的航空数据可能具有较大视角变换与旋转特性,经典算法对于较大旋转角度的不足被较好解决,取得了较为理想的效果。其次,对于多光谱图像配准,由于红外与可见光图像之间由于传感器的成像原理不同,相同场景的灰度值之间呈现出非线性的映射关系,对传统基于手工设计的特征提取红外与可见光配准算法难以达到理想的效果。由于神经网络对于特征较高的抽象描述性能,想要通过训练来得到一个对于红外与可见光图像共性特征具有较高抽象描述性能的特征描述子。我们首先采用预训练的特征点检测网络对于RGB-NIR Scene Recognition Dataset数据集中成对红外与可见光图像进行特征点标注,以获得训练的标签。然后采用红外与可见光图像同时作为输入对预训练网络进行再次训练,以引入红外与可见光的共性特征信息。在XT2采集得到校园场景红外与可将光图像配准中的实验结果表明,训练后得到的算法能够取得理想的效果。最后,我们通过将配准算法在图像插值与融合算法中进行应用性实验的效果,证明了算法具有一定应用有效性。
其他文献
精神分裂症(Schizophrenia,SCZ)是一种慢性、持续的重大精神疾病,它在临床症状上表现各异,包括幻觉,妄想,行为异常,认知障碍和其他可变模式。精神分裂症病因病理至今尚未明确,分别有研究认为精神分裂症会影响大脑胼胝体结构和大脑功能交流。胼胝体(corpus callosum,CC)位于左右脑半球之间,是脑内主要的白质纤维束,起着整合两侧半球功能活动的重要作用。大脑功能连接是利用功能性核磁
随着社会不断地进步发展,健康饮食已经成为了人民日常生活的关注的重点。并且随着互联网技术的发展,人们虽然可以越来越方便的获取食谱相关的信息,但是在没有经过机器“大脑”的思考之后,只是经过简单聚合的、杂乱无章的数据输出问题的答案,已经无法满足人们对信息的精准性需求,进而,人们期待通过智能问答系统这种方式来更方便、快捷的方式获取健康饮食方面的信息。因此本文基于食谱知识图谱的问答系统,就是将食谱知识图谱作
我们要讨论的第一个问题,是由张广远的文章[2]遗留下来的。令△n表示复向量空间Cn中的单位开|x|<1。又令f:△n→Cn为全纯映射,M为一个正整数。假设原点0=(0,…,0)是f和它的M次迭代fM的孤立不动点。那么对M的每个因子m,原点也是fm的孤立不动点,并且可以定义fm在原点的不动点指数μfm(0),于是原点处的局部Dold指数也可如下定义:这里的P(M)是M的素因子集合,求和跑遍P(M)的
土地是各类生态系统的承载体,土地利用的一系列改变对生态环境质量具有一定的影响,是经济社会环境与自然生态系统之间相互作用的中间传递表现。同时,稀土作为经济生产和国防安全等方面不可或缺的资源,在全球战略资源中占据举足轻重的地位。随着生态空间、生境质量等名词的出现,大量定性和定量评价生态环境质量的理念和方法也随之广泛应用。本文在文献分析法的研究基础上,提出的基于InVEST模型的稀土矿区生境质量评价方法
复杂系统的监测会产生大量的多变量时序数据,对这些数据进行异常检测对维持系统正常运作至关重要。尽管最近出现了大量的多变量时序异常检测算法,但是他们大多数都有以下三个缺点。首先,他们忽略了多变量之间的交互关系,这通常会限制模型的表示能力从而导致异常检测的结果不理想,并且因为时序变量之间的关系往往是隐式的、难以通过先验知识预先确定的,这使得建模交互关系成为了一个不小的挑战。其次,他们大多使用循环神经网络
有机半导体由于其易加工,低成本等优势引起广泛的研究与关注。随着研究的不断深入,研究人员发现了有机半导体磁阻效应(OMAR),认为通过对磁阻效应进行研究可以进一步开发和改进出更好的有机半导体器件。研究者更是揭示了载流子和迁移率都能被磁场所影响,研究有机半导体磁阻效应对于器件的开发、利用和改进具有重大意义,这更促使研究人员想要揭开有机磁阻效应的神秘面纱,而有机磁阻效应是很复杂的,目前国际上都没有完整的
线粒体是细胞中的重要细胞器。线粒体的功能几乎涉及到细胞活动的方方面面,如能量代谢,细胞凋亡,细胞周期,钙信号,信号转导以及类固醇激素合成。线粒体功能障碍会造成多种线粒体疾病,如糖尿病、神经退行性疾病等。线粒体定位富含谷氨酸蛋白MGARP(mitochondrial-localized glutamic acidic richprotein)是在小鼠视网膜cDNA文库中筛选出来的线粒体膜定位蛋白,其
新时代以来,人民对精神文化的需求日益增长,社会各界文化自觉不断增强,公共博物馆也面临着新的发展形势和机遇,呈现出藏品体系化、展陈个性化、文创产业化、传播分众化、交流多元化、运维智慧化、功能多样化等主要特点,并且逐渐成为国家战略竞争和提升文化软实力的重要抓手。公共博物馆专业人才队伍作为推动其发展的根本性资源,是博物馆发挥社会作用和推动文博事业发展的主要力量。在新时代背景下,只有高度重视博物馆专业人才
随着云计算技术的快速发展和容器技术的逐步完善,越来越多的云服务商开始开发容器云产品,云计算技术提供一种新的资源交付方式,而容器的出现大大提高了资源的利用率。目前很多企业的IT基础架构还是以传统的PC桌面为主,随着企业规模的扩大和信息技术的发展,传统的PC桌面办公面临着很多弊端,如管理维护成本相对较高、灵活性较差、硬件升级困难等问题。基于企业的这种情况,云桌面产品应运而生,近年来,云桌面产品已经成为
在当今社会,人脸识别技术在许多领域被广泛应用,然而在例如车站、机场等人员流动频繁,周边环境复杂的无约束场景下,由于被识别人员存在姿态变化、表情变化、光照变化以及遮挡等问题,采集到的人脸图像质量参差不齐,因此需要对采集的人脸图像进行质量评估,同时也需要对无约束条件下人脸识别算法进行研究改进,要求设计的人脸识别算法能够克服无约束条件下众多干扰对识别带来的不利影响。因此解决在无约束条件下人脸识别的应用问