基于深度强化学习和元学习的光学遥感影像目标检测

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:jessiexsu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
光学遥感影像是遥感成像中的重要组成成分,它可以应用于观测和监控地球表面各种物体和目标,如机场、飞机、建筑物等,因此其在国防安全、城市建设规划、灾害监测等领域具有广泛的应用价值。这些广泛的应用需求给光学遥感影像自动化解译带来了更高的要求。随着我国光学遥感技术的快速发展,光学遥感影像获取的数据量越来越丰富,尺度越来越大,分辨率也越来越高。此外,虽然光学遥感影像数据丰富,但是有标签的数据仍然非常稀缺。许多研究人员针对光学遥感影像的目标检测提出了各自的解决方案,但是传统的方法在面对大尺度、高分辨、小样本等挑战时仍存在许多不足之处。近十年以来,深度学习方法尤其是卷积神经网络(Convolutional Neural Networks,CNN)大放异彩,在目标检测和目标跟踪等计算机视觉领域一骑绝尘。随着高性能计算技术的发展,越来越多的学者开始将深度学习的方法引入到光学遥感影像解译中,并取得了不错的效果。本文结合光学遥感影像的特点,深入研究并利用了深度学习方法,在光学遥感影像目标检测方面做了一些研究,具体工作如下:1)针对光学遥感影像尺度大的问题,提出一种基于小波变换和深度强化学习的光学遥感影像目标检测方法,首先利用小波变换将原始RGB(Red Green Blue)图像变换为多个小波子带,然后用深度强化学习从多个子带中筛选出有限个数的子带,在降低输入数据尺寸和通道数的同时将检测性能提升了2%;此外,为了让传统的目标检测网络关注到输入数据中小波的尺度特征和方向特征,引入了离散小波多尺度注意力机制,能够显著提高网络对特征的提取能力和泛化能力,进一步提高目标检测网络的性能。2)针对现有背景减法特征提取能力弱和标注数据稀缺的问题,我们利用条件生成对抗网络(Conditional Generative Adversarial Networks,CGAN)和领域对抗神经网络(Domain-Adversarial Neural Network,DANN)设计了一个新的背景减法网络。该方法利用所生成的背景和当前的视频帧,在自然视频上训练,通过领域自适应方法得到了VHR光学遥感视频的背景减法结果。我们提出的方法利用深度网络和生成对抗网络(Generative Adversarial Networks,GAN)对抗训练的思想,解决了传统背景减法特征提取能力不强的问题;利用领域自适应的方法克服了当前遥感数据集缺少数据标注以及训练数据与测试数据的特征分布相似但不同的困难。此外,我们提出了将原始视频先切割后拼接的并行处理方法,不仅解决了传统方法无法处理大尺度遥感视频的困难,而且大幅提高了运算速度和计算效率。3)针对光学遥感影像样本少、标注稀缺的问题,我们提出了基于元学习的光学遥感影像小样本目标检测方法,利用支持图像和查询图像之间的特征相似性来进行特征匹配和相似性学习。我们在Faster R-CNN的基础上,首先采用backbone对输入的支持图像和查询图像进行特征提取,之后采用特征匹配模块匹配支持分支特征和查询分支特征并得到热力图,送到RPN中生成区域建议。最后,使用相似性度量模块度量全局相似性,局部相似性和像素级相似性,并进行相似性融合,得到最终的相似性结果和边界框回归位置偏移量。
其他文献
随着信息时代的蓬勃发展,通信技术也在不断的革新,为了满足人们日益提升的通信需求,第五代移动通信系统(5G)应运而生,作为承载物联网和大数据时代的新基建,5G在未来智慧城市的建设中将成为不可或缺的载体。基站天线作为移动通信系统的重要组成部分,负责基站与终端设备之间无线信号的发射与接收。目前商用的5G基站天线主要工作在Sub-6波段,为了克服相对较高的传输损耗和日趋复杂的空间电磁干扰,新一代基站天线采
超快荧光技术被广泛用来研究微观体系的相互作用及动力学过程。通过超快荧光技术可以得到蛋白质水动力学过程中的Stokes位移,而线性响应理论一直被用来诠释Stokes位移和体系平衡态涨落之间的关联,溶液中的Stokes位移遵循线性响应理论。在大部分文献报道中,基态能量面上的自然涨落常常被用来评估荧光谱的非平衡态弛豫过程,然而,本文通过模拟实验研究发现,当体系基态和激发态能量面有所不同时,Stokes位
随着LDPC码作为第五代移动通信系统(5G)增强移动带宽场景下数据信道的编码方案,以及面对新一代移动通信(6G)在需求和技术上所展开的研究工作,都充分说明了无论是在未来空天地一体化的编码方案设计工作中,还是针对目前5G市场的快速推进,与LDPC码作为信道编码方案中所表现出的优异性能是分不开的。针对卫星通信DVB-S2标准中采用LDPC码和BCH码级联的码结构已经具有接近香农限的性能,可是随着卫星通
毫米波雷达因其同时具有较高的距离分辨率与速度分辨率,近些年逐渐走入人们的视野,开始在自动驾驶、智能家居等领域发挥作用。现有的毫米波雷达目标分类方法通过对目标回波进行预处理后获得目标时频图、距离多普勒(Range Doppler,RD)图、切片级点云或其他类型数据后,在不同特征域内提取能够反映目标微动、微距等信息的特征,将特征向量输入到分类器中来完成目标分类。但是,通常情况下目标回波只能反映目标当前
外贸是拉动我国经济增长的"三驾马车"之一,为了促进外贸更好地发展,我国根据国际惯例,出台了一系列的出口退税政策。从目前外贸企业出口退税的情况来看,由于各种各样的原因,这一领域存在很多亟待解决的问题。本文首先对于外贸企业出口退税政策进行了具体的探讨,随后对当前外贸企业出口退税方面的常见问题进行了一一总结,最后围绕本文所谈到的各种问题,结合相关研究成果以及自身的理解,提出了解决外贸企业出口退税问题的策
量子计算相较于经典计算在一些难题上表现出来的高效的计算能力,吸引了许多学者们的关注,迅速成为时下的研究热点。但在量子计算过程中,难以避免会受到量子噪声的干扰,为解决这个问题,量子纠错码技术应运而生。稳定子码是一类广泛应用和研究的量子纠错码,但稳定子码的译码问题一直以来都是个难题,目前比较活跃的研究领域是那些具有代数结构的码,其中,拓扑码独特的编码结构,使其译码问题成为稳定子码中研究的热门对象。神经
与针对自然图像的目标检测技术相比,针对遥感图像的目标检测技术面向的数据、应用领域均有不同。从数据角度,主要针对低空卫星拍摄的大场景遥感图像,拍摄视角为俯视;从应用领域角度,主要应用于军事目标侦测、船只搜救、地图绘制等领域。因此,研究针对遥感图像的目标检测技术有重要意义。本文从现有目标检测技术出发,针对遥感图像目标小、存在密集目标等特点,对现有目标检测技术进行改进,主要贡献如下:(1)提出基于注意力
公共场所安全对国家的建设发展具有重要意义。在人们日常生活的公共区域,如:交通十字路口、购物中心、住宅小区等,安装着大量的监控摄像头来进行公共安全监控。因此,如何快速、实时、智能地对视频进行异常事件分析成为计算机视觉领域一个受关注度较高的研究方向。深度学习具有模型容量大、自适应强等特点,并且在图像处理方面硕果累累。本文利用深度学习的相关知识,设计和实现了一个具有良好性能的视频异常行为检测网络。首先本
自1880年发现压电效应,很快传统的压电材料(无机钙钛矿陶瓷晶体和有机聚合物)就在机电传感器、致动器和能量转换器等领域得到广泛应用。然而,这些材料的绝缘特性限制了其压电极化和电子之间的耦合作用发挥。2006年,王中林院士首次利用压电半导体材料制备得到一种新型的压电纳米发电机,随即很快提出压电电子学概念和相应理论。压电电子学效应是将压电极化与半导体性质有效结合,通过压电极化电荷调控半导体界面能带和电
在脑机接口领域中,由于脑电信号能够直接反应人脑对外界变化的认知处理过程,因此利用它进行目标检测成为很多学者的关注焦点。利用脑电信号进行目标检测的关键在于:(1)对脑电信号的分析处理。小样本的脑电数据集往往会导致模型不能学习到泛化能力强的特征,且在二分类的脑电实验中,数据集中类别不平衡,正样本数量远小于负样本的数量,导致模型在训练中严重偏向于样本数较多的类别,对实际的目标检测问题效果很差;(2)设计