基于数据驱动和模型驱动的高光谱影像空谱融合方法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:chen0507
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
高分辨率的高光谱图像具有丰富的空间信息和光谱信息,便于目标检测、识别和跟踪,因而被广泛应用于军事侦察、农业生产和灾害预测等领域。然而,受限于物理设备和成像方式,我们无法获取同时在空间和光谱上都具有高分辨率的高光谱图像,这极大地限制了高光谱图像的应用的精度。因此,通过高光谱图像和同一场景下的全色或多光谱图像融合成高空谱分辨率的目标图像成了一个热门的研究课题。模型驱动融合算法具有严谨的物理意义,但其性能依赖于人工先验假设。基于数据驱动的深度神经网络具有强大的特征学习和非线性建模能力,具有更充分和自适应的先验拟合能力。然而,现有的经验主义调参式“黑箱”模式下的网络缺乏数学理论和高光谱空谱融合模型的指导,泛化性差。数据驱动深度神经网络和模型驱动融合算法的优势联合可以实现在数学模型的启发下,指导网络向合理的梯度下降方向对网络参数进行端到端的训练,提高模型的泛化性。受上述分析的启发,本文着力于面向高光谱研究基于数据驱动和模型驱动的空谱融合网络,并提出了两种融合方法,并在多个公开的模拟数据集和真实场景数据集上进行了相关实验。本文主要的研究内容和创新点总结如下:(1)针对上述问题,创新性地将拉普拉斯金字塔技术引入深度学习,构造了一种轻量级的高光谱空谱融合金字塔网络,引入多分辨率分析技术驱动深度学习模型,提出了一种空间细节交叉提取和注入模型,明确了细节提取和细节注入两个子模块在融合模型中的物理意义,实现部分模块的可解释性。在重建的过程中,我们尝试将不同的客观评价指标融合进损失函数,并作了相关的对比实验。(2)为了进一步提高深度学习网络的可解释性,提出了一种基于空谱双支路优化模型驱动的深度学习融合方法。该方法将融合问题转化成空间细节补充和光谱校正两个目标函数并且转化为迭代求解的子问题,然后将它们展开成一个可解释的深度学习网络。经过模型和算法的精心设计,网络中每个模块本身都有其特定的物理含义,它们之间的所有连接都准确对应算法的实现操作符。为了评估所提出算法的有效性,在多个公开的高光谱融合数据集上进行了消融实验和对比实验,结果证明,该算法的融合效果的空谱保真度在对比方法中最优。
其他文献
近年来,卷积神经网络在图像特征学习领域取得了令人瞩目的成功,能够有效地解决图像分类、图像分割、目标识别等问题。为了追求更高的性能,研究人员设计出许多结构精巧、参数量大的模型应用于各种计算机视觉任务当中。然而,设计一个良好的神经网络结构并非易事,不仅需要设计者掌握深度学习的相关专业知识,而且要求设计者能够针对不同任务的特点设计适合的神经网络结构。因此,提出了神经网络结构搜索来解决神经网络结构的设计难
学位
随着5G网络的普及和移动终端设备的发展,人类社会已经步入大数据时代。大数据存储与分析技术是信息领域的关键技术,对社会经济的发展具有及其重要的推动作用。信息检索作为大数据技术的重要分支,受到了国内外学者的广泛关注。哈希检索具有存储成本低、查询速度快等优势,是大规模数据检索的重要技术手段,拥有广阔的发展前景。传统的基于批量数据处理的哈希方法只能用于处理静态数据,无法适应在线场景下的流数据处理。在线哈希
学位
随着遥感领域技术的飞速发展,带来了随年份递增的大量的影像数据,这些数据仍然依靠人工解译处理。而人工作业模式,己经越来越无法满足高效、快速提供图斑解译的应用要求。近年来飞速发展的深度学习技术为大数据时代的图斑解译提供了新的解决方案。与传统方法相比,深度学习方法完全基于数据驱动,可以批量处理输入地图像,快速地实现遥感解译工作。因此本文使用深度学习中的语义分割实现了可自动化的生产建设项目图斑解译工作。然
学位
在现在信息化社会飞速发展的年代,电源管理芯片不仅在传统的消费电子领域应用广泛,电动汽车、物联网、医疗、工业机器人、人工智能等新兴产业日新月异的发展也为电源管理芯片开辟了新的市场,推动着电源管理芯片技术的革新与进步。针对在通信、工业、汽车、新能源等领域对高效率、低纹波、大功率的电源芯片日益增长的需求,传统单路DC-DC转换器的应用越来越局限,而双路交错技术的纹波特性好、功率开关管应力小等诸多优势慢慢
学位
在人工智能的时代,面向大数据的机器学习算法为人类现实生活提供大量的便捷。但是这些中心化的算法往往需要收集大量的隐私数据,这也引发了人们对数据安全问题的担忧。在这样的背景下,联邦学习的概念被提出。联邦学习框架里,个人隐私数据无需上传到中央服务器或第三方平台,而是保存在个人设备本地,并直接在本地训练联合模型,中央服务器只收集本地更新参数用于联合模型的更新。联邦学习为使用去中心化数据训练联合模型提供解决
学位
遥感图像在军事、农林、水利、交通等领域的应用十分广泛。受限于传感器的成像特点,无法通过单一传感器获得同时具有高空间分辨率与高光谱分辨率的遥感图像,遥感图像融合技术通过将同一场景不同传感器所拍摄的遥感图像进行结合,从而得到高质量遥感图像,以便后期各相关领域使用。本文研究了基于图像多方向特征及模糊神经网络的遥感图像融合算法,具体内容如下:研究了基于优化模糊结构的模糊神经网络的遥感图像融合算法,设置了四
学位
随着深度学习的浪潮不断袭来,基于深度学习的各种算法的性能极限也在不断刷新。然而作为实现这些人工智能算法的重要基础,足够的优质数据却并不容易获取。随着人们隐私意识的提高和相关法律法规的完善,现实场景中数据分布呈现有限和分散的孤岛。联邦学习算法的提出为在法律约束下使用分布式数据训练联合模型提供了解决方案。然而,传统的联邦学习算法面临着通信成本高、系统异质性、统计异质性、模型异构性和激励措施设计等挑战。
学位
电感式位置传感器是一种非接触式位置传感器,因其具有高可靠性、高分辨率、高线性度和优秀的抗杂散磁场能力等优点而广泛应用于汽车电子、机器人行业、自动仓储行业、太阳能行业、航空航天以及轨道交通运输等行业。随着位置传感器产品不断更迭,电感式位置传感器在未来向着高精度、低噪声、低输出延时、高灵敏度等方向发展,这些发展方向对电感式位置传感器设计提出了更高的要求。本文以提高精度为主要目标,采用0.18μm 30
学位
语义分割作为计算机视觉研究的重要任务之一,能够对图像进行稠密预测,即实现像素级分类。语义分割由于能够提供丰富的场景信息,而被广泛应用于诸多领域,如自动驾驶、医学病灶区域分割、虚拟现实、土地情况检测等。与传统方法相比,深度学习出于其优秀的学习能力和特征表示能力,被广泛应用于很多领域,并促进了这些领域的发展。近年来,在深度学习的推动下,图像语义分割方法取得了长足的进步,但仍存在一些问题。例如,许多语义
学位
图像及视频是信息的高维载体形式,由于与人眼获取信息的方式最为接近,包含大量直观、丰富且有价值的信息内容,因此成为最受欢迎的信息媒介。然而,由于云环境中的不可信存储,以及公共信道中的安全传输难以得到保障,某些包含了机密内容或隐私信息的图像及视频数据面临着泄露、窃取和篡改等严重安全问题。因此,图像及视频内容的安全保护是非常重要且有挑战性的工作。针对上述挑战,从数字图像及视频诞生之初,便有众多学者从不同
学位