【摘 要】
:
自生成对抗网络被引入图像超分辨率重建以来,越来越多的相关模型被提出用来提高超分辨率重建图像的视觉效果和图像质量。如何针对不同类型的图像设计适合的算法模型,并将算法轻量化使其能够实用化,是一个值得深入探讨和研究的主题。本文针对可见光图像和红外图像在不同的实际环境中分别设计了适应其特点的对抗生成网络模型,在提高主观视觉效果的同时,降低了算法的模型复杂度,避免模式坍塌和梯度消失等现象的出现。主要研究内容
论文部分内容阅读
自生成对抗网络被引入图像超分辨率重建以来,越来越多的相关模型被提出用来提高超分辨率重建图像的视觉效果和图像质量。如何针对不同类型的图像设计适合的算法模型,并将算法轻量化使其能够实用化,是一个值得深入探讨和研究的主题。本文针对可见光图像和红外图像在不同的实际环境中分别设计了适应其特点的对抗生成网络模型,在提高主观视觉效果的同时,降低了算法的模型复杂度,避免模式坍塌和梯度消失等现象的出现。主要研究内容包括:(1)针对基于学习的图像超分辨率重建算法中存在的边缘模糊,纹理细节不足等图像质量问题,以及网络参数总量庞大,算法复杂度高等现象,基于深度分离卷积和对抗生成网络,文中提出了一种超分辨率重建算法(Depthwise Separable Convolution Dense Block-Generative Adversarial Networks,DSCSRGAN)。首先,设计新的深度分离卷积残差块作为基础构建模块用于生成器网络,该模块提高了学习和提取图像特征能力的同时也大幅减少了参数总量,对于判别器网络则舍弃批归一化层,减少了图像伪影。其次,设计了频率能量相似度损失函数,以约束生成器网络生成质量更好的超分辨率重建图像。(2)针对红外图像信息简单、纹理单一、特征少和模式单一的问题,设计了全新的基于异构核卷积结合对抗生成网络的红外图像超分辨率重建算法(Heterogeneous Convolutional Wasserstein GAN,Het SRWGAN)。首先,引入异构核卷积,在其基础上设计出一种即插即用的异构核卷积残差块,该残差块的引入相比于传统的卷积模块能够增加神经网络的感受野,获得更丰富的图像细节纹理和结构信息。其次,还能减少模型参数量,以避免模式坍塌的现象出现,同时降低训练时长以及模型对训练算力的要求,拓展算法的使用场景。为更好实现有监督学习,提出了适用于红外图像超分辨率重建的梯度损失函数用以约束生成器网络。(3)受迁移学习的启发,针对红外图像难以获取、通用训练集较少等问题,提出了一种以可见光图像为训练数据集,结合少量红外图像样本,实现红外图像超分辨率重建的方法:渐进型超分辨率对抗生成网络(Progressive Super-resolution Generative Adversarial Network,PSRGAN)和与之适应的多阶段迁移学习策略。通过引入信息蒸馏的方法获取可见光图像的特征分布,结合多阶段迁移学习策略进一步将红外图像、可见光图像的抽象特征映射到同一个特征空间实现红外图像的超分辨率重建。实验中PSRGAN结合多阶段迁移学习策略,可以充分利用两种不同类型的图像实现红外图像的超分辨率重建,该方法在主观视觉效果和客观指标评价方面效果良好。
其他文献
随着计算机科学和人工智能的发展,视觉跟踪技术已经广泛地应用在视频监控、导航定位、航天驾驶等领域。跟踪本质就是根据视频第一帧中的目标信息在后续帧中持续确定目标的位置和尺寸,但是当目标出现快速运动、形变、遮挡等干扰时现有的目标跟踪算法不能准确地预测位置,针对这些问题并为提升跟踪器的性能,文中基于时空正则化相关滤波目标跟踪算法进行改进。具体工作如下:(1)首先为提升目标的跟踪精度和抗干扰性,选择提取目标
现有室内定位系统中的核心技术种类繁多,其中包括超宽带、Wi-Fi、地磁、声信号等,各自存在不同的优缺点。如何实现在兼顾高精度定位的同时,其它因素亦能为广大用户所接受的室内定位系统,一直是室内定位领域的热点和难题。本文提出了一种基于智能手机的声信号室内定位方案,该方案采用人耳不可闻频段的声信号,充分利用智能手机自带的麦克风、计算和通信功能,在室内环境下实现了高精度的鲁棒定位。本文的主要工作如下:(1
随着我国大型公共建筑数量的迅速增加,建筑能耗也在持续增加,据统计建筑能耗占据总能耗的39%,这对我国的可持续发展战略产生许多不利的影响。其中建筑能耗主要是暖通空调系统消耗的能源,因此亟需建立准确的建筑房间数学模型,并优化暖通空调系统的控制系统,实现减少暖通空调系统的能源消耗。变风量空调系统凭借其显著的节能以及令环境舒适的优势已用于各个大型公共建筑。但大型公共建筑的多区域变风量空调系统是一个多变量、
曲轴作为汽车发动机的重要零部件之一,其工作环境恶劣,受力情况复杂,因此,对曲轴的性能寿命要求日益增加。而曲轴连杆轴颈作为动力传递部位,承受了主要的作用力,易出现裂纹导致失效,因此需要对其进行感应淬火强化处理。本文以42CrMo钢曲轴连杆轴颈为研究对象,首先完成了电磁感应淬火的电磁场、温度场的理论分析,再利用有限元仿真软件模拟并分析了曲轴连杆轴颈感应淬火过程的温度场分布规律,并根据加热结束时的温度场
电子束作为一种高能量密度粒子束,广泛应用于各种高要求现代化加工。其中电子束流偏转与聚焦精度将直接影响着电子束加工的质量,特别是在电子束进行大角度偏转扫描时,由于受到像差等因素影响,电子束的焦点出现散焦现象,影响电子束的聚焦性能。为了提高电子束的加工质量,以及对电子束进行精准控制,实现电子束在偏转扫描的同时聚焦电流对应做出动态调整。本论文以功率6KW、加速电压60KV的工业电子枪系统为研究对象,对电
钕铁硼永磁材料自从被发现之后,便因其自身优异磁性能和相对低廉的成本而被广泛应用于各个领域,是支撑当代社会发展的重要材料之一。但是钕铁硼材料多相结构及各相间的化学特性差异,使其在某些暖湿环境中极易形成电化学腐蚀,造成磁体退磁失效,钕铁硼材料表面腐蚀成为限制其发展的重要因素。为改善钕铁硼材料表面的耐腐蚀性能,本课题采用磁控溅射技术,选用氮化钛靶材,在钕铁硼表面制备具有耐腐蚀性能的TiN陶瓷层。本课题选
干涉合成孔径雷达(Interferometry Synthetic Aperture Radar,In SAR)是伴随现代信息技术的发展顺势而生的一种雷达观测技术,它具有精度高、覆盖面广等优点,利用这项技术可以快速准确地构建地表数字高程模型。而在In SAR技术中,获取地表高程模型需要经过多个步骤处理,相位解缠就是其中一个步骤,其解缠精度对高程模型的准确建立有重要影响,故论文主要针对In SAR技
频率分集阵列(Frequency Diverse Array,FDA)雷达是由相控阵演变而来的一种特殊形式的阵列雷达,其发射波束方向图具有角度和距离依赖性,且能不依赖于移相器在空间中扫描,这使得频率分集阵列雷达在目标定位检测和成像等方面具有极大的应用前景。本论文主要针对频率分集阵列雷达成像时,存在目标位置模糊、旁瓣较高,以及目前成像自适应能力不足等问题,借助认知理论等,研究有效的算法来完成FDA多
Inconel617合金在高温下具有良好的瞬时和长期机械性能,其高抗氧化性,高抗碳化性被广泛应用在航空航天等工业领域。金属材料在应用中失效大多数都是从表面开始,而电子束熔覆表面处理技术是有效提高合金表面质量的方法之一,NiCoCrAlY可以提高材料表面的抗氧化性。在电子束熔覆过程中能量比较集中,合金表面形成熔池并产生较大的温度梯度及过熔现象,影响材料的机械性能。电子束熔覆温度场和熔池是当前研究热点
5CrNiMo热作模具钢价格低廉,常被用于制造大中型模具,在较高温度下具有良好的淬透性以及综合性能,但常规热处理后的5CrNiMo热作模具钢热稳定性严重不足,硬度低耐磨性较差,并且高温磨损是其主要失效形式。扫描电子束表面改性技术是近几十年来发展起来的一种新型表面处理技术,能够有效改善材料表面的综合性能。本文以5CrNiMo热作模具钢为研究对象,基于传热学原理,利用有限元仿真软件建立扫描电子束表面改