基于金字塔式GAN与轻量化网络知识蒸馏图像超分辨研究

来源 :安徽大学 | 被引量 : 0次 | 上传用户:xy0382
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像超分辨生成的高质量超分辨率图像对于航空、安防、医疗以及生活娱乐等方面的图像运用具有重要作用。目前图像超分辨研究多是改变卷积神经网络的特征提取结构,提取较好的特征。图像超分辨使用生成对抗网络(SRGAN)可以生成纹理丰富、高分辨率的图像。轻量网络不仅有更少的网络参数还可以生成高质量的超分辨图像。本文基于SRGAN提出金字塔式GAN网络。此外,本文还基于知识蒸馏提出轻量化网络的图像超分辨知识蒸馏算法。本文的主要工作如下:(1)本文提出金字塔式GAN图像超分辨。在研究SRGAN时,发现SRGAN网络模型生成的超分辨图像虽然纹理丰富,但是也存在着高分辨图像质量差、纹理不合理,局部图像不平整等问题。针对上面问题,本文基于堆叠GAN(StackGAN)多阶段生成器的结构提出金字塔式的多阶段反馈网络结构。首先,根据图像超分辨率训练过程中数据集和生成图像之间的关系而提出中间监督和级间反馈损失,监督中间尺度超分辨图像的生成。然后,结合稠密连接网络(DenseNet)和注意力机制,将DenseNet结构中的转换层替换为我们提出的通道显著性和空间显著性结合的显著性块(Saliency Block)。最后,使用多损失函数训练生成器,分别是高层次图像数据分布的对抗损失、局部的图像纹理等特征的感知损失和低层次的像素之间的梯度损失。经过实验证明,基于金字塔式多阶段反馈网络结构相比单阶段的生成器生成的图像质量更高,显著性DenseNet有轻微的提升,梯度损失对使得生成的图像边缘清晰,局部图像纹理更加合理。(2)本文提出基于知识蒸馏的轻量化模型超分辨率。轻量化网络结构通过精心设计学习的结构不仅减少模型大小还生成高质量的超分辨图像,但是与极深网络结构依旧存在差距。本文基于知识蒸馏模型提出轻量化模型的图像超分辨知识蒸馏。让极深深度卷积神经网络引导轻量化的模型学习,从而提升轻量化网络的超分辨率的效果。此外,基于不平衡数据增强方法,提出对较难生成的训练集的学习。经过实验证明,图像超分辨知识蒸馏对于适当层数轻量模型超分辨有显著的提升和促进效果,不平衡数据增强方法对于轻量模型有轻微的提升。
其他文献
未来十年,改革开放初期的创业者,都将进入或者即将完成与“接班人”的权力交接。但是,家族继任者的成色,难以让父辈们高枕无忧。
碳排放交易在实施过程中很容易被利用为一种绿色壁垒,以达到维护当地经济利益之效。   碳税博弈正在步步升级。   一方面是酝酿将碳税范围扩大至航海领域的欧盟:欧盟计划在今年6月份制定出全球航空和航海运输行业碳排放税的征收价目表;一方面是坚决抵制的“其他国家”:2月22日,有关航空业碳排放问题的国际会议在莫斯科结束,来自中国、美国、俄罗斯及印度等全球29国的与会代表发表《莫斯科会议宣言》,提出
将民生的重要程度与GDP放在等量齐观的位置上,似乎足以印证民生的重要性。民生问题,涉及人均收入、社会保障、构建和谐社会等诸多方略,归结来看,国民经济的发展,更是依赖于民生问
噪声是由物体振动产生的对人造成干扰的声音。在国防航空领域,一些舱室内噪声直接影响工作人员的操作环境,噪声诱发的结构振动还可能影响设备的安全性和使用寿命。传统降噪方法对低频噪声抑制效果不佳,主动噪声控制(Active Noise Control,ANC)凭借良好的低频降噪性能得到人们的广泛关注。本文从理论、系统搭建、实验验证三方面研究并改进ANC系统。主要工作如下:(1)介绍经典多通道ANC系统的结
无粘性土的压实度效果与其含水量有较大的关系,通过对不同含水量下的无粘性土进行振动压实试验,得出结论,可供实际工程参考采用。
“蛇吞象”,三一重工国际化的新年开局之举。     一次次大规模的海外扩张,让三一重工成为同行业乃至整个中国民企“走出去”进程中的“试水者”……   日前,三一重工以3.6亿欧元收购了世界混凝土工程机械巨头德国普茨迈斯特公司,与这家德国劲旅携手,标志着这家中国民营重工企业将完全收购有着“大象”之称的德国机械巨头。    精细化的并购路径   普茨迈斯特是全球知名的工程机械制造商之一,尤其在
嵌入式系统的研究和开发是当前信息技术热点之一。如国家大力支持发展的智能硬件、物联网、智能家居、机器人、物理计算等领域都需要嵌入式系统的支撑。如今技术迅猛发展,用
基于等距离匹配思想,提出一种快速的柱面全景图像拼接算法。对于相邻两幅待匹配图像,设定相同大小的比较区域,从两幅图像中心垂线开始向重叠方向同步长移动并进行比较。在比较区域中采取随机取点的方式,计算对应点的颜色差值并累加,若达到某一设定阈值,则停止计算,移动比较过程中,计算次数最多的比较区域中心位置即为最佳匹配位置。该算法可以尽早排除非匹配位置,减少计算量,提高全景图像生成速度。利用该算法思想对随机顺
将连续小波变换技术和统计检验结合用于检测信号中具有一定时频分布的瞬态成分,指出连续小波变换具有分离信号中瞬态成分和噪声的作用.提出一种基于连续小波变换和统计检验的
[摘要]文章对国家电网备件库的订单调度进行了研究。根据备件库订单调度特点,在对比“先来先服务”的调度算法和基于优先级调度算法的优缺点基础上,提出了无人值守的全自动备件库调度:①出库优先于入库;②基于先来先服务的入库订单调度算法;③基于优先级的出库订单调度算法,大大提高了订单的调度效率。  [关键词]订单调度算法;先来先服务;基于优先级调度  [DOI]1013939/jcnkizgsc201801