基于深度学习的高效图像复原方法研究

来源 :华东师范大学 | 被引量 : 0次 | 上传用户:woshichuanqi007
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
高质量图像具有更高的像素密度、更清晰的图像内容和更丰富的纹理细节,从而给人更好的视觉体验。但受气候条件、采集设备、采集方法、储存和传输等多种客观条件的影响,获得高质量图像并非易事。因此,一种能够将低质量图像恢复为高质量图像的复原技术至关重要。然而,图像退化过程是不可逆的,作为一种不适定问题,想要重建高质量的复原图像是一个极具挑战的任务。近年来,深度学习极大的促进了图像复原领域的发展。但这类方法往往通过构建庞大且复杂的网络模型来获得较高质量的图像,这不可避免的会消耗更多的计算资源和花费更多的执行时间,也极大的限制了它们的应用场景。为了解决这一问题,本文从特征增强和正则项约束的角度出发,通过充分利用待复原图像的潜在特征、额外先验和外部知识来研究高效且准确的图像复原方法,并以单图像超分辨率(Single Image Super Resolution,SISR)和单图像去噪(Single Image Denoising,SID)任务为切入点来验证提出方法的有效性。简而言之,本文提出三套自然图像复原方法,共涉及六种模型。具体研究内容及贡献如下:1.提出了基于多尺度特征增强的图像复原方方法。图像在不同尺度空间下会表现出不同的特征。基于这一发现,本文率先提出了利用图像多尺度特征进行图像复原的方法。具体而言,我们提出了两种多尺度特征提取模块,并根据它们构建了两个基于多尺度特征增强的图像复原模型:多尺度残差网络(Multi-scale Residual Network,MSRN)和多尺度密集交叉网络(Multi-scale Dense Cross Network,MDCN)。这两个模型实现了多尺度图像特征的提取、交互和融合,并分别在SISR和SID任务中取得了卓越的性能。通过充分挖掘和利用图像的多尺度特征,网络能够从几何特征中学习到增强图像的模式,从而使得能够构建出高效且准确的图像复原模型。2.提出了基于边缘先验指导导的图像复原方方法。充分利用图像先验对图像复原至关重要。在众多先验中,边缘先验是最有效的先验之一。然而,现有边缘检测算子对噪声极其敏感且通用性差。因此,本文提出了第一个用于直接从退化图像上预测和重建图像软边缘的深度边缘重建网络(Edge-Net)。同时,本文提出了两个基于边缘先验指导的图像复原模型:软边缘辅助网络(Soft-edge Assisted Network,Sea Net)和多层次边缘特征指导网络(Multi-level Edge Feature Guided Network,MLEFGN)。这两个模型利用Edge-Net提供的软边缘先验来指导图像复原并分别在SISR和SID任务中取得了卓越的性能。通过充分利用边缘先验,能够进一步刻画重建图像的边缘,约束解空间,从而使得能够构建出高效且准确的图像复原模型。3.提出了基于知识蒸馏的图像复原方方法。受退化图像和模型结构自身的限制,要使得轻量级模型重建出高质量的复原图像依然极具挑战。因此,我们引入知识蒸馏机制,通过利用网络自身深层次的潜在知识和外部异构模型所提供的额外知识以实现特征和先验的自动学习,从而让原本的轻量级模型性能进一步提升。为了实现这一目标,本文提出了两个基于知识蒸馏的图像复原模型:渐进式自蒸馏网络(Progressive Self-Distillation Network,PSDNet)和异构知识蒸馏网络(Heterogeneous Knowledge Distillation Network,HKDNet)。这两个模型通过引入外部知识来实现性能的进一步提升并分别在SISR和SID任务中取得了卓越的性能。通过引入知识蒸馏策略,能够让模型自动学习到更加丰富的信息并进一步约束解空间,从而使得能够构建出高效且轻量的图像复原模型。
其他文献
固醇调节元件结合蛋白(sterol regulatory element binding proteins,SREBPs)是动物脂质代谢过程中的一个非常重要的转录因子,在脂肪酸和胆固醇生物合成过程中,超过20种关键酶的表达受到SREBPs的调控。目前绵羊育种工作的一个重要方向就是通过调控脂质代谢改善肉质品质,尽管脂质代谢的调控相当复杂,但是通过调节SREBPs的表达来调控脂质代谢和脂肪沉积,仍是一
落叶松广泛分布于我国东北地区,具有优良的力学性能,随着我国天然林保护工程的实施和木结构建筑的发展,对间伐材和人工林的需求比例愈来愈大,目前小径级落叶松材作为建筑结构材存在着尺寸稳定性差、强度硬度较低、应力大等缺陷,多因素致小径级落叶松的加工利用存在困难。胶合木材料经胶合工艺制成,具造型复杂多样、材料高效利用的特点,为小径材作为结构材提供了契机。本研究通过小径级落叶松制成胶合木材料并创新性地设计生产
目前很多研究已证实芽孢杆菌能提高动物的生产性能,但大部分研究主要集中在宏观层面分析其益生作用,很少有研究就其益生机制进行深入系统的研究。芽孢杆菌对蛋鸡产蛋性能的改善主要与机体的激素水平、免疫功能、氧化应激反应、肠道屏障功能、肠道菌群结构、营养物质吸收、以及益生菌的次生代谢产物密切相关。本研究以海兰褐蛋鸡为研究对象,首先分析不同添加剂量的解淀粉芽孢杆菌BLCC1-0238对其产蛋性能和蛋品质的影响,
流行病学研究显示,氟暴露可以引起胃肠道症状,如食欲不振,恶心,呕吐,便秘,腹泻和腹痛等,而且有学者提出氟暴露可能是炎症性肠病(IBD)的诱因之一。小肠,是氟摄入体内后被吸收的主要部位(吸收摄入氟的70-75%),其是否受到过量氟暴露的损伤还不甚清楚;结肠,是炎症性肠病的主要发生部位,氟暴露对其的影响及其可能机制也知之甚少;肠道微生物,机体最庞大的微生态系统,对机体的正常运转至关重要,肠道菌群失调可
第一部分背景:在可视化动态监测机体生理及病理过程的光学成像中,得益于深层组织探测能力和高信噪比,近红外二区(NIR-Ⅱ,1000-1700 nm)荧光成像已成为目前研究领域热点。然而,大多数NIR-Ⅱ纳米探针因被肝脏、脾脏等器官的网状内皮系统(RES)捕获并大量滞留,无法正常代谢出机体,导致潜在的生物毒性极大地阻碍了其生物医学应用和转化。我们设计并合成了由β相Na YF4:Nd7%@Na YF4组
甘薯(Ipomea batatas[L.]Lam)是世界上营养最丰富的块根作物之一,其富含维生素、类胡萝卜素和花青素等促进健康的小分子抗氧化剂。紫心甘薯块根的紫色主要是由花青素的积累造成的,花青素可以清除自由基活性、减缓衰老、预防慢性退行性疾病等。因此,紫心甘薯很受消费者的青睐。花青素的合成除了受到结构基因和调节基因的调控,还受到miRNA等转录后水平的调控。本研究首次筛选了甘薯miRNA基因表达
第一部分目的:皮肤撕脱伤好发于四肢,多因强大转动力作用强行将皮肤与皮下组织从深筋膜的浅或深层剥离,同时伴有不同程度软组织损伤,常常形成与肢体相连的有蒂的撕脱皮瓣。由于撕脱部位的皮肤受到严重碾挫与牵拉,致使该处皮肤不仅受损严重而且主要的肌皮穿支血管亦严重破坏。撕脱皮瓣会严重缺血、缺氧,使得皮瓣早期便会发生组织生物学变化,然而这样“隐性”改变并不能立即出现明显的临床征象,若仅依靠临床上常用的检测标准来
目标传统化肥及农药的过量使用造成的面源污染极大限制了现代农业的绿色、高效、安全发展。寻找新型肥料的替代品及提高作物自身免疫及抗病等抗逆能力是解决上述发展瓶颈的有力措施之一。紫球藻是一类单细胞真核红藻,由于能大量合成并分泌胞外多糖而受到研究者的广泛关注。但紫球藻胞外多糖的生理活性尤其是在提高作物品质及抗逆性方面的研究较少。基于此,本文主要研究内容包括:(1)影响紫球藻生长、色素含量、胞间多糖及可溶性
桃作为五果之首,在果业发展中的地位一直处于稳中有升的势态。然而,近年来的极端气候导致桃树的冷害和冻害发生频率及程度都在不断增加。本研究以生产中不同桃品种为试材,从中分离出植物对低温逆境响应的主要信号转导路径中的两个关键转录因子基因CBF和ICE,并对它们进行相应的信息与功能分析研究,希望为桃抗寒机理及抗寒能力改良的研究提供分子层面的信息与基础。主要研究结果如下:1.以梨树CBF基因(AEG6473
土壤是地球生态环境的重要组成部分,是农业生产的基本资源。随着工业的快速发展,各种污染源增多使得土壤被重金属污染日益加剧。由于土壤重金属污染对生态环境、农畜产品品质、健康生活等都带来严重影响,因此近年来对重金属污染土壤的检测方法、修复治理技术等方面的研究被广泛关注。土壤被重金属污染可使土壤颗粒之间吸附力,粘结力等力学参数发生相应改变,为此研究重金属污染土壤的力学性质、介电特性,有望探寻一种运用力学、