【摘 要】
:
弱光图像增强是计算机视觉领域的一个重要研究方向。由于受到光照强度低和曝光时间短等因素的影响,弱光图像中存在细节丢失、色彩暗淡、噪声突出等多种退化问题。这些问题不仅导致了糟糕的成像品质,影响视觉效果,而且为高级计算机视觉任务增加了难度。本文着重研究基于生成对抗网络(Generative Adversarial Network,简称GAN)的弱光图像增强算法,旨在提升弱光图像的亮度、恢复色彩、补全细节
论文部分内容阅读
弱光图像增强是计算机视觉领域的一个重要研究方向。由于受到光照强度低和曝光时间短等因素的影响,弱光图像中存在细节丢失、色彩暗淡、噪声突出等多种退化问题。这些问题不仅导致了糟糕的成像品质,影响视觉效果,而且为高级计算机视觉任务增加了难度。本文着重研究基于生成对抗网络(Generative Adversarial Network,简称GAN)的弱光图像增强算法,旨在提升弱光图像的亮度、恢复色彩、补全细节、减少噪声,以提高图像的成像品质。本文主要的工作和贡献如下:(1)针对已有基于Retinex理论增强算法生成效果差的问题,提出了一个基于Retinex理论和GAN的弱光图像增强模型Retinex-GAN。该模型包含三个串联的子模块:首先,Retinex分解模块从弱光图像中提取出亮度分量和反射分量;接着,亮度调整模块根据这两个分量估计弱光输入的亮度调整参数,并得到初步的增强结果;最后,噪声修正模块采用对抗学习的思想对该结果进一步调优,以得到更高质量的最终输出。实验结果表明,相对于当前已有方法,所提出模型在LOL-vl数据集上取得了性能提升。此外,本文提供了一个模型加速方案对Retinex-GAN模型进行加速,并减少了约25%的计算量。(2)针对监督学习方法在实际应用时泛化性不足的问题,提出了一个基于结构相似性和色彩一致性的无监督弱光图像增强模型NB-GAN(Natural Brighten-GAN)。该模型由四个模块组成:增强模块、结构相似性模块、色彩一致性模块以及自然度判别模块。其中,增强模块由其它三个模块共同优化;结构相似性模块用于在不同亮度的图像之间建立结构对应关系;色彩一致性模块用于监督生成图像的色彩;自然度判别模块用于提升图像的亮度并确保结果的真实性。实验结果表明,相对于当前已有方法,所提出模型在五个真实弱光数据集上(LIME、MEF、DICM、VV、NPE)取得了更低的平均 NIQE(Natural Image Quality Evaluator)指标,并生成了更自然的图像。(3)针对极低亮度图像生成效果差和增强程度无法控制的问题,提出了一个基于样例引导的弱光图像增强模型EGLLIE(Exemplar-Guided Low-Light Image Enhancement)。该模型使用已知的样例图像作为额外输入,以引导其进行增强。它由五个子模块组成:弱光编码器、样例编码器、区域匹配模块、注意力特征选择模块和解码器。其中,两个编码器分别用于提取弱光输入和样例输入的特征;区域匹配模块用于学习弱光图像和样例图像之间的区域匹配关系;注意力特征选择模块用于选择所需要的弱光特征和样例特征,并提供给解码模块进行增强。为了评估EGLLIE模型的性能,本文构建了两个样例数据集:Pseudo-LOL和EG-office。实验结果表明,相对于当前已有方法,该模型在Pseudo-LOL数据集上的PSNR和SSIM指标提升了约30%和1%,在极端的EG-office数据集上生成了更符合人眼感知的增强结果。此外,该模型还可以通过改变样例输入的亮度属性来控制增强的程度。(4)针对基础架构UNet中编码分布与解码分布差异大导致模型收敛不充分的问题,提出了基于迁移连接的弱光图像增强方法。受风格迁移任务的启发,迁移连接模块将解码特征的“风格”迁移至编码特征中,以减小两者之间的分布差异。本文将该轻量有效的迁移连接模块嵌入UNet、Retinex-GAN以及NB-GAN模型中,并在LOL-v2数据集上进行了对比实验。实验结果表明,迁移连接模块相对于跳跃连接只增加了微不足道的参数和计算量,却显著提升了相关模型的性能。特别在UNet模型上,PSNR和SSIM指标提升了约22%和5%,LPIPS(Learned Perceptual Image Patch Similarity)①指标降低了约 18%。
其他文献
金属卤化物钙钛矿(MHPs)因具有优异的光电性质成为了材料科学领域中的热点研究对象。由于其光谱可调、荧光量子产率(PLQY)高、吸收光谱范围宽、载流子扩散长度长等特点,MHPs在发光二极管和太阳能电池等方面具有广阔的应用前景。除此之外,MHPs在防伪、激光器、传感与探测以及光催化等领域也有着巨大的应用潜力。探索MHPs的新应用成为了新的目标与挑战。为了实现这一目标,可通过内源性的改变晶体结构或外源
纳米酶克服了天然酶易失活、成本高、可回收性差等缺点,因此非常有希望替代天然酶来用于催化反应。虽然纳米酶在多个领域展现出巨大的应用潜力,但是经过十多年的发展,纳米酶的种类依然局限于氧化还原酶类和水解酶类。另外,由于目前对纳米酶的催化机理缺乏深入的认识,导致缺乏理论指导用于设计新型的纳米酶。现阶段设计新型的材料往往需要不断的尝试,耗时耗力,科研效率极低。为解决以上问题,我们基于催化剂的结构决定其催化性
近年来,随着网络化系统和智能控制理论研究的不断深入,多智能体系统协同控制方法在多机器人系统、传感器网络等领域展现出广泛的应用前景。同时,在信息技术快速发展的时代背景下,系统复杂度和需求多样性不断增加,单一个体的智能化水平日益提高,个体在采取行动时通常会考虑自身利益,其中个体利己行为通常可以用个体性能指标来刻画。本文中,我们考虑个体具有利己行为的一类多智能体系统。显然,在这类系统中,个体的利己行为并
多相催化转化CO2和N2等小分子为一系列增值化学品一直是众多科研工作者研究的重点,而通过研究反应的机理精准设计高效催化剂则是研究过程中的重中之重。密度泛函理论(DFT)已经成为设计和研究新材料的重要手段,在催化剂催化机理的研究方面发挥了不可或缺的作用。由于MoS2是非贵金属催化剂,且不同金属掺杂的情况下被广泛应用于析氢反应、CO2还原反应以及催化合成氨等反应。基于此,本文利用DFT计算,通过细致的
负载型金属催化剂是一类重要的多相催化剂,广泛应用于精细化工、生物质转换和汽车尾气处理等多个领域。调变金属纳米颗粒的尺寸、组分和形貌会显著改变其催化活性。其中,调控金属纳米催化剂的尺寸,更是成为该类催化剂性能优化的一个重要途径。因此,金属尺寸效应的研究也成为近些年来人们研究的重点。调控金属尺寸的同时,载体对金属量子尺寸效应同样具有显著的调控作用,然而该方面的研究还较为有限。另外,对于双金属催化剂,调
中子技术广泛应用于反应堆系统设计、中子学实验、工业无损检测等领域,中子能谱精准调控与测量技术,即获得满足特定需求的中子能谱并实现测量,是整个中子调控技术的核心问题。反应堆中子能谱的精准调控影响到反应堆设计的经济安全性与中子学实验的可靠性等,同时实现精准测量是保证调控准确度的关键因素之一,传统中子能谱调控技术凭借人工经验迭代设计调控模块,调控准确度难以保证,另外,宽能域中子能谱的在线测量技术也存在解
近年来,随着量子信息技术的发展,研究人员已经意识到不同的量子体系在处理不同的问题时具有各自的优势。由于单个的量子系统不可能解决实际问题中的所有需求,所以由多个不同量子系统组成的混合量子网络就成为了该问题的解决方案。为了充分发挥混合量子网络中不同量子体系的优势,需要实现彼此之间的量子连接,光子作为天然的飞行比特,非常适合用来实现不同量子体系的连接。量子节点作为量子网络的核心单元,需要能够实现量子比特
刚性和韧性是决定聚合物材料能否被用作工程材料的两个关键参数。聚丙烯(PP)作为广泛使用的通用高分子材料之一,由于抗冲击性能,尤其是低温抗冲击性能差限制了其在工程领域的应用。通过共混和釜内合金将橡胶/弹性体引入到基体PP中是制备高抗冲聚丙烯(HIPP)的有效手段。但是,引入橡胶/弹性体增韧的同时,PP的刚性会大幅下降,这也不利于PP在工程领域的应用。因此,本论文结合聚合物脆韧转变理论与多组分高分子体
近代人类工业文明的发展离不开石油和天然气的广泛应用。然而,随着过去几十乃至上百年油气工业的迅猛发展,浅层易开采油气资源几乎开采殆尽,迫切需要在一些含高腐蚀性硫化氢(H2S)气体的深层油气田进行勘探和开采。油井深度的提高、深井中的高温高压环境以及高腐蚀性H2S气体都对油井管(OCTGs)的强度、抗硫化物应力腐蚀开裂(SSCC)等性能提出了更苛刻的要求。市面上现有110ksi级(758MPa)油井管用
氢能以其高能量密度和清洁可再生等优势正成为未来能源的主要形式之一。围绕氢能制备、存储与使用的相关技术受到了广泛关注并得到快速发展。然而氢气难以压缩存储和运输的缺点,仍有待解决。甲酸作为一种有机储氢小分子,能够在室温下,通过催化分解供氢,将在解决氢气的快速制备、高效储存及运输方面发挥积极作用。本论文针对甲酸分解制氢过程中涉及的催化剂设计制备、性能表达与评价、催化机制解析及催化环境的构建等开展了研究和