基于半监督学习机制下单幅图像去雨研究

被引量 : 0次 | 上传用户:hernquist
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
雨天在户外场景中获得的图像质量受损严重,影响后续高级视觉任务(如目标检测、图像分割、图像识别等)的性能,因此单幅图像去雨作为预处理任务具有重要的研究价值。近年来,在单幅图像去雨任务中,基于深度学习的有监督算法表现出卓越的性能,尤其是对合成雨图的去雨。但对于真实雨图去雨的泛化性不强,一般归因于合成雨图像与真实雨图像之间存在域的鸿沟,导致在合成数据集上训练的有监督学习算法的泛化性能得不到保障。此外,在实际场景中,同时收集真实雨图和其对应的干净背景图形成数据对是非常困难且耗时费力的,而单真实雨图的获取是廉价的。据此,同时利用单的真实雨图和成对的合成雨图,用半监督学习机制训练图像去雨算法模型,成为单幅图像或视频去雨研究圈关注的热点之一。本文在前人研究的基础上做基于半监督学习机制的单幅图像去雨的研究并设计系统仿真实现。主要内容如下:(1)提出基于高斯混合模型的半监督图像去雨算法。针对现有合成数据集训练算法泛化性不强且成对真实雨图数据集采集困难的问题,本文采用高斯混合模型和多阶段网络构成半监督去雨模型。其中,高斯混合模型用于对真实雨纹进行建模,多阶段网络用于实现背景图的恢复和雨纹信息的提取,同时使用KL散度实现合成雨纹与真实雨纹的迁移学习。通过此半监督方式训练的去雨网络,可以充分适应真实无监督雨类型,提升了泛化性。大量的实验表明,本文所提出的高斯混合模型半监督图像去雨算法既能去除合成雨纹,同时也能去除真实雨纹。(2)提出基于多尺度卷积稀疏编码的半监督图像去雨算法。针对上述高斯混合模型参数敏感,KL散度实现迁移学习存在误差的问题,本文结合雨纹的先验知识(多尺度和稀疏性)建立了多尺卷积稀疏编码模型来表示合成和真实雨层,然后利用合成雨图和真实雨图,推导了优化模型,并设计了相应的求解算法。通过最小化合成雨核集与真实雨核集之间的距离,网络更加能够适应真实无监督雨类型,提高了真实场景下的去雨性能。通过大量实验,证明了本文提出的算法优于先进的半监督算法,具有良好的泛化能力。(3)设计并实现了基于半监督学习机制下的单幅图像去雨系统。为了将所提半监督算法落地于实际应用,本文结合Py Charm和Py Qt5构建单幅图像去雨系统,对该系统输入雨图,并选择不同的算法,可直接获得去雨后的结果。
其他文献
学位
神话故事来源于远古人民对自然及文化现象的理解和想象。高尔基对于神话的理解:一般来说,神话是自然现象,对自然的斗争,以及社会生活在广大的艺术概括中的反映。神话既然作为一种艺术形式,和雕塑、绘画、音乐、诗歌、小说一样都有自己的叙事方式。将神话故事置于现代语境下研究也赋予了古代神话全新的意义,而神话类国漫电影既是对传统文化的继承也是对况且神话故事作为古代先民的智慧结晶也不应该被现代社会所遗忘。研究神话的
学位
在全国旅游城市竞争日趋激烈的背景下,城市若想发展其旅游经济,城市文化资本是市场竞争中必不可少的砝码。小吃街不再仅仅是居民的休闲场所,更是每个旅游城市中不可或缺的一部分。回看已有的关于城市的研究可以发现,城市空间中蕴含着许多意义与关系,本文将从传播学的视角出发,研究作为媒介的小吃街的空间媒介属性及它的空间生产。笔者主要以参与式观察法去设身处地观察小吃街的文本内容,深度访谈法去与小吃街的活动主体展开交
学位
随着图像/视频传感器及高光谱相机的发展,环境数据信息逐渐呈现多样化和复杂化,能够更加全面精确采集和高效传输数据信息的有向传感器网络(Directional Sensor Networks,DSNs)应运而生。对于环境恶劣、人们无法前往的区域,通常采用大规模随机抛洒的方式部署有向传感器节点构成DSNs,但这往往会产生大量空洞和重叠覆盖区域,无法对监测区域数据进行准确全面的分析。此外,由于节点能量有限
学位
随着传输容量需求的增加,轨道角动量(orbital angular momentum,OAM)逐渐受到关注,作为电磁波的动量属性,它描述了波在传播时波前绕轴旋转的特性。携带OAM的电磁波使用电磁辐射的角动量模式携带信息,对于信息调制有更高的自由度,因此,在目标探测领域具有较好的分辨力。但是由于涡旋波在远距离空间探测时,其衍射特性使得OAM的探测应用发展变缓,此外,对于OAM的探测研究集中在静止目标
学位
物联网作为第五代移动通信的关键场景,海量的通信设备和受限的电池容量对通信系统提出了更高的要求。因此,非正交多址接入(Non-Orthogonal Multiple Access,NOMA)技术和携能通信技术在学术界和工业界都受到了广泛地研究。具体来说,相较于传统的多址接入技术,NOMA利用同一时频资源块来服务多个用户,从而有效地提高了频谱效率。携能通信技术利用无线环境中的射频信号进行能量收集,从而
学位
车辆目标检测和颜色识别作为目标检测的一个分支近些年来对于智能交通管理起着关键的作用。现实生活中,常常会遇到恶劣天气如雨雪雾沙尘等,在这些天气下拍摄的图像质量会大大降低。目前性能优异的目标检测算法大多使用正常天气采集的图像训练,因而若直接使用这些模型去检测,检测精度会大大降低。利用图像处理技术,提高雨天和雾天天气下的车辆目标检测和颜色识别精度对推动交通智能化发展具有重大意义和实际应用价值。本文将围绕
学位
无线传感器网络(Wireless Sensor Networks,WSNs)由大量微小的、低功耗的传感器节点组成,凭借其易于部署以及较强的信息处理能力的优势,经常被应用在战场、边境等敏感区域,用来监测非法入侵者。在上述应用领域中,针对移动目标防入侵监测覆盖优化存在两种方案,一种是如何以最小的代价尽可能快速覆盖整片监测区域,使得非法闯入的移动目标从任何地点进入都能被及时监测到;而另一种则应用于某些特
学位
《义务教育英语课程标准(2022)》指出,词汇教学要结合主题,在课堂话语和学习活动中,有意识地通过对话、讨论等复现所学词语;要让学生在特定的情境中理解和表达意义;要帮助学生在大量的语言实践活动中规范语音;在词汇量和词汇的掌握程度方面较过去有所提高。新课程改革以来,英语教师越来越重视课堂教学活动的设计,课堂教学活动成为英语课堂教学的主要形式,有了明确、清晰的教学目标,教师就可以设计出有针对性、高效的
学位
无线供能反向散射通信(Wirelessly Powered Backscatter Communication,WP-BackCom)是解决大规模物联网能量受限问题的有效技术方案之一,而大规模WP-B ackCom网络的传输性能与具有随机性和不确定性特点的网络空间位置密切相关。虽然已有研究基于随机几何理论刻画了大规模WP-BackCom网络的随机空间位置并分析了网络参数对传输性能的影响机理,但它们
学位