基于改进的U-net的图像合成方法研究

来源 :湖北工业大学 | 被引量 : 0次 | 上传用户:zpbaqq1314
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像合成是深度学习和视觉计算中的一个重要的研究方向,其在当今社会生活中具有广泛的应用前景和价值。它一般通过对输入的原始图像进行特征的提取与分析,再对这些特征作特定的约束与变换得到新的特征,最后利用新的特征来合成输出新的图像。传统的图像合成方法一般基于人为设定的特征如颜色直方图、纹理信息、形状信息和灰度信息等,再结合先验知识进行图像合成的研究。这类方法由于过度依赖人为设定的浅层特征而忽略了图像的深层特征和空间相关特征,因此难以合成令人满意的新图像,从而在实际环境中无法适用。近年来,以深度学习技术为核心的图像合成方法已经在很多行业取得了很大的成果。这类方法主要使用深层神经网络来构建对应的图像生成模型用于新的图像合成。U-net和生成对抗网络是两个常用于图像合成的深度网络模型。但是U-net仍存在一定的局限性,U-net是一种左右对称的U型网络,在增大输出图像分辨率的同时,网络中卷积层的数量会成倍增加,这会导致网络层次加深,使网络的训练变得更加困难,模型的学习性能会发生退化,最终造成合成的图像具有较低的质量。因此,对U-net的结构进行改进和优化就非常有必要和意义。为了解决上述问题,本文提出了对U-net结构的两种改进方法,第一种是基于高速残差块的U-net模型用于现实场景图像合成,该方法通过在U-net垂直方向的堆叠卷积层中嵌入高速残差块以提升U-net的图像合成性能。第二种是基于swish门限残差块的U-net模型用于黑白线稿自动上色,该方法通过在U-net垂直方向的堆叠卷积层和水平方向的跳层连接中嵌入swish门限残差块以提升U-net的图像合成性能。为了证明本文的方法的优越性,上述两种改进思路分别在公开的标准数据集上进行了大量的实验研究,实验结果证明了本文提出的方法在对应的图像合成任务上具有更优秀的性能。最后,本文对上述第二种方法进行了进一步的探索,将基于swish门限残差块的U-net作为生成对抗网络中的生成器来用于黑白线稿自动上色。实验结果表明了该方法具有优良的自动上色性能。
其他文献
随着光电系统的迅速发展,同时兼具高空间分辨率、大视场的光学设备成为使用者与科研人员不懈努力追求的目标。而大视场与高分辨率之间的矛盾一直是光学研究人员重点关注的问题,传统的单孔径成像系统难以突破这个限制,即使达到高分辨大视场的成像效果,系统的尺寸与复杂程度却会大大提升。多孔径成像系统采用多个相邻视场重叠的子孔径,在通过拼接子图像来增大视场的同时,由于子孔径采集的图像具有混叠信息,超分辨重构技术可以利
人力资本是一国经济发展不可或缺的重要资源,人才竞争已成为综合国力竞争的核心。人力资本并不是天然存在的资源,只有对人力资源进行教育培训等方式才能形成人力资本,即要对
镁合金作为已商用化的最轻金属结构材料,具有广泛的发展潜力,其中ZK镁合金是应用最为广泛的商用镁合金之一。针对ZK镁合金仍然存在的强度低等力学性能方面的问题,对其进行合
随着半导体技术的迅猛发展,数字电路对软错误变得越发敏感。近年来,我国在通信和航天等领域迅速崛起,对数字电路的可靠性和开销提出了更高的要求。在组合电路中,单粒子瞬态(Single Event Transient,简称SET)是电路软错误率的主要因素;而对于存储单元,单粒子翻转(Single Event Upset,简称SEU)与双节点翻转(Double-Node Upset,简称DNU)是威胁数字电
孙中山是我国近代历史上伟大的政治家和革命活动家,他的政治思想在清朝至民国的时代交替之际具有承前启后、继往开来的重要作用。他政治思想中的监察思想是他在批判性的继承
保险法律机制是一个协同与对立的机制。其通过投保人的告知义务、合理期待原则以及保险人的说明义务、不利解释原则等构建了一个双边的义务体系。但是传统的“全赔或者不赔原则”在司法适用中架空了这种保险机制,取而代之的是法官基于其价值判断而对某一方利益的舍弃。为了平衡保险当事人的利益,保险司法实践中出现了对比例原则的适用。在此背景下,本文共分为四章对比例原则在保险法上的适用进行探究。第一章探究比例原则在保险法
水,是一切生命的源泉,是我国国民经济的命脉。水资源的利用和保护更是事关国计民生的大事。水行政执法则是国家水资源管理工作中的重要一环,其执法效果不仅关乎我国水利事业
结肠癌患者演变为肝转移的风险将对其生存率和治疗预后产生重大影响,但目前患者的早诊率低、生存期短,诊治状况不容乐观,因此采取有效措施评估患者的肝转移风险,提前控制肿瘤发生发展,将有助于临床医师展开有效的个性化预后。本文旨在提出基于CT增强图像的中位数法和基于CT增强图像的M-K均值聚类法识别结肠癌患者发生肝转移的风险,并利用混淆矩阵对比两种方法在训练集和测试集的性能表现,以探究结肠癌细胞肝转移风险的
墨西哥有着悠久且灿烂的历史文明,在当今世界艺术风格瞬息万变的潮流中,墨西哥的艺术创作风格鲜明独特且以其浓厚的地域文化精神的特质独树一帜。鲁菲诺·塔马约(1899年8月26日——1991年6月24日)是20世纪墨西哥画坛的主要代表人物之一,是继墨西哥著名壁画三杰之后被世界画坛所公认的杰出的墨西哥现代绘画大师。他的绘画根植于墨西哥本土文化之中,展现了本民族深层的历史文化内涵,实现了民族传统艺术特色与西
随着PPP模式在各领域的不断深入发展,公法与私法因素的进一步交融,对PPP协议争议救济制度提出了新的要求。由于学界对PPP协议的法律性质存在不同认识,PPP有关法规政策对法律