基于生成对抗网络的图像风格转换方法研究

来源 :南昌大学 | 被引量 : 0次 | 上传用户:mcx1988929
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着深度学习的崛起,基于深度学习的图像风格转换模型得以快速发展并具有广泛的应用,又在生成网络模型生成对抗网络的促进下,基于生成对抗网络的图像风格转换模型能力又进一步提升。然而作为艺术创作的辅助工具还远远达不到要求,基于生成对抗网络的图像风格转换模型存在转换的图像质量不理想以及网络模型不稳定的问题。本文针对以上问题,对CycleGAN做出改进。CycleGAN是无监督的图像转换模型,虽然CycleGAN无需成对的数据集就可以进行训练,并可以快速风格化图像,但是模型本身还是遗存传统生成对抗网络的缺点,例如模式崩溃、训练不够稳定、图像风格化质量不高。本文针对模型做出两点改进,首先在判别器中引入谱归一化,谱归一化的作用是对卷积后的参数矩阵进行谱范数标准化,这样就使神经网络被限制在一个范围内,以达到对判别器施加1-lipschitz限制,从而使函数更加平滑。其次我们针对生成器也做出改进,在生成器中加入了新型的残差结构,新型残差结构通过对激活函数、卷积层以及归一化操作的合理搭配来达到优化信号传播,减小训练误差,并通过恒等映射以保证梯度平滑、网络稳定。最后通过一组消融实验以及四种不同艺术风格的数据结果对比验证了改进的模型算法的转换质量提高。转换的结果不仅在色彩及结构信息上继承了源域图像,图像转换结果在几个模型中最为稳定,并且没有机械化的纹理,更富有创造力。本文继续用改进的算法在动漫风格数据集上进行实验,可是动漫风格的转换图像缺乏动漫风格应有的清晰的线条以及鲜明的色彩,受注意力机制的启发,针对动漫风格设计了合适的注意力机制网络模型,该模型是通过捕捉源域图像的主要特征图像进行学习,接着使用风景数据集进行训练,通过预训练模型所得的转换图像不仅有清晰的线条和鲜明的色彩,图像的全局内容也更具动漫色彩,最后通过一组消融实验以及一组对比实验对算法模型进行验证。
其他文献
伴随党的十九大隆重开幕,中国特色社会主义进入了新时代;不忘初心,牢记使命,决胜全面小康社会,实现富强、民主、文明、和谐的社会主义现代化国家。京津冀协同发展作为党和国
电力设备的维修是电力正常运行的一个重要环节。本文就变电设备运行的检修技术展开探讨,以保证变电运行设备的正常运作。
多元化的社会思潮和价值观念的影响.学生面对的学习、生活、就业等方面的压力对高校学生工作带来巨大挑战.如何应对新形势下出现的问题和挑战,辅导员应该坚持勤奋学习,树立终
1.工程建设项目全过程监督管理原则(1)标本兼治、惩防并举、综合治理、注重预防;(2)依法依纪、客观公正、实事求是;(3)统一领导、统一要求、统一标准;
近年来随着互联网的大发展,快递服务行业也迎来了巨大的发展机遇。如今快递服务已经成为了人们日常生活的一部分,然而消费者在享受快递服务带来的便利同时,其合法权益却屡屡
目的探讨五田保肝液对酒精性肝病大鼠肝细胞凋亡和肝组织肿瘤坏死因子(TNF)-α、Caspase-3mRNA表达的影响。方法将100只Wistar大鼠随机分成6组:对照组10只、模型组、五田保肝液
我国人均水资源不足,农业缺水形势依然严峻,土壤水分的状况和变化决定着作物对其吸收利用的强度和难易程度,而根系吸水活动对土壤水分动态产生重大影响。根系吸水模型是将根
安全生产是经济社会运行、人民生命财产的生命线,是铁路企业的生存线。高铁在国民经济及国民生活中扮演着越来越重要的角色,保证高铁运输的顺利和安全非常关键。高铁动车组空
企业形象是企业文化建设中比较核心的组成成分,它作为企业一种珍贵的无形资产,能够为企业在市场竞争中赢得持续的优势。一种美好的企业形象会比资金、设备、原材料等有形财富对企业发展起到更重要的作用。企业形象经过公众的选择和反映,最终可归结为产品形象、营销服务形象和社会责任形象三大类。企业档案是企业在生产经营等各项实践活动中的产物,是人们在企业的实践活动中直接形成的,其内容是对企业经营活动的内容、过程及结论