基于浮雕处理的人脸图像修复

来源 :东华大学 | 被引量 : 0次 | 上传用户:NewComeMan
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人类最容易理解和接受的信息表达形式为图像,所以保存图像内容的完整性至关重要。因此与图像修复技术有关的研究十分火热,具有广大的应用前景与商业价值,比如将该技术用于古籍文献修复、影视制作和刑事调查等领域。其中人脸图像的修复是一个具有丰富挑战性的课题,人脸存在眼睛、鼻子和嘴巴等一系列具有逻辑结构性的器官组织,对人脸图像的修复不仅仅要考虑整张人脸的合理性,还要将人脸器官的组成是否合理考虑进去。传统的图像修复方法主要利用缺失部分的邻界信息对破损部分修复,但是得到的修复结果往往不尽如人意,出现模糊和粗糙等问题,所以不适用于人脸图像或者复杂场景的修复情况。近年来,深度学习技术快速发展,在图像修复等领域表现出巨大的作用。但是,图像修复算法训练难度较大,对复杂人脸的修复效果一般。考虑上述问题,本文的主要研究内容如下:1.基于连贯语义的图像修复。考虑到现有的图像修复方法在修复缺失区域面积较大或者复杂场景的图像时存在误差和结构失真等问题,本文选取了基于连贯语义的图像修复算法(CSA)作为研究重点,并展开深入分析,为后续的改进奠定基础。CSA模型由粗修复和精修复两个网络组成,在精修复网络中嵌入了CSA层,同时引入了一致性损失和特征模块判别器,使得最后的修复结果更接近原图,而且保证了训练的稳定性。2.基于浮雕处理的图像增强。充分考虑到现有人脸数据集模式单一和风格简单的影响,对模型的泛化能力提升效果不明显的问题,提出了基于浮雕处理的图像增强方法。该方法的提出受到创意素描风格的启发,创建虚拟光源,将人脸图像构造成浮雕效果。为了防止丢失原图的某些未知的无法直接观测的特征,考虑结合Mixup以综合原图和浮雕效果图像的共有特征作为模型的输入,达到两者之间特征的初步融合,深化了人脸图像的细节。在实验过程中,首先对Celeb A人脸数据集进行浮雕预处理,并结合CSA算法对人脸图像进行修复,明显提升了模型的泛化能力,更好的扩充了数据集的规模,使得人脸细节特征的修复结果比原模型更加自然、清晰和真实。3.基于浮雕网络的图像修复。通过实验发现手工设计的浮雕效果图像对CSA模型有很好的良性作用,但是手工设计的浮雕图像作为CSA模型的输入为模型引入了许多干扰,并且屏蔽了原图,因此模型的拟合方向偏离了原图而向浮雕处理得到的图像靠近。考虑到浮雕效果图像对人脸修复结果的影响,本文设计了一个微型网络,借鉴于ACNet,将其称为浮雕网络。然后将其和CSA模型结合训练,模型训练的收敛速度得到提升,得到的人脸修复结果在内容真实性和视觉连贯性方面取得了不错的效果。设计消融实验,考虑将浮雕预处理方法和浮雕网络结合,分析如何平衡浮雕效果才能使模型的修复效果达到最优,并采用本文提出的测试结果较好的模型进行对比分析。虽然浮雕网络在一定程度上弱化了浮雕预处理的效果,但是两者结合后模型的抗干扰能力得到较大的提高。最后通过峰值信噪比和结构相似性两种常用图像修复评价标准进行客观评价,进一步验证了本文方法的可行性。
其他文献
通过现状分析,指出BIM技术在地铁车站设计应用中的特点;通过对BIM技术在地铁车站设计应用价值研究,系统分析在模型维护、可视化设计、参数化设计、性能分析、专业协调、工程量统计、深化设计、数字化建造等方面的价值。
会议
能源央企是我国国民经济发展的骨干力量,也在全国碳排放中占有重要位置。自国内开展碳市场试点和全国碳市场启动后,以能源央企为代表的企业纷纷参与其中并采取了行动。随着碳达峰碳中和目标相关工作的不断细化,及全国碳市场的不断扩容和完善,能源央企在碳市场研究和实践过程中将发挥更大的作用。能源央企在充分借鉴国际能源公司成功经验的基础上,通过细化中长期策略、加强碳资产管理运营、建立内部碳交易、布局碳抵销项目、参与
期刊
人才竞争是企业之间竞争的关键,一般企业最主要的支出是花费在优秀的技术和管理人才上,而人才流失会导致企业内部制度管理混乱,增加替换人员的再培训成本以及使正常业务受到影响等。基于以上现实,本研究试图探讨员工离职意愿与企业可持续发展绩效之间的关系,以及个人组织契合度在员工离职意愿与企业可持续发展绩效之间是否起到了调节作用。本研究的目的在于通过对员工离职意愿、个人组织契合度以及企业可持续绩效之间关系的分析
学位
<正>当你发现中广核成立新能源公司,或者看到中石油在加油站屋顶架设光伏电站,这毫不违和;当你听说上海外高桥电厂度电煤耗仅为276克,或者获知中石化组织地热论坛,一定也不要意外……与碳排放斗争——一大批国企正在成为先行者。减碳·新局中国正在经历一场全方位的低碳转型革命。"双碳"目标把绿色发展提升到新的高度,成为未来数十年我国经济社会发展的主基调之一。
期刊
报纸
BIM技术以三维数字技术为基础,集成了多样化信息的工程数据模型,能够有效地应用到建筑工程设计施工以及运营阶段,从而能够在其中发挥一定的作用。因此,为了能够确保建筑工程设计与施工阶段的顺利开展,则需要注重BIM技术的应用,并事先分析BIM技术的特征与优势,从而掌握建筑工程的实际情况,合理地对设计与施工阶段进行模拟,明确其施工存在的问题,并制定针对性解决方案,提高施工的效率。本文主要分析建筑工程设计与
期刊
目的 使用葡萄糖变异参数建立2型糖尿病患者重度DPN发生的临床风险预测模型并进行验证,为糖尿病慢性并发症的防治提供参考依据。方法 收集2019年4月至2020年5月昆明医科大学第一附属医院内分泌二科住院治疗且符合纳入标准的2型糖尿病周围神经病变患者323例的临床资料。据感觉阈值测定结果将患者分为重度糖尿病周围神经病变(DPN)组及非重度组。使用Lasso回归模型筛选重度DPN发生的预测因子,制作列
期刊
聚酯纤维是世界上第一种工业化并广泛使用的聚酯产品,它是由对苯二甲酸和乙二醇为原料缩聚而成的,简称PET纤维。聚酯纤维生产工艺主要包括聚合、熔体输送、纺丝等部分,作为聚酯纤维生产的起点,聚合过程直接影响了纤维的性能,但其反应机理复杂,涉及变量很多,建模较为困难。本文针对聚酯纤维特性粘度的在线预测问题,提出了基于Copula函数的特征选择方法,并建立了基于经验Copula函数和混合Copula函数的即
学位
针对传统的护理床驱动方法存在的精度低、设备复杂和用户人群受限等问题,提出多种功能机制举措与护理病床相结合,构建出一套基于视觉驱动的新型护理病床体系,该系统允许患者利用眼睛操控病床的运作,有效地提高了患者的生活自理水平,解决了患者的诸多需求和所述技术存在的弊端。作为医疗康复领域的重要组成部分,该系统对提高社会医疗设施水平建设具有重要发展意义,为完善医用器械理论体系研究,促进医用护理产品研发提供新思路
期刊
超高层建筑的设计和建造过程复杂且具备较多重难点,给建设方的管理带来了诸多挑战。通过BIM的应用,可以为超高层项目的建设方提供有效的支持和辅助,实现精细化管理。以苏州中南中心项目为例,介绍了在策划前期进行的BIM组织规划,为项目的BIM应用打下基础;在开发建设过程中应用BIM解决具体问题,为建设方团队提供管理支持的实践经历;从项目组织和技术层面,探讨了如何将BIM深度融入超高层项目管理并最大化BIM
期刊