基于分离表示的人脸图像生成

来源 :山东大学 | 被引量 : 0次 | 上传用户:sgrwflh
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来基于深度学习的图像生成高速发展,人脸图像由于其丰富的应用,成为了图像生成的重要焦点。定制化人脸生成具有广泛的应用场景,例如身份替换,年龄性别定制等技术已经在社交娱乐领域催生了大量应用,与此同时,人脸重演技术是动态头像、虚拟主播等新兴应用的重要基础。本文提出了一种全新的基于生成式对抗网络的人脸生成算法,该算法可以将人脸的身份信息、表情姿态和环境属性分离,通过对三个分离表示的控制和重组,实现了高度可控的人脸定制化生成。利用不同的重组方式,单一模型可以同时支持人脸身份替换和人脸重演两类应用。算法框架分为人脸属性提取和融合生成两部分,属性提取部分可以从输入的人脸图像中提取身份向量,人脸关键点和环境向量。融合生成部分以三种属性作为输入,生成一张新的人脸。在视频人脸身份替换应用中,人脸关键点和环境向量由视频帧中的人脸提供,而身份向量由单张目标人脸提供,由此可生成保持视频人物动作姿态环境但带有目标人脸身份的新人脸,以完成视频人物的身份替换。在人脸重演应用中,通过单独调整人脸关键点输入,即可精确控制生成人脸的表情和姿态。为实现基于分离表示的人脸生成,我们基于生成式对抗网络设计了可控融合生成网络框架,同时我们还进一步研究了生成任务中的监督约束,设计了特征循环约束的训练方式,在不需要额外标注的情况下让网络自发的学习环境属性的提取以及融合人脸的生成。我们在Faceforensics++数据集[1]上做了一系列的对比实验和比较,进一步阐述了本方法的人脸生成性能。
其他文献
随着无线传感网络技术,微机电系统以及便携式电子设备等微功耗产品的应用越发广泛,传统的供能方式无法满足可持续的用电需求,因此探究如何为低能耗产品持续供能是亟待解决的
模糊集理论的创立,为不确定现象的研究提供了切实可行的方法.许多学者将模糊集理论应用于群和环,进一步延伸了模糊集理论的应用范围,并创建了模糊代数的新领域.迄今,模糊代数
中空夹层钢管混凝土是一种采用空心钢管替代实心钢管混凝土中部核心混凝土而成的新型组合构件;相较于传统钢管混凝土,该构件具有自重更轻、抗弯刚度更大、耐火性能更好的特点
明清时期,西医理论随传教士进入中国,清代末期,西学的兴起更促进了西医的推广,这些都为中医理论的变革,以及医学的综合发展带来了新的机遇和挑战。在这样的环境中,一批有远见
为解决中国正面临的能源缺乏与环境污染问题,实现社会可持续发展,中国需要寻找可持续能源来满足人类生产生活需求。燃料电池因其高效、安全、清洁的优势,成为可持续能源发展
随着计算机技术、通讯技术的发展,人类社会迈入了信息时代。信息和知识在形式、规模、获取方式、存储方式和传送方式等方面都发生了翻天覆地的变化。随着网络时代信息爆炸现象的日益明显,一些问题也越来越明显。电子出版物的作者姓名歧义问题就是其中一个比较突出的问题。在许多领域中,同名消歧一直被视为一个很有意义但是非常具有挑战性的问题,如在文献管理,社交网络分析等应用场景。论文的同名作者消歧是指利用论文的标题、作
6-甲基腺嘌呤[N6-methyl-adenosine(m6A)]是指发生于腺嘌呤(Adenine)的第6位氮原子(N)上的甲基化修饰,是近年来备受关注的RNA表观遗传调控方向的研究热点。m6A甲基化在人类RN
《千字文通釋》四卷是一部由清代台灣金石學宗師呂世宜編撰,由晚清傑出書法家楊浚校刊的手抄作品。它將我國古代啟蒙、識字教材《千字文》中的漢字作為字頭,對這些字的字形、字義或用法等進行闡釋說明,尤其關注這些漢字的通假字、古今字以及俗字等文字現象,是現行唯一一部對《千字文》在文字學層面進行注釋的作品,具有首創性和獨創性。由於《千字文》所收錄的漢字為基礎常用字,所以《千字文通釋》所阐释的文字現象可以被視為整
随着股权质押业务的不断发展,质押规模也不断扩大。股权质押融资已经成为上市公司融资重要渠道。表面上看,股权质押与公司股价变动没有必然关系,但是,由于进行股权质押的主体主要是上市公司的控股股东和大股东。若市场出现剧烈波动,股价下跌至“强平线”,质押股票会被出资人按照质押合同强平。那么公司控制权可能会发生转移,这种情况会严重影响股价的稳定和公司经营状况。从全球经济上看,目前全球处于经济增速下滑状态,新经
本研究以卵形鲳鲹(Trachinotus ovatus)幼鱼为研究对象,实验饲料分别以硫酸铜(Cu SO4·5H2O)为铜源、硫酸锌(Zn SO4·H2O)为锌源、亚硒酸钠(Na2Se O3)为硒源,通过摄食生长的实验,来探