【摘 要】
:
近年来,生成式模型在图像生成领域上得到了显著的发展与广泛的应用。人脸再扮演任务是该领域内的一个特殊课题,致力于将某一个体的头部动作与面部表情迁移到另一个体上,生成
论文部分内容阅读
近年来,生成式模型在图像生成领域上得到了显著的发展与广泛的应用。人脸再扮演任务是该领域内的一个特殊课题,致力于将某一个体的头部动作与面部表情迁移到另一个体上,生成具有驱动个体表情姿态又保持源个体身份的图像。该任务可应用于图像编辑、影视制作、游戏制作与增强现实等场景。人脸再扮演任务的难点有两个:一是人脸图像纠缠与耦合的的内在特征,二是人眼评估时的低容忍度。为了解决这些问题,本论文提出了一种自监督学习框架,命名为DAE-GAN,其能够从大规模未标注的视频中学习到如何对人脸进行再扮演操作。该方法的主要贡献在于以下两点:1.提出了多帧/多尺度的形变自编码器,用以对人脸图像中的身份与姿态特征进行解耦。在仅假设有大规模人脸视频序列的情况下,该方法能够提取到图像中与姿态无关以及与姿态相关的两种有意义的信息。这一方式使得该方法不必依赖于大量且精确的人脸标注。2.提出了一种带有条件的生成对抗网络,用以融合来自不同个体的身份与姿态信息并进行人脸再扮演任务。生成器中的这一条件融合机制不仅使得生成的图像质量更高,而且使少样本的网络推断成为可能。在仅有单张或少量源图像样本的情况下,该方法仍能生成逼真的再扮演图像。此外,本论文对所提出的方法在VoxCeleb1、VoxCeleb2以及RaFD数据集上进行了验证。实验结果表明,该方法不但能够成功解耦人脸的身份与姿态信息,而且能够生成逼真的个体间再扮演图像。
其他文献
癫痫发作是一种常见的慢性神经系统疾病,具有反复性和突发性等特点,因此需要医生对病人进行长时间的观察,既耗时,效率又低,且视觉检测缺乏标准的制约,故癫痫脑电信号的自动检
羊只饲喂机器人是为了解决中小型养羊场饲喂效率低,人工成本高,饲喂量标准性差等问题而设计开发的一款融合了自动导引技术和远程无线操作技术的新产品。羊只饲喂机器人可以根
随着生活水平以及科技水平逐步提高,移动机器人的使用逐渐渗透到基层生活中来。移动机器人逐渐开始具备感知,规划以及决策能力。其中行人检测的功能是完成其他规划任务的一项
雾化器在自动装配的过程中不可避免会产生一些装配缺陷,需要对其装配结果进行检测以保证产品的质量。为了实现和自动装配生产线的高效率衔接,需要采用机器视觉技术进行检测。
在中国沿海地区,风振对大档距架空输电系统的影响普遍存在,尤其是在台风登陆前后此问题尤为凸出。风振造成输电杆塔金具疲劳损伤,引起导线磨损甚至断线,严重威胁着输电系统的
随着我国无线通信技术和计算机技术的高速发展以及实际工程中日益增长的需求,网络化控制系统得到了学者们广泛的研究。相较于传统的控制系统,网络化的引入给控制系统带来了较
现代建筑施工企业已由过去直接从事建筑构件生产,转变为总承包经营管理模式。天津SJ公司作为一家以建筑施工为主业的企业,在历经房地产行业黄金10年发展之后成为天津市较大规
短波与超短波通信在远距离通信领域中扮演着重要角色。由于频段限制,短波与超短波天线普遍存在尺寸过大的问题,因此,宽频带电小天线成为短波与超短波通信领域研究的重点。通
目的:由于Cldn6属于预测细胞内蛋白和预测膜蛋白的范畴,故本研究以手术切除的组织作为样本,对其在肝癌组织中的作用和并发症进行了预测,并由学者们收集了用于免疫组织化学检测和组织学研究的标本。然后进行重复的实时PCR反应。同时进行变性和亲属定量研究材料和方法;为了更好地规划研究性学习,我们采用了比较多研究的方法。在图书馆学习期间,我们访问了相关医院,在那里我们可以获得肝癌患者的治疗数据。结果:CLd
目的探讨兔颈动脉粥样硬化(AS)狭窄模型中天冬酰胺内肽酶(AEP)的表达。方法将20只新西兰大白兔随机分成模型组(8只)、假手术组(6只)和对照组(6只),模型组通过手术损伤颈动脉