基于多域篡改伪影的换脸视频检测算法

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:ourl123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
换脸视频是指通过图像处理技术,利用源视频中的人脸对目标视频中的人脸进行完整替换、部分替换或者表情迁移等。近年来,一种Deepfake换脸视频生成技术通过深度神经网络进行特征提取与人脸生成,能够以较低的技术成本获得逼真的换脸效果,对信息传播和信息安全造成严重影响,针对换脸视频的检测算法研究具有重要的研究意义和实用价值。而现有换脸视频检测算法虽然在同一数据库内具有较好的检测性能,但在不同数据库的测试能力仍有待提升,并且换脸视频在内容和质量上差异较大,需要增强对不同视频的检测稳定性。针对上述研究现状,本文以深度神经网络为基础,围绕换脸视频篡改痕迹的分析与多域特征的提取与结合,对换脸视频检测算法展开研究。本文的具体研究工作如下:1、提出了一种频域-空域特征结合的换脸视频检测算法。针对换脸视频与真实视频在频域上的差异,对换脸视频帧图像进行离散傅里叶变换,并将频谱图输入到双支路网络中。其中空域特征支路对低频分量进行逆变换处理并利用深度网络进行空域特征提取。频域特征支路以中高频分量频谱块作为输入,提取网络的多层次频域特征作为输出,最后对双支路的输出特征进行拼接与分类得到换脸视频的检测结果。实验结果表明该算法具有较好的泛化能力。2、提出了一种空域-时域特征结合的换脸视频检测算法。以换脸视频的篡改痕迹分析作为基础,构建一种三支路网络模型,一个分支直接提取人脸图像的空域特征,另一个分支提取局部人脸的空域特征,余下一个分支对人脸图像进行边缘提取并提取时域特征,通过三种特征的融合与分类对换脸视频进行检测。实验结果表明,该算法能够有效增强模型的检测能力与检测稳定性。
其他文献
中国近几年面临空气污染(主要为PM2.5)加剧、雾霾天气频发等问题,大气污染治理的形势依旧严峻。面对空气质量长期以来存在的“秋冬季区域性重污染”现象,国家在大气污染防治过程中的精准防控、科学防控要求显得更为重要与迫切。为了能够精准地针对不同的区域制定科学有效且差异化的政策措施来处理大气污染问题,文章建立了适用于时空数据的混合线性时空聚类模型,并利用PM2.5浓度等数据对京津冀地区的城市进行了时空聚
学位
在当前的背景下,我国的经济步入了高质量发展阶段,我国社会主要矛盾也已转化为人民日益增长的美好生活需要和不平衡不充分的发展之间的矛盾。2020年是我国全面建成小康社会的决胜期,基于对全面建成小康社会、提高人民生活水平的要求,缩小城乡居民收入差距、缓解我国在各区域发展不平衡的问题一直以来都受到国家的重视。普惠金融就是基于这样的时代背景被不断推进,随着大数据、人工智能等信息技术的发展,普惠金融依托于互联
学位
近些年来,空气质量倍受国家的重视。为了保证空气质量监测站点收集到的数据的有效性和准确性,我们需要对空气质量数据进行自动且精细的复核,从而及时、有效地发现仪器异常的情况,以便获得高质量的空气污染监测数据。本文将来源于仪器故障的空气污染物监测数据存在的变点称为“异常变点”,将时间、气象等因素导致的空气污染物监测数据正常变化导致的变点称为“正常变点”,上述两种变点构成了本文变点检测研究的主要内容。本文通
学位
作为固定公交的补充形式,需求响应公交的出现为城市居民出行提供了更灵活的出行方式选择。在需求响应公交的理论研究中,众多学者从服务质量和公益性角度分析需求响应公交模式,但忽略需求响应公交模式的集约化本质。本文基于对公交出行需求的集约条件分析,结合需求响应公交模式服务特性,提出考虑需求集中程度的需求响应公交调度优化模型,并设计一种改进人工蜂群算法进行求解。本文所做的主要研究工作如下:(1)需求响应公交服
学位
报纸
近年来,我国各区域经济实现了快速发展,经济增速也维持在比较稳定的水平,综合实力也在不断提升,然而,经济高速发展的同时我国经济社会也存在许多问题,人口老龄化、环境污染和资源紧张等社会问题依旧突出。在此发展背景下,需要把科技创新作为我国经济发展的核心战略。伴随着科技创新的不断发展,科技金融也逐渐在经济增长中发展出越来越重要的角色。近几年,国家为促进科技金融发展,出台了一系列科技金融相关的政策文件,这表
学位
近年来建设生态文明,加强生态保护是国家和学者们关注的热点。我国地域辽阔,各地区生态保护水平不仅和当地自有的生态资源存量和生态环境质量相关,也与一些社会经济变量有关。我国各地区的发展模式、能源资源利用效率存在一定差异,使得不同地区之间的生态保护水平也存在一定的差异。同时由于各区域之间经济发展和产业布局紧密衔接,生态保护水平可能存在空间相关性,基于此,对我国省域生态保护水平进行衡量及空间分析显得十分必
学位
实现贫困地区全面脱贫是我国现阶段面临的几大难题之一,近年来我国致力于提升贫困地区的人均可支配收入水平,拉近落后地区与发达地区的收入差距。我国于2013年提出“精准扶贫”战略,直至2020年末原国家定贫困县人均收入越过国家贫困线,实现了全面脱贫,扶贫工作取得极大进展。我国扶贫措施的制定与实施总体概括为财政扶贫体系和金融扶贫体系,财政扶贫和金融扶贫在不同地区和不同贫困程度所展现出的政策效果差异较大,研
学位
<正>作者阐述:近年来,经过高速发展的外卖市场日渐成熟。外卖员最常用的载具就是电动车,因为不需要驾照,操作门槛低,并且轻巧灵活,通行便利,能够很好地迎合外卖市场对于配送时间的高要求。但也正是外卖行业对于速度的追求,使外卖电动车存在更大的安全隐患。近两年涉及电动自行车的交通事故占总事故量的30%,而涉及电动自行车的死亡人数总数更是占到了40%,但由于电动车属于非机动车,所以相关的交通法规并没有机动车
期刊
近年来随着中国市场经济的快速发展,信用消费已经成为个人消费方式的主导形态,比如花呗、借呗、白条等方式,先购物再买单已经在年轻人的生活中已司空见惯。P2P网络借贷平台也在经济的促进下得到了迅速发展,但是近年来P2P平台的不断暴雷事件,行业风险逐渐暴露。P2P网络借贷因为征信问题一直得到诟病。为了识别不良贷款申请者,降低贷款违约风险,信用评级模型已经成为各个金融机构最常用的方法。但是由于各个金融机构仅
学位