基于图像复原和特征优化的人脸表情识别系统研究

来源 :南京邮电大学 | 被引量 : 0次 | 上传用户:hudie8707180910
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着计算机视觉技术的迅速发展,人脸表情识别已成为该领域的研究热点之一。人脸表情识别是从视觉信息中提取人脸区域并进行情绪识别的技术,它赋予计算机理解人类情绪的能力。尽管传统的图像识别网络已经在人脸表情识别上取得了一定成果,但在实际应用中仍未达到令人满意的效果。实际场景下的人脸表情识别主要面临如下两个问题,分别为图像退化问题和特征优化问题。图像退化问题是由于人脸表情数据采集过程中存在各种干扰,例如光源因素导致的扰动、拍摄因素导致的运动模糊和数据压缩导致的信息失真。特征优化问题的原因可分为两方面:一方面,表情本质上是人脸变化的结果,因此人脸表情特征中存在一定比例的人脸特征,而这些人脸特征可以作为人脸表情特征的基础,为优化表情特征提供新思路;另一方面,卷积填充将外来信息引入卷积运算,而外来信息的参与会对特征造成侵蚀影响,因此需要对卷积填充得到的新特征进行优化。为解决人脸表情识别在实际应用场景下的两个问题,本文从图像复原和特征优化两个角度进行研究:(1)针对实际应用中的表情图像退化问题,本文提出了基于Style GAN网络的人脸表情图像复原,该网络的主要特点是缩放偏移模块和双鉴别器结构。缩放偏移模块通过引入先验人脸知识,增强复原图像的保真度;双鉴别器结构通过引入质量鉴别器,提升复原图像的合理性。缩放偏移模块和双鉴别器结构的综合应用提升了人脸表情图像复原的性能。(2)针对实际应用中的表情特征优化问题,本文提出了基于特征优化网络的人脸表情识别,该网络由去白化模块、特征重组模块和特征共享模块组成。去白化模块通过卷积的感知偏差对退化特征进行二次处理,消除卷积填充导致的特征侵蚀;特征重组模块通过对退化特征进行重组,提升去白化模块的效果;特征共享模块通过将表情特征分解为人脸特征和情绪特征,提高表情特征学习的效率。去白化模块、特征重组模块和特征共享模块的综合应用提升了人脸表情识别的性能。为实现以上算法的应用,本文基于图像复原网络和特征优化网络开发了人脸表情识别系统,该集成系统进一步提升了人脸表情识别的鲁棒性和准确性。
其他文献
由于缺乏大量标记样本,小样本学习的核心问题是在新任务上有严重的过拟合问题。自监督学习能够从数据本身中挖掘出强有力的监督信号,最终提升模型的泛化能力。因此,单个旋转自监督任务已经被整合到小样本学习网络中缓和过拟合问题。由于每一个任务损失函数的收敛速度和量级可能存在差异,在训练过程中,整个网络可能被某一个任务交替主导,这对主任务的性能有负面影响,因此本文首先设计一个带有辅助任务的学习速率均衡化网络结构
学位
作为无线电能传输领域一项新兴技术,磁耦合谐振式无线电能传输(MCR-WPT)技术具有传输效率高、输出功率大等特点。然而,在日常应用中,MCR-WPT也存在着较多的痛点。例如,在充电过程中,由于传输距离等因素的变化导致系统最大效率点或最大功率点发生偏移,从而导致系统的传输效率或输出功率的下降。因此,如何避免无线电能传输系统最大效率点或最大功率点发生偏移,实现无线电能系统的传输效率或输出功率稳定输出,
学位
近年来,技术的不断发展使得我们可以在智能手机、可穿戴设备等上推出智能应用,并将它们集成到物联网中。这些应用程序通常依赖于各种传感器节点来从多维度捕获和生成大量的数据,从而高精度地检测、识别和分类目标。然而无线传感器节点只配备有限的电源,即使可以通过采用不同的传输策略、节点部署策略以及非均匀成簇算法等来均衡全网节点能耗,仍然可能无法满足大规模网络长期稳定运行的需求。随着研究的进步,无线可充电传感器网
学位
随着互联网与医疗行业的快速发展,市场上各种新型药品层出不穷,并通过网上药店进行售卖,这其中也包含不少假药,假药问题成为了当前需要解决的重点问题。建立完善的药品追溯系统是解决目前药品安全监管问题的一条有效途径。然而,这其中依然存在一些问题。一方面,现有的药品追溯平台方案大部分都是各药企自建的中心化追溯系统,不利于药监局的统一管理;同时,中心化的数据存储依然会存在药企厂家或平台为逃避责任私下篡改药品数
学位
如今慈善捐赠有了多种多样的线上活动,在受到人们关注的同时,也面临着信任危机。传统的捐赠活动需要依赖慈善平台或慈善机构的中心化管理,这种服务方式存在以下不足:其一是求助信息由慈善机构集中管理,存在求助难辨真假的问题。其二是捐赠信息同样由慈善机构集中管理,存在捐赠信息以及捐赠流向不透明等问题。因此如何保证慈善捐赠过程中的求助信息和捐赠信息可信是目前需要解决的问题。区块链技术的去中心化和不可篡改等特征为
学位
随着国内经济飞速发展,中小企业的业务规模不断壮大,各企业对于网络的需求也越来越高,愈发需要个性化、高质量的网络环境,同时国家政策持续要求面向中小企业提速降费。因此运营商急需针对各类政企客户提供高品质低成本的专线,提升在商务楼宇等价值区域的专线产品竞争力。在投资金额有限的情况下,运营商需要对品质To B网络的基础机房进行精准建设,确保把有限的投资用到最需要的地方,提升网络接入能力效率。本文在分析运营
学位
当前全球人口数不断增加,引起能源需求量日益巨增,在可再生能源发展迅速的背景下,本文研究智能电网能量管理问题。由于国内外专家学者大多数都只关注智能电网的经济调度问题,或者发电侧大多都只考虑二次函数形式的代价函数,此外智能电网集中式的能量管理存在着大量的弊端以及智能电网中节点间的通信负担过重。因此,针对现有文献的研究不足之处,本文同时考虑发电侧和负荷侧的利润函数,将发电侧的代价函数建立成具有阀点效应的
学位
脑卒中是一种临床常见的急性脑血管疾病,其后遗症会导致患者丧失上肢的运动能力,对生活产生了很大影响。临床医学证明,基于大脑可塑的重复康复训练,能有效恢复患者受损肢体的运动机能。因医疗资源紧缺、治疗繁琐和康复周期长等因素,传统手把手康复训练方法难以满足逐年递增的患者康复需求。为在一定程度上解决上述问题,近年来国内外已有大量研究机构投入到上肢康复机器人的研究中,并取得了较多的研究成果。在机器人辅助康复训
学位
随着国家“碳达峰、碳中和”能源战略目标的提出,以分布式光伏为代表的新能源在配电网中的占比不断提高,在提高能源利用率、减轻环境负担的同时,新能源发电的尖峰性和间歇性也会导致配电网出现时段性电压越限等问题,危害配电网的安全稳定运行。一方面,传统的分散式电压控制会导致不同调压设备之间难以协调,无法得到全局最优电压控制策略,难以解决全网分散化的电压越限问题;另一方面,分布式电源的大规模应用和电力电子器件的
学位
近年来,作为计算机视觉领域一个具有挑战性的研究课题——图像语义分割,在自动驾驶、医疗影像分析、无人机落点判定以及航天卫星遥感等现实场景中发挥了至关重要的作用。受益于深度学习中卷积神经网络在图像处理领域的巨大成功,目前的语义分割任务在性能方面取得了显著提升。然而,大多数语义分割方法只是通过不断增加模型复杂度来提高分割效果,却忽略了硬件资源内存、显存消耗和推理延迟等问题。针对以上问题,本文基于深度卷积
学位