基于深度学习的自然面部表情分类算法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:lihai_feng
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
面部表情在人际交往中具有传达情感信息的重要作用。人脸表情识别在人机交互、远程教育、车辆安全驾驶等领域都有着重要的应用。目前表情识别的研究已经从实验室控制环境转移到自然场景中,从传统的基于手工和浅层特征提取的方法转到了深度学习的方法。现阶段面部表情识别面临的主要难题有两个:一个是面部表情训练样本存在数量较少、分辨率较低、类别标签不准确、类别不均衡等问题,提高了训练难度;另一个是目前的算法所采用的特征提取方法存在局限性,提取的特征多为浅层特征。此外,自然场景中的面部图像极易受到面部姿势、背景光照、局部遮挡等环境因素的影响。因此,基于传统几何和浅层特征的特征提取方法,无法满足自然场景下人脸表情识别的需求。针对特征提取不充分的问题,我们提出了一个基于Inception-ResNet的深度特征提取网络。该网络结合了Inception网络多尺度的感受野和残差学习的好处,可以有效地提取面部表情的深层特征。该方法解决了传统手工特征和浅层特征无法满足自然场景下表情识别任务需求的问题。鉴于表情样本数量不足无法从头开始训练深度神经网络的难题,我们借鉴了基于网络的特征迁移的方法。首先我们将ImageNet分类任务上训练好的权重初始化网络,再以表情样本训练整个网络。该方法在CIFE等几个表情数据集上都取得了较好的识别结果。在深度特征提取网络基础上,我们设计了一个可以自适应地学习表情特征在空间上权重分配的空间注意模块。该模块解决了目前表情特征提取工作中对局部细节特征提取不充分的问题。它在整个特征提取网络中起着指导权重分配的作用,一方面加强了面部表情中包含鉴别特征的区域的权重,另一方面降低了背景和无关区域对识别的影响。空间关注层的可视化结果形象地展示了它是如何自适应地影响权重在面部空间上分布的。在CIFE等数据集上的实验结果表明我们提出的模型具有良好的识别性能,并超过了现存的方法。本文工作表明,基于空间关注和Inception-ResNet深度特征提取网络,在小样本数据集上的表情特征提取工作中有着重要的指导和深层特征表示的作用。我们设计的空间注意模块能指导网络自适应地关注面部的表情信息区域。同时基于Inception-ResNet深度特征提取网络,可以从多尺度的感受野提取面部表情的深层特征,提升表情识别结果。
其他文献
《当中国统治世界》一书是英国学者马丁·雅克关于中国问题思考的结晶。本书的核心价值在于摒弃西方学界一以贯之的“中国威胁论”和“中国崩溃论”论调,从新的文化视角重新解读中国问题。对此,国内外学者关于该书表达的观点存有分歧。其中,国外学者主要围绕“中国统治论”展开深入讨论,国内学者则更倾向于中国特色的积极评价。笔者认为,作品是作者思想的表达,对一本书的探讨不仅仅要关注著作内容,也需要关注写作该书的作者,
学位
近年来,各种互联网业务快速增长,网络结构越来越复杂,网络带宽的需求以摩尔定律的速度急速增长。各种互联网新兴业务对带宽和频谱资源的分配和管理需求越来越灵活,传统的WDM光网络难以满足这一要求,而能根据业务进行频谱资源灵活分配的灵活栅格光网络应运而生,是未来光传送网中的重要发展方向。灵活运用底层光网资源的另一种方法是客户网络的虚拟化运行。网络虚拟化的核心技术之一是如何抽象底层物理资源,并进行网络资源的
从恺撒被刺身亡(公元前44年3月)到安东尼被正式宣布为人民公敌(公元前43年4月)是塑造恺撒形象的关键时期。通过考察这一时期内罗马城中的舆论,可以发现,它们对恺撒形象的塑造
给定一个无向图,寻找一个顶点子集,使得子集中的任意两个顶点都相邻,这样的顶点子集称作团。最大团问题是指寻找一个基数最大的团,该问题是一个著名的组合优化问题,也是一类N
目的:本文旨在为青少年足球俱乐部和足球特色学校校队的实践训练和指导提供科学的足球专项有氧耐力训练方法,设计两种组间间歇时间不同的小场地比赛训练,以探讨其对青少年运
传统监督学习模型性能的提升依赖大量标记数据,然而在许多现实任务中,数据的标记往往需要耗费标注人员大量时间和精力。因此如何利用更少的数据训练有效模型是十分重要的研究问题。主动学习是解决这一问题的有效手段,具体地,它通过迭代地从未标记数据中主动挑选最有价值的样本向专家查询标记信息,并将其加入训练集中学习,从而快速有效地提升模型性能。对于多标记学习任务来说,每个样本同时具有多个语义标记,标注代价更大,因
PPP模式的政府监管作为贯穿PPP项目全生命周期的要素,是公共产品和公共服务供给的保障,也是规避项目风险的关键。我国PPP模式在中央政策支持下,经历了三年的野蛮生长,也暴露
光纤具有通信频带宽、传输损耗小和抗干扰能力强等特点,广泛应用于通信系统中。当光纤发生扰动时,对扰动进行快速定位并判断扰动事件类型(包含断点、扰动和应力)具有重要意义。长时间的光纤扰动检测会产生海量数据,应用大数据技术可以实现海量数据的高效存储与分析。本课题来源于“海底光缆检测”项目。本文搭建了基于Hadoop的光纤扰动事件检测软件平台,该平台利用硬件采集光纤传感信号,采用网络通信、数据库、Hado
为了满足人们快速增长的需求以及社会对节能环保的要求,无线通信技术成为了通信领域研究的热点之一。在现在长期演进(Long Term Evolution,LTE)时代,无线宽带到户(Wireless to The x,WTTx)成为新一代的无线宽带接入方式。同时,为了支持更高的传输数据速率,下一代通信正在将其频谱进一步扩展到更高的频段(6 GHz以上)。对无线通信系统而言,高频频谱具有很多优点,例如用
推荐系统的诞生是为了解决网络时代带来的信息超载问题。其通过分析用户的行为数据和基本信息、挖掘用户的偏好特点,为用户提供个性化推荐的服务。其中,协同过滤推荐方法应用