基于动态人脸表情相似度的情绪状态识别研究

来源 :东华大学 | 被引量 : 0次 | 上传用户:vsbutcher00
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
情绪状态识别目的是让计算机拥有能够分析和了解人类情绪和意图的能力,深层次的分析人类的心理活动,从而在娱乐、教育、智慧医疗等领域发挥作用。根据表情的类别可以将情绪分为高兴、惊讶、悲伤、愤怒、恶心、害怕、蔑视七种情绪。本文将基于这七种情绪,依托课题组视频动作识别与智能分析项目,从动态人脸表情相似度的角度进行情绪状态识别的研究。利用卷积神经网络训练表情强度评估模型,以此来估计面部表情的强度,并在此基础上提出了基于动态表情相似度的情绪变化过程的研究。论文的主要工作如下:(1)基于卷积神经网络的表情强度估计。为了研究表情强度的差异,根据表情强度的动态变化研究情绪强度的变化,本文利用孪生网络构建了表情强度评估模型。首先根据表情序列间的顺序关系,将表情强度的估计问题转换为一种排序问题,然后再根据排序关系给数据打上标注,根据标注将排序问题转换为分类问题,并根据表情强度值从视频中提取表情序列。(2)基于动态表情相似度的情绪过程研究。在表情强度研究的基础上结合动态表情相似度研究情绪变化过程,具体实现包含四个基本步骤:表情特征提取、表情特征降维、表情强度估计以及动态人脸相似度匹配。本文采用深度学习的方式提取表情序列的特征,接着对于提取到的高维度表情特征,采用了KPCA降维的方式,将原始非线性的表情特征映射到一个高维甚至是无限多维度的空间使得特征数据线性可分,并在转换后的空间中进行主成分分析,得到低维度的表情特征,可以有效的降低动态表情相似度计算的复杂度。随后对于情绪强度估计采用的是第三章基于卷积神经网络方式,根据表情强度获得情绪强度的变化曲线,通过强度曲线的对比,判断其情绪强度的变化过程。最后通过基于余弦相似性的动态人脸匹配算法计算动态表情的特征相似度,通过特征相似结合强度曲线的相似,研究其情绪变化的过程,并识别其情绪。(3)情绪识别系统的实现。基于前两个研究点,再结合前后端相关知识,设计并实现了情绪识别系统,该系统不仅可以从本地上传视频进行情绪识别,而且可以通过摄像头实时采集动态表情变化的视频进行情绪的实时识别。该系统能够快速的识别情绪状态,对于情绪的识别实用性较强。
其他文献
在构建体温调节概念模型过程中,一些问题影响了不少教师和学生对调节过程的理解。本文就体温调节模型细节分析上容易出现理解偏差的几个问题进行分析总结。
随着新冠肺炎疫情的局部反弹,以河北省与周边省市为例,评价跨域危机应急联动能力对于应对重大疫情至关重要。根据国内外关于跨域危机应急联动的理论与实践,构建涵盖资源保障、信息沟通、监测预警、应急协调四要素的应急联动能力评价指标体系,运用多层次模糊综合评价方法评估河北省与周边省市跨域危机应急联动能力,建议从完善应急预案、畅通信息沟通渠道、优化应急协调机制三方面入手做好应急联动能力提升工作。
近年来,随着建设行业的工业化改革与产业转型,创新了诸多新材料、新工艺、新技术。通过对其应用不仅提高了建设工程施工效率,也较好地增强了工程质量。文章概述了非固化橡胶沥青防水涂料的技术特点与应用优势,结合某建筑项目防水工程,在说明工程概况后,分别从施工难点、解决对策、施工流程、施工步骤、质量控制方面,对其施工技术进行了具体讨论。
通过2009—2014年对福建闽南沿海的湄洲湾、大港湾、泉州湾、围头湾、厦门湾、佛昙湾、旧镇湾、东山湾、和诏安湾养殖的僧帽牡蛎中总汞和总砷含量的调查监测,对养殖僧帽牡蛎体中总汞和总砷含量的分布和食用风险进行探讨。结果表明近六年九个湾海区养殖僧帽牡蛎体中总汞平均含量(0.007~0.018 mg/kg):湄洲湾>泉州湾>厦门湾>诏安湾>围头湾=旧镇湾=大港湾=东山湾>佛昙湾;总砷平均含量(1.40~
乙烯装置废碱氧化单元是重要的环保处理装置。主要以氧化的方式处理硫化物(Na2S等),在进入氧化反应工序前,一般汽提塔用于除去废碱液中携带的黄油等烃类,该部分烃类在高温条件下,易聚合结垢堵塞汽提塔,影响装置平稳运行。汽提塔堵塞后,常采用水力清洗的方式进行检修,但产生了大量的黄油聚合物等危废,处理难度较大,同时作业环境恶劣,安全环保风险较大。通过改造确立了汽提塔洗油浸泡、循环清洗流程,项目投用后可有效
目的:对金缕半枫荷根甲醇部位的化学成分进行研究。方法:金缕半枫荷根用65%乙醇回流提取,提取液减压浓缩,经D101大孔吸附树脂富集,甲醇洗脱,得到浸膏。浸膏应用硅胶、Sephadex LH-20柱色谱分离得到16个化合物,并根据其理化性质和波谱分析来解析这些化合物的结构。结果:从金缕半枫荷根甲醇洗脱部位中分离得到16个化合物,分别鉴定为:白桦酸(1)、moronic aldehyde(2)、2,6
通过综合介绍零信任、零信任网络访问的需求背景、山石网科零信任访问解决方案的亮点,以及典型场景,实现对零信任全面的理解和认知.
目的:探讨电话随访护理干预对慢性阻塞性肺疾病(COPD)患者的影响及再次入院原因分析,并提出应对措施。方法:将2019年1月1日~12月31日收治的COPD患者199例随机分为对照组100例和研究组99例,对照组进行常规干预,研究组采用电话随访进行干预;比较两组再次入院情况、用药及家庭氧疗依从性、干预前后心理状态[采用汉密顿抑郁量表(HAMD)、汉密顿焦虑量表(HAMA)]及生活质量[采用健康调查
<正>共情是心理学领域中一个十分重要的概念,主要指的是个体在对他人情绪进行想象的过程中,或是在对真实事件进行分析的过程中,实现的与个人情感达到一致的体验。小学语文课程具有人文性和工具性统一的特点,尤其注重培养学生的语言表达能力及语文实践能力,而在进行语文学习活动推进的过程中,通过合理应用共情理论,能够使课堂教学的有效性得到进一步提升。
期刊