基于视频的微表情识别技术研究

来源 :中国科学院大学(中国科学院长春光学精密机械与物理研究所 | 被引量 : 0次 | 上传用户:ooo4zhgr
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人类表情在非语言性的情绪表达方面起着重要作用,包含宏观表情和微表情两大类。宏观表情更为人们所熟知,脸部肌肉运动有较大幅度,能清晰辨别出具体的表情类别。微表情研究相对较新,不同于传统的宏观表情,微表情持续时间一般为1/25到1/3秒之间,难以提取最佳的运动特征表达,是人们自发产生的微弱情绪表达。微表情分析在社会安全、刑事侦查等领域有着较大的应用潜力,作为人类心理活动最真实的反应,越来越受到人们的关注。虽然微表情持续时间非常短,很难被人察觉,但包含着丰富的情感信息。宏观表情可伪造、可抑制,难以反映人们的真实情感,微表情不能自主地被压抑,不受人为控制,有着更高的客观性,作为一种自发式的表情揭示了人类所隐藏的真实情感。研究微表情对于心理学、临床医学等相关学科有着较大的推动作用,虽然目前对人脸宏观表情研究成果丰硕,但微表情分析的研究目前仍非常有限,有很大的发展空间。在早期微表情研究中严重依赖专家经验,研究者提出一些辅助性的微表情训练工具来检测和识别微表情,但成本过高、识别率过低使得在现实中难以被实际应用。之后随着学术界一些微表情数据库的建立和发布,研究者们在公开的数据集上进行了大量的实验验证来分析微表情。近些年,深度学习技术在宏观表情分类等领域发挥出比传统方法更大的优势。许多基于神经网络端到端的模型已经应用于微表情识别领域。基于深度学习的特征提取方法避免了专业化和繁琐的手工特征设计,可以自动捕捉和分类微表情,能提取出微表情的有效特征和细微变化。尽管近些年深度学习使得微表情识别准确率有很大的提高,目前仍有很大的改进空间以及许多未解决的开放问题。本文针对微表情识别领域所存在的问题,提出对应解决方案。本文的主要研究内容如下:1)提出了针对微表情视频序列的一系列预处理方法。大部分基于深度学习的微表情识别算法通常直接进行端到端的网络训练,而忽略了输入网络前预处理过程中更多的特征提取和分析。对此本文完成了从原始微表情数据库图片到网络输入特征图的完整预处理过程,本文应用了最新的人脸对齐研究工作,探索了视频运动放大技术,创新地对脸部微弱运动所产生的光流特征进行不同组合。2)设计了一种改进的残差网络单元,融合了针对微表情数据的空间注意模块到深度网络中,来应对微表情识别的挑战,在本文所提出的识别模型中利用注意力机制来学习更细微的特征,实验证明改进的残差单元的叠加组合是能够提取到脸部微弱运动区域的特征,每个改进的残差模块能够专注于面部感兴趣的区域,与面部微表情识别的常规方法对比,有着更卓越的性能。3)针对微表情识别算法准确率较低的问题,提出一个新颖的传统特征提取和深度学习相结合的分类模型,提出了基于Res Net残差模块叠加的双分支网络架构,能够对输入的光流特征的不同组合组件进一步捕获微表情序列的相关特征,得到较好的分类结果。同时本文所采用的较浅的网络单元堆叠,在保证网络模型性能良好的同时,也减小了网络模型的大小。在公开的微表情数据集上通过定量分析和定性分析均验证了本文所提出模型的有效性。
其他文献
<正>科学家如今正试图拼凑出SARS-CoV-2起源之处、运行机制以及未来前景——而最迫切的问题仍属COVID-19的来源之谜。1912年,德国的兽医们曾为一个出现发热及严重腹部水肿的猫病例大伤脑筋,如今,这被认为是首个报道了冠状病毒杀伤力的案例。当时的兽医们并不知情,冠状病毒还会引发鸡传染性支气管炎和猪传染性胃肠炎,而小于两周龄的仔猪会因感染后者而几乎全部丧命。
期刊
<正>高三数学复习课质量的高低直接影响学生对数学知识与方法的深入理解、思维能力的提升及良好数学素养的形成.近年来,微专题复习课正成为大家广泛认同的一种有效的课型.所谓"微专题",是指立足于具体的学情、教情和考情,选择一些切入点小、角度新、针对性强的"微型"复习专题,力求解决复习中的真问题和实问题.求圆锥曲线的离心率范围问题是近年高考的一个热点,但是由于这类题型条件隐晦,涉及面广泛,不少同学面对这类
期刊
文章根据融合教育教师岗位特点,结合特殊儿童心理发展、特殊儿童行为干预的需要,提出筛查和评估、制定个别化教育计划、实施教育计划组织教学活动、情绪与问题行为介入、个案管理、专业沟通与协调、组织家长和教师培训等系列技能,构建完整的技能体系,培育融合教育合格人才。
学位
得益于专卖制度的特殊保护以及烟草人的辛勤付出,我国烟草行业不仅一直是国企中的利税大户,而且在就业安置、脱贫帮扶、环境保护和社会捐赠等方面也作出了应有贡献。在烟草行业快速发展中,硬件建设取得了长足进步,较之于国外优秀同行也毫不逊色。相比之下,行业软实力则长期滞后,尤其体现在战略领导力不强、学习创新力不足、社会责任力不够和风险抵御力不牢等方面。积极构建软实力评价体系,全力督导行业软实力建设,是提升S省
为探索培育半枫荷容器苗常用基质的配比,总结半枫荷扦插容器育苗的关键技术,在福建省三明市沙县区建立试验区,开展以菇棒、黄心土和火烧土为基质的不同配比的半枫荷容器苗培育对比试验。结果表明,基质的不同配比对半枫荷容器苗扦插成活率影响较大,基质配比以V(菇棒)︰V(黄心土)︰V(火烧土)=3︰3︰4表现出的扦插成活率最高,容器苗的苗高和地径生长最好,更有利于半枫荷容器苗的培育。
以沙县国有林场半枫荷与杉木混交造林为研究对象,采用N(半枫荷)︰N(杉木)=4︰6、N(半枫荷)︰N(杉木)=5︰5、N(半枫荷)︰N(杉木)=6︰4等3种不同的混交比例; 2 500株/hm~2、2 750株/hm~2、3 000株/hm~2等3种不同造林密度;上坡、中坡、下坡等3个坡位分析造林对半枫荷与杉木生长的影响。结果表明,该地区半枫荷与杉木5︰5混交,造林密度为2 750株/hm~2,且
随着煤矿事业的迅速发展,对煤矿探放水工作将提出更高的技术要求。针对各个地区具体情况,所采用的物理探矿方式不同,需要根据矿井的探放水工作实际需要合理使用水文地质物探施工方式。根据某区域的地质状况,对防治水污染工作中地层物探施工、井下物理探矿方式的合理使用进行探讨,并在此基础上给出水文地质物探施工应用的注意事项,为实际探放水工作的实施提供了借鉴。
目的 探讨在幽门螺杆菌感染性胃病治疗中选择中药治疗方式的临床效果。方法 选择2020年3月—2021年7月入院就诊的幽门螺杆菌感染性胃病患者60例作为研究对象,临床分组方式选择电脑随机抽签法,设置研究组(30例)与对照组(30例)。对照组患者采用西药治疗,药物选择为奥美拉唑、甲硝唑联合阿莫西林;研究组患者在这一基础上联合使用中医疗治疗。对2组患者的临床治疗效果进行对比。结果 干预后,研究组患者的中
目的 探讨舒芬太尼对BT474人乳腺导管癌细胞恶性生物学行为的影响及作用机制。方法 体外培养BT474人乳腺导管癌细胞,随机将细胞分为对照组(C组)和舒芬太尼组,C组仅使用1640完全型培养基培养,舒芬太尼组分别给予含不同剂量舒芬太尼[0.1 nmol·L-1(L组),1 nmol·L-1(M组),10 nmol·L-1L(H组)]的1640完全型培养基培养;处理时间24 h。采用平板克隆形成实验