基于神经网络的面部表情识别方法

来源 :南京邮电大学 | 被引量 : 0次 | 上传用户:zhucejuren2011
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
面部表情识别技术是人机交互领域的研究热点之一,已广泛的应用在远程教育、智能驾驶等领域。尽管面部表情识别技术已取得诸多成果,但是在实际应用场景中仍然存在许多挑战,如复杂多变的光照条件、不同遮挡程度的面部表情等。为了给出具有较强鲁棒性的人脸表情识别方法,许多学者将神经网络应用于表情识别并取得了好的识别效果。本文对基于神经网络的静态图像和图像序列表情识别进行了研究。(1)对静态图像的人脸表情识别研究,选择DenseNet121模型进行人脸表情识别研究,提出了一种多尺度注意力机制的DenseNet模型。首先,针对DenseNet121模型网络层数过深,网络参数量过多,将DenseNet121模型中的四个稠密块改为三个稠密块且对稠密块中的卷积块个数进行一定程度的简化。其次,针对输入大小为48×48×1的图像,不同于DenseNet121模型采用7×7的卷积核提取图像表情特征,本文引入了多尺度卷积核,提取输入图像的多尺度的特征,比提取单尺度的特征更有利于后续的表情分类。另外,针对DenseNet121模型网络层数的加深,提取出的特征向量在通道维度上不断扩展,在空间维度上被不断压缩,获取不同通道特征向量对后续表情分类的贡献率比区分出不同空间维度特征向量对表情分类的贡献率更有价值,故在DenseNet121模型中插入了通道注意力模块MECANet。在CK+数据集和Fer2013数据集上实验表明,较DenseNet121模型而言,改进后的DenseNet模型在静态图像的表情识别准确率得到明显提升。(2)对图像序列的人脸表情识别研究,充分考虑了图像序列全局时域信息和局部时域信息的重要性之后,提出了一种多网络融合模型。该网络模型包含三个模块:提取图像序列全局时域信息的MECA-Inception-Res Net+Bi LSTM模型,提取图像序列局部时域信息的3DMECA-Conv Net模型和软投票融合策略模块。在CK+数据集和Oulu-CASIA数据集上的实验证明,通过提取图像序列全局和局部时域信息,结合新的判决策略进行人脸表情识别,取得了比单一网络模型更佳的识别准确率。
其他文献
国防军工、航空航天和交通运输等领域对轻量化和高性能装备的需求日益增多,内环筋构件在降低重量和提升性能方面具有显著优势,其成形研究受到了广泛关注。传统成形方法难以保证筋部流线完整,无法满足高承载能力要求,已成为制约装备研制和发展的瓶颈。围绕7A04铝合金内环筋挤压成形中的流线调控问题,本文采用有限元模拟、宏微观测试以及挤压成形试验等方法,研究了挤压道次和挤压方向对7A04铝合金力学性能的影响,揭示了
柿(Diospyros kaki Thunb.)是医食两用的大宗水果,具有多重营养价值和保健功效,富含多酚、单宁、黄酮、色素、维生素、膳食纤维等天然活性成分,是极具潜力的优势植物资源。柿单宁作为柿果特有的天然化合物,是柿果生理活性的主要贡献者,对其生理生化特性的全面挖掘已然成为推动柿单宁开发应用和柿产业综合发展的首要任务。现有研究表明,柿单宁具有清除自由基、防止动脉粥样硬化、抗辐射等生理功能,其具
外骨骼机器人是智能机器人的典型代表之一,它可以实现人类智能与机器力量的结合,增强肌体的综合能力,缓解由于负重和长时间工作带来的疲劳。外骨骼机器人可以应用于提升士兵在携带更多物资弹药及作业设备后的运动速度与灵活性,也可以应用于工业、建筑业及抢险救灾等劳动强度较大且不便于机械化作业的场景中,提升穿戴者防止肌肉劳损和预防职业病的能力。下肢外骨骼机器人机构通过辅助装置与人体下肢并排连接,这需要下肢外骨骼机
计算机断层成像(Computed Tomography,CT)技术能够不破坏、无损伤、无影像重叠地呈现被测物体内部结构的详细信息,被广泛应用于医学影像诊断及工业无损检测等行业。X射线CT图像重建是将X射线穿透被检物体,利用从多组扫描角度下采集的投影信息重构物体内部断层信息的过程,是CT成像技术的关键环节。投影数据的完备性直接影响着CT图像重建模型的构建及实用化的可能。在医学和工业等行业的实践中,常
药食同源目录中的中草药食材有安全无毒的优点,紫苏和紫苏籽均位列其中,以紫苏和紫苏籽为原料提取出的天然产物种类十分丰富且被证明具有重要的应用价值和市场前景。本论文以紫苏叶(Perilla leave,PL)及紫苏籽榨油后的紫苏饼粕(Perilla seed meal,PSM)为材料提取紫苏多糖,一方面可丰富紫苏天然活性成分基础研发,另一方面可提高紫苏资源的综合利用度。分别对不同品种和时期PL、不同品
帕金森综合征是一系列有着相似症状的临床症候群,广义上帕金森病综合征包括原发性帕金森病、继发性帕金森综合征、帕金森叠加综合征(PPS)和遗传性帕金森综合征等变性疾病。临床上以中老年人好发,常表现为静止性震颤、肌强直、运动迟缓和姿势反射障碍等运动症状。多种因素均能诱导产生帕金森综合征,不同类型因素诱导的帕金森综合征的表现也不尽相同,某些治疗方法截然相反,故需要根据不同病因分辨。本文将针对两种因素导致的
研究背景尽管机械取栓(Mechanical thrombectomy,MT)提高了急性缺血性卒中(Acute ischemic stroke,AIS)患者血管再通率,但仍有约50%患者卒中后90天时功能预后不良,还有部分患者发展为症状性出血转化(Symptomatic hemorrhage transformation,sHT)、恶性脑水肿和脑疝等恶性病程。因此,早期识别有不良结局风险的患者,对于
研究背景和目的:胃癌(gastric cancer)的发病率和癌症致死率均高居我国癌症病例的第三位,严重危害我国居民身体健康和生活质量。80%的胃癌患者在确诊时已处进展期,手术或化疗对患者疾病康复均收效甚微,现已有部分生物标志物被用作进展期胃癌的治疗靶点,但疗效仍难令人满意,其原因主要在于肿瘤多基因突变和肿瘤微环境的改变,因此深入研究胃癌发生发展的分子机制,探寻行之有效的防治靶点,将为改善进展期胃
随着工业4.0的提出和国家智能制造2025发展规划的颁布,我国协作机器人销量复合增速超过了50%,机器人技术被更多地应用于智能生产线、家居生活、医疗、服务、科研教育、援助等人机协作领域,协作机器人成为机器人行业未来发展的重点方向。人机协作场景要求机械臂具有高柔性、安全性、感知力、轻量化、模块化等特性,因而人机协作机械臂的模块化关节通常由结构简单、重量轻、传动比大的谐波减速器和高精度关节力矩传感器构
基于保偏光纤的偏振器件在相干光纤通信、光纤陀螺仪、光纤传感器等领域中有着极其重要的应用价值。四分之一波片是一种能够将线偏振光转化为圆偏振光的偏振器件,在全光纤电流互感器中有着十分重要的作用,它通常由两段保偏光纤45°对轴熔接,然后截取波片制作光纤的四分之一拍长的长度制作而成。保偏光纤的对轴角度是其制作过程中的关键一步,直接影响到四分之一波片的性能,而如何精确控制保偏光纤的对轴角度是四分之一波片制备