红外与可见光跨模态人脸识别关键技术研究

来源 :合肥工业大学 | 被引量 : 0次 | 上传用户:loveagle
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在夜间的黑暗场景中,普通的监控摄像头拍摄到的人脸图像一般清晰度差并且很昏暗,而近红外摄像头可以在夜间捕获到清晰度高的近红外人脸,因此近红外成像技术在监控系统里有广阔的应用前景。然而现在很多应用程序里预注册的人脸是可见光下的人脸,这就需要将摄像头拍摄到的近红外人脸与照片库中的可见光人脸进行匹配识别,从而确定近红外人脸图像的身份,这对维护社会治安、协助警方破案具有重要意义。为了更好地利用红外成像的优势,夜间在远距离时用热红外摄像头来检测是否有人经过或靠近,有利于提前预警;在近距离时用近红外摄像头拍摄清晰人脸并进行识别,有利于锁定嫌疑人。本文针对红外成像这两方面的应用分别做了热红外图像的超分辨率重建和近红外与可见光跨模态人脸识别两方面的研究工作,具体研究内容如下:(1)热红外图像在成像或传输过程中,受到环境、元器件性能等诸多因素的影响,会出现图像分辨率偏低的情况。本文为了提高热红外图像的分辨率,提出了一种基于通道注意力与迁移学习的热红外图像超分辨率重建方法。该方法首先设计了一个深度卷积神经网络,融入通道注意力机制来增强网络的学习能力,并且使用残差学习方式来加速网络的收敛。然后考虑到高质量的热红外图像难以采集、数目不足的问题,将网络的训练分成两步,第一步用自然图像来预训练网络模型,第二步利用迁移学习的知识,用较少数量的高质量热红外图像对预训练的模型进行微调。最后用多尺度细节滤波来进一步提升重建后的热红外图像的边缘清晰度和视觉效果。实验结果表明本文所提方法在提升热红外图像分辨率上有明显效果。(2)为了提高近红外与可见光跨模态人脸识别的准确率,本文设计了一种基于模态差异分解的近红外与可见光跨模态人脸识别方法,首先取可见光图像HSV空间的明度分量(V分量)作为一种辅助模态来降低网络学习的难度。明度分量保留了可见光图像的结构信息,又近似于近红外模态的颜色信息,这样就将网络学习近红外模态和可见光模态之间的巨大差异分解成学习两个较小的差异。其次我们将三个模态的数据输入到权重共享网络中,并在本文设计的跨模态分割差异损失和模态内差异损失的联合指导下进行训练。实验结果表明本文所提方法在提高近红外与可见光跨模态人脸识别准确率上有明显效果。
其他文献
我们先来看看以下一组雅思考试真题:1. Some people think the best way to improve road safety is to increase the minimum legal age for driving cars and motorcycles. To what extent do you agree or disagree?(2015/2/12)
期刊
我们先来看看以下一组雅思考试真题:1. An increasing number of people are changing careers during the working life. What do you think are the reasons? Do you think it is a positive or a negative trend?(2014/6/21)2. I
期刊
我们先来看看以下一组雅思考试真题:1. Some people think that technology makes life complex, so we should make our life simpler without using the technology. To what extent do you agree or disagree?(2017/2/8)2. Most
期刊
释义是英语学习与测试的重要手段,在雅思考试中应用尤为普遍。本文结合雅思听力测试真题,从词汇、句法和逻辑三大层面分析四种释义方法,帮助学生掌握实用考试技巧,提高听力理解能力。
中医学是我国传统医学,具有独特的理论风格的完整的学科体系。其中论及了大量微生态的内容,而且贯穿在中医理、法、方、药的整个理论体系中, 随着当代中西医结合工作者在这方面研究工作的逐渐开展和深入,中医与微生态的本质联系正在逐步被揭示出来,微生态学的一些基本理论观点和中医药学极为相似,一脉相通,中医学与微生态学相结合形成了中医药微生态学这一新兴边缘学科。中国著名的微生态学专家魏曦教授曾经预言:"微
会议
以调查问卷的方式,分析了"水的净化"在教学中存在的问题:学生认知层次较浅,难以体会水净化的实践和内涵;教师认知程度不够,难以体会水净化的价值和意义。提出在教学中应融合"水文明"变迁史,通过开展"看、动、做、品"等4个方面的活动,帮助学生全面深入理解水的净化过程,真正体会到化学学科的价值,理解"绿水青山就是金山银山"的意义。
菌群与机体处于共生状态形成菌群微生态,二者保持相互平衡的稳定状态。菌群具有为机体提供营养、抵抗病原菌入侵和调节免疫应答的作用。中枢神经系统退行性疾病是一组慢性进行性的中枢神经组织退行性变性的疾病的总称,主要表现为脑或脊髓神经元退行性变性及丢失。阿尔兹海默症(AD)、帕金森病(PD)、多发性硬化症(MS)、肌萎缩侧索硬化症(ALS)等退行性疾病与菌群微生态紊乱密切相关。本文就菌群微生态与神经退行性疾
随着人们生活水平日益提高,口腔健康越来越受到关注。近年来,益生菌对口腔菌群和宿主健康的调节作用已成为广泛研究的话题。已有证据表明,益生菌可以竞争性地抑制口腔中致病细菌的黏附和定植,分泌抗菌物质以减少病原菌。本文综述了相关益生菌对变形链球菌这一公认的龋齿病原菌的作用,包括:(1)生物表面活性剂、细菌素、胞外多糖等益生菌代谢产物对变形链球菌牙菌生物膜的抑制作用;(2)刺激宿主免疫反应,调节口腔菌群组成
2020年高考化学山东卷第15题,考查了考生相关的关键能力与必备知识。教师在课堂教学中应聚焦必备知识,强化模型认知;注重素养导向,培育关键能力;注重方法参透,发展科学思维。只有正确认识教与学的方向,发挥高考题的素养导向与评价功能,才能真正做到高效学习,科学备考。