基于单张图片的三维人脸重建和识别

来源 :南京航空航天大学 | 被引量 : 0次 | 上传用户:shuijing0328
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
三维人脸感知是计算机视觉和模式识别领域的热门研究课题,受到了国内外的广泛关注和深入研究。其中三维人脸的稠密对应、重建和识别是三维人脸感知中紧密相连的研究热点,三维人脸稠密对应建立了三维人脸之间的点点对应关系,给三维人脸重建、识别等研究带来了方便;三维人脸重建从人脸图片中恢复三维人脸形状,在动画制作、人脸识别等领域有广泛的应用前景;三维人脸识别能解决二维人脸识别受姿态和光照等变化影响大的问题,使人脸识别技术在自然场景下的应用具有更好的鲁棒性。本文主要工作如下:
  首先,提出了一种基于改进的非刚性最近点迭代(Non-rigid Iterative Closest Point, NICP)的三维人脸稠密对应方法。基于NICP的三维人脸稠密对应算法通过逐步形变一个高分辨率的三维人脸模板来逼近目标人脸,但该类算法普遍以牺牲稠密对应精度的方式来换取拓扑结构的保持,针对这一问题,提出了在NICP的目标函数中加入关于拓扑结构的约束,使其无需通过大幅度减小距离损失权重的方式来保持拓扑结构,从而提升稠密对应精度。此外,针对人脸中心区域存在少量点配准误差大的问题,使用了一种权重自适应策略以提升这部分点的配准精度。实验结果表明,改进的NICP算法在保持人脸拓扑结构的同时能提高稠密对应精度。
  其次,提出了一种基于样本筛选的三维人脸重建方法。基于形变模型及其改进的人脸重建方法都以线性类假设为前提,即认为目标人脸位于其相似人脸张成的子空间内,而数据库中可能存在目标人脸的非相似样本,因而使用数据库中的全部原型人脸来表示目标人脸并没有考虑目标人脸与原型人脸之间的差异性,这会导致重建出的人脸存在较大的偏差。针对这一问题,本文首先利用分类算法确定输入图片中人脸的性别和表情属性,并根据性别和表情属性筛选出该图片中的人脸在数据库中对应的三维人脸数据子集,然后使用稀疏表示理论在数据子集中筛选出与目标人脸相似的原型人脸,接着利用筛选出的原型人脸样本构建稀疏形变模型,最后利用目标人脸的特征点进行模型匹配,重建出目标三维人脸。实验结果表明,该算法重建出的人脸真实感强,精度高,并且算法具备对表情人脸的重建能力。
  最后,提出了一种基于卷积神经网络的多模融合三维人脸识别方法。首先,以人脸深度图为桥梁,将人脸形状数据通过投影的方式转换到二维空间中,针对深度图投影过程中部分深度信息损失的问题,设计了一种局部增强的人脸曲面深度图,以尽量保留鼻子等刚性区域的深度信息,然后融合局部增强的曲面深度图和人脸纹理图得到3D+2D的融合特征,最后以SqueezeNet为基础网络结构训练卷积神经网络模型,并在对识别准确率影响不大的条件下精简网络模型以减少人脸识别的所耗时间。实验结果表明,该算法识别准确率高,识别速度快,对表情的变化具有较好的鲁棒性。
其他文献
许多学者认为文学是语言的艺术,因而文学翻译中必须保留原文的语言特色或独特手法,以便在译文中体现原文的文学性。本文作者则认为在译文中保存原文的表达方式行不通,也不能取得同样的效果。 首先,文学作品的文学性不是完全由语言形式决定的,应为语言本身并没有一种内在的特性使“文学语言”区别于其他类型的语言,二者并非各自独立、有清晰界限的系统。其次,英汉两种语言有巨大的差异,蕴含的文化也有极大的不同。如
学位
我国的民国时期商业美术是美术发展史中一个重大转折点,它不仅延续了传统的经典文化还结合了西方美术的艺术理论以及绘画技法,中西合璧开拓了一个美术发展的新成就。女性形象作为视觉符号长久以来被广泛应用到绘画作品中,无论是传统仕女画还是民间年画。民国商业美术发展时期,女性形象同样被广泛的应用于视觉消费中,以女性来作为广告与宣传的载体,是一种不难被接受且被大众所欣赏追求的现象,本文就是以民国时期商业美术的集大
学位
在有丝分裂期间,染色体的分离需要去除姐妹染色单体之间的连环。拓扑异构酶IIα(TOP2A)能及时地去除有丝分裂着丝粒处姐妹染色单体的DNA连环,这一过程对维持基因组稳定是至关重要的。然而在有丝分裂期间,招募TOP2A到着丝粒的染色质因子尚不清楚。  文中我们展示了组蛋白H2A第120位苏氨酸的磷酸化(H2ApT120)——一种由有丝分裂激酶Bub1产生的磷酸化修饰,对TOP2A在着丝粒的定位是必要
学位
基因组经常受到外界环境和细胞代谢产生的DNA损伤因子的攻击,经过估计每个细胞每天会产生104-105次DNA损伤。真核生物针对DNA双链断裂损伤(DSBs)进化出了两种修复途径:同源重组修复途径(HR)和非同源末端连接途径(NHEJ)。相比于NHEJ,HR更加精确,可以利用姐妹染色单体为模板来复制损伤的DNA序列,因此只发生在细胞周期的S/G2期。HR的第一步就是剪切DNA双链断裂末端,产生一段突
Cullin4B(CUL4B)属于Cullin家族,该家族成员是目前已知的最大的一类E3泛素连接酶复合物(Cullin-RING E3 ligase,CRLs)的骨架蛋白,通过泛素化修饰底物蛋白而发挥生物学功能。目前发现,CUL4B在胚胎发育、神经发育、DNA损伤修复、细胞周期、细胞分化以及肿瘤的发生和发展等多种生命活动中具有重要的调控功能。CUL4B丧失功能突变导致个体发育异常,而CUL4B在食
学位
被子植物在陆生植物的统治地位,被认为与被子植物高效的水分传导和光合速率有关。然而,早期被子植物的水力结构较为原始,光合速率也较低,局限分布于热带的林下。前人研究暗示,被子植物的崛起与水力结构的进化有关,有效的输水能力,保证了叶片的供水,从而使得被子植物有着较高的光合同化能力,相较蕨类和裸子植物具有高的竞争优势。  本研究以被子植物系统发育基部类群为主要研究对象,在开展实验进行测定的同时,结合收集数
学位
纳米氧化钛(TiO2)作为一种多功能材料,由于其独特的理化性质,包括小尺寸、大比表面积、低熔点、强稳定性、磁性、紫外线吸收能力等,已广泛应用于涂料、化妆品、食品工业、植入式医疗器械、药物制剂自清洁、光催化剂、光伏电池和传感器等多个领域。由于纳米TiO2的广泛应用,人体经常接触到纳米TiO2。纳米TiO2可以通过皮肤、消化道、肺吸入、医学植入等途径进入人体,并在各个器官内累积,对各个器官如肺、肝脏、
提高转子进口温度是改善燃气轮机性能和提高其经济性的重要途径,气膜冷却作为重要的冷却手段,在燃气涡轮中得到了最广泛的应用。为了设计一个能充分冷却涡轮高温叶片的系统,了解涡轮叶栅通道内流动的详细机理是很有必要的。本文以MunichArmedForcesUniversity的Ardey.S和Fottner.L的实验涡轮叶栅为研究对象,采用NUMECA公司的Fine/Turbo软件包对没有气膜冷却的涡轮叶
学位
纳米材料的广泛用途使其制备方法的研究越来越受重视。化学气相沉积法(CVD)是制备纳米粉体的一种很有效的方法,例如日常用的碳黑、钛白粉颜料(TiO2)等都可以用该方法制得。颗粒尺寸、尺寸分布状况以及形态等特性对颗粒产品的性能都产生极大的影响,这就要求对生产装置的结构和操作参数要有很好的了解和控制。本文应用CFD商业软件FLUENT,对火焰CVD法合成二氧化钛纳米颗粒的过程进行了详细的数值模拟。首先对
学位
高光谱成像是一种将成像技术和光谱技术成功结合的多维信息获取技术,同步探测目标地物的二维几何空间信息和一维光谱信息,获取具备分辨率高、光谱波段窄的影像数据。高光谱影像数据集地物样本的图像信息和光谱信息于一身,图像信息可反映地物目标的规模、分布、形状等外部特征,而光谱信息可反映样本内部的物理结构、化学组成的差异,所以高光谱影像数据具备“图谱合一”的性质。而正是由于这一性质,使得高光谱遥感影像在环境监控