人脸画像快速合成与风格分类算法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:yy04081406
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人脸画像合成是通过机器学习的方法将人脸照片转换成画像的过程。人脸画像合成在现实生活中有着广泛的应用,如刑侦破案和数字娱乐等。以刑侦破案为例,自动搜索犯罪嫌疑人的照片可以辅助办案人员缩小搜索范围。在获取不到犯罪嫌疑人正面清晰照片的情况下,画家可以根据受害者或者目击证人的描述或者监控视频中不清晰的画面绘制出犯罪嫌疑人的画像。在这种情况下,我们可以借助人脸画像合成技术将刑侦数据库中的人脸照片转换成人脸画像,再与画家描绘的人脸画像进行比对。由于刑侦人脸画像的数据量庞大,并且这些画像可能出自于不同画家之手,具有不同的绘制风格,需要先确定画像的风格,再将数据库中的照片快速合成为具有相同风格的画像,进而实现比对。但是,现有人脸画像合成方法的效率较低,并且关于人脸画像风格分类的研究至今少见,不能满足上述需求。为此,本文致力于研究人脸画像的快速合成方法和风格分类算法,主要创新点可以概括为:  1.提出一种基于双迁移学习的人脸画像合成算法。现有的人脸画像合成方法假设人脸画像和照片在低维流形下结构相近,首先学习出测试照片和训练照片的结构信息,然后将该信息从照片空间映射到画像空间,从而合成人脸画像。但是画像和照片中人脸的局部结构相近的假设过强,当一些特有的信息存在于测试人脸照片中,而不存在于训练人脸照片-画像对中时,它们将很难被合成出来。针对该问题,提出了一种基于双迁移学习的人脸画像合成算法:第一步为域间迁移学习,将训练照片和测试照片的关系从照片域迁移到画像域,得到训练画像和待合成画像的关系;第二步为域内迁移学习,在照片-画像联合域,将训练照片和画像的关系域内迁移到测试照片和待合成画像的关系;第三步为高效实现,使用核范数正则化目标函数,使其解满足低秩特性,进而获得闭式解。实验表明所提方法相较于现有的人脸画像合成方法,可以更快更好的合成测试集中特有的信息。  2.提出一种基于组合模型的人脸画像合成算法。现有的人脸画像合成方法先将人脸图像分成等大小均匀且有交叠的方块,然后逐块进行人脸画像合成,最后使用加权平均的方法处理画像块的交叠部分,得到最终的画像。这样基于块加权平均的方法会抑制边缘和高频信息,会造成交叠区域的纹理模糊。针对上述问题,仿照画家根据照片描绘人脸画像前的观察和思考过程,提出了一种基于组合模型的人脸画像合成方法:第一步为模版生成,将人脸划分为七个部件,每个部件生成不同的模板,替代传统方法中将人脸划分成等大小均匀且有交叠的图像块,保证了每个部件的完整性;第二步为部件合成,根据每个部件设计特征,并使用分类方法为测试照片部件找出最相似的画像模板,有效地将训练和测试阶段分开,将训练阶段放在线下学习,从而提高了算法线上测试的速度;第三步为部件形变和融合,采用多层的B样条估计的方法,使所选画像模版的形状与测试照片的形状尽可能相似,并使用泊松融合形变后的部件,避免传统加权平均融合方法带来的边缘抑制和模糊问题。实验表明所提方法相较于现有的人脸画像合成方法,不仅合成速度快,而且合成人脸画像的纹理清晰生动,实现娱乐领域的三个应用。  3.提出一种基于画风部件与特征的画像风格分类算法。现有关于风格分类的方法主要针对中国山水画和西方油画,而它们与人脸画像存在一定的差异,无法直接使用现有方法解决人脸画像风格分类的问题。针对该问题,提出一种基于画风部件与特征的画像风格分类算法:第一步为设计画风部件,借鉴艺术评论家通过观察人脸画像不同部件的细节信息来区分人脸画像画家的方法,设计了五个画风部件;第二步为设计画风特征,借鉴画家使用不同的绘画技巧表现出他们独有的人脸画像风格,设计了四个画风特征;第三步为利用基于支撑向量机的选择性集成方法进行人脸画像的风格分类,增强机器学习系统的泛化能力,提高分类问题的准确性。实验表明所提方法可以快速有效地区分不同画家的绘画风格。  4.提出一种基于多核学习的画像风格分类算法。不同的特征具有不同的数据结构,这些异构的结构信息使得输入到分类器的数据存在高维空间分布不平坦的问题。针对上述问题,提出了一种基于多核学习的画像风格分类算法:不同的核函数把异构数据对应的不同特征分量映射到不同的特征空间中,使得异构数据在不同特征空间组合而成的组合空间中得到更好的表示,提高分类准确率。多核学习相较于交叉验证、特征选择和选择性集成在解决画像风格分类问题上具有一定的优越性。实验表明所提方法不仅可以有效地区分不同画家的绘画风格,并且可以辅助画像合成方法合成出不同风格的人脸画像。
其他文献
真核细胞的染色质可以分为常染色质和异染色质。己有的研究表明,异染色质在调控基因表达、维持基因组稳定性、细胞的发育分化以及肿瘤的表观调控等方面发挥着重要作用。至今,异染色质的形成及其功能一直没有完全研究清楚。已有的研究已经比较清楚地表明,裂殖酵母利用RNA干扰(RNA interference,RNAi)机制在细胞核中染色质水平上直接介导异染色质的形成。Hsp90作为分子伴侣蛋白家族的一个特殊成员。
学位
目的 了解贵州省农村地区人体土源性线虫感染现状,为制定全省土源性线虫病防治对策提供科学依据. 方法 2015年按照《全国人体重点寄生虫病现状调查方案》和实施细则要求开展
收集江苏大学附属医院2018年收治的慢性腹泻患者粪样,涂片镜检并提取粪样DNA,采用多重PCR技术检测粪样中艰难梭菌16S rDNA基因、毒素A(tcdA)基因、毒素B(tcdB)基因和二元毒素
无线传感器网络(Wireless Sensor Network)是当前在国内外倍受关注的、由多学科高度交叉的新兴前沿研究领域,它综合了微电子技术、嵌入式计算技术、现代网络及无线通信技术、
从中草药中断开发治疗高血压的新药物,发展中国的医药事业是一项很重要的研究工作.迪普罗斯是从传统中药中提取是一项很重要的研究工作.迪普罗斯是从传统中药中提取的有效部
用逆转录—聚合酶链反应(RT-PCR),以人肝细胞株(L)总RNA为模板扩增了人锰超氧化物歧化酶(hMnSOD)的cDNA,重组到trc启动子控制下的表达载体pSE380及巴斯德毕赤酵母AOX1基因启
目的 运用锥形束CT(CBCT)分析惠州市颌骨特发性骨硬化症(IO)的影像学特征.方法 回顾性分析427例口腔疾病患者的CBCT影像学资料,观察颌骨IO的发病情况、分布情况、好发部位以
目前认为肝干细胞是体内存在的一种具有自我增殖能力和多向分化潜能的干细胞,可以分化为肝细胞和胆管上皮细胞等多种细胞。但对肝干细胞的研究还是以体内实验为主,没有成熟的分
目的 评价吡螺脲硫酸盐可湿性粉剂(WPPS)在湖沼型血吸虫病流行区的灭螺效果及其对鱼类的毒性,为该药在湖沼型血吸虫病流行区的推广应用提供科学依据. 方法 于鄱阳湖洲滩选取6
学位