图像分类与图像转换中的注意力模型研究

来源 :河北大学 | 被引量 : 0次 | 上传用户:jcd041991
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
现阶段图像处理领域所取得的优秀成果大多源于神经网络层数的不断加深,但随着神经网络越来越复杂,神经网络所需要存储的参数越来越多,就会导致网络容量问题。对于图像分类而言,在不过多引入参数的同时提高分类准确率,仍旧是一项挑战。在图像转换领域,结合生成对抗网络能够实现图像从源域到目标域的转换,但利用生成对抗网络的转换模型通常会产生语义上的伪像,其生成图像无关部分的改变较大,从而导致生成的图像质量较低。为了解决上述问题,本文提出了一种新型的注意力模块——像素域和通道域双重相关性注意力机制(Pixel-wise And Channel-wise Attention),文中简称PC注意力模块。通过利用多种注意力模块应用于的分类模型中,在Cifar10数据集上验证了PC注意力模块较之其他注意力模块在分类任务上的优越性。并且,还将其应用于GoogleNet网络架构中,在Cifar100数据集上取得了良好的分类性能。针对图像转换领域中所采用的编码器-解码器这一特殊网络结构,基于PC注意力模型提出了在下采样与上采样过程中的跳跃连接结构(SPC注意力模型),在转换过程中将下采样获取的注意力图传递给上采样用以生成更为合理的图像。该模块可以帮助算法识别出图像中最具区别性的语义对象(即待转换对象),并且可以直接应用于卷积神经网络作为网络结构中的一层以端对端的方式进行训练。此外,本文所提出的注意力模型在图像转换中的应用是在不使用额外的数据和网络情况下,将图像无关部分的改变降至最低。本文在实验部分将SPC注意力模块应用于Pix2Pix算法和CycleGAN算法,定性和定量地与最新的图像转换方法对比。验证了该注意力模型能够在图像转换算法中建立更真实的源域到目标域的映射,从而提高了转换模型生成图像的质量。同时,还将SPC注意力模型应用于图像重构任务,利用MNIST数据集在自编码器算法中实现对图像的重构任务。与其他注意力模型在自编码器算法上的应用相比,该模型能够重构出更为逼真的图像。这一实验也验证了PC注意力模型在编码器-解码器网络中采用跳跃连接结构的合理性。
其他文献
多随着人工智能的快速发展以及人们对于教育的重视,创新教学方式受到越来越多的关注。大学课堂中,教师的教学方式不再是传统黑板板书,而是转变为包含文本、课件、视频、语音等多种形式的多媒体教学。然而,课程知识的大体框架在课本中主要以目录章节的形式展现,而章节中包含的细小知识点以及各知识点之间的关系却不能一目了然,不利于学生的学习。因此,如何对多种形式的课程资源进行有效的自动整合以及对知识进行更好的组织呈现
图像生成技术一直是计算机视觉、计算机图形学等专业领域的重要研究方向,同时被工业界广泛的应用。经过许多科学家的致力研究,在深度学习图像生成的问题上,表现结果依然不尽人意,最主要的困难和挑战在于图像生成结果的多样性、真实性、稳定性以及可控性。近年来由于生成对抗网络的出现使图像生成技术在多方面有了长足的进步,但是由于生成对抗网络自身存在诸多缺点,如训练不稳定、无法判断收敛状态、模式坍塌等问题,故图像生成
人脸作为人类与外界交互的最重要的窗口之一,其传达的信息具备鲜明的人物特征,因而人脸图像相关算法的研究是目前机器视觉领域里最为热门的研究课题之一。人脸图像算法拥有十分广泛的应用场景,具备很强的实用性,在社交、娱乐、安防、医疗等诸多领域的产品中都可以看到人脸相关算法的部署。随着互联网的发展和人脸图像相关算法的大规模应用,人脸图像质量的好坏成为愈发被重视的问题,破损人脸图像修复技术的应用越来越广泛。与此
人体解析是计算机视觉领域一种复杂而精细的人体语义分割任务,其广泛的应用价值,被越来越多的研究人员所关注。随着深度学习的发展,卷积神经网络被成功的应用于计算机视觉领域。基于卷积神经网络的人体解析获得了极大的突破,但面对多变的人体姿态、复杂的场景、多样的着装等挑战,以及网络模型本身对人体语义特征学习的不足,容易造成解析结果区域不连续、错误识别、结果不精细等问题,这些问题严重影响着解析精度。本文基于卷积
煤层气因“高储低渗”的地质特性导致煤层气抽采商业开发困难,注热开采作为根本上改变煤储层低渗透性质以达到煤层气增产的途径之一,对其进行热经济性评价是低渗透储层煤层气
伴随着世界经济的不断发展,我国证券市场的规模也在逐渐扩大并且活跃程度更是逐步加强,现如今我国的证券市场已经成为了具有一定影响力的综合金融市场,在资金筹集程度、交易量乃至总市值等方面都位于世界前列。证券市场的不断扩大对于一个国家来讲具有显著的优势,例如能优化社会资源的配置,促进国内经济体制的改革,推动社会主义市场经济不断完善。当然,事物是具有两面性的,证券市场也不例外,它在具有优势的同时也存在着许多
目前,我国公司在市场经济内生动力的催促下,逐步由单一化向集团化迈进,趋势日益明显。当初基于保护公司利益的美好愿景而建立的股东代表诉讼制度已经不能有效应对此种趋势下所衍生的母子公司代表诉讼纠纷问题。基于理论和实务的双重考量,我国在结合国情的基础上引入双重股东代表诉讼制度,不仅是妥善解决纠纷、满足社会发展的必然途径,同时也是强化公司治理、优化集团公司结构的必然要求。本文分为以下三个部分。第一部分通过规
健身气功作为我国优秀传统的文化的承载者,本身蕴含着丰富的我国传统文化思想,自推广以来,以其独特的养生思想和身心锻炼的方法深受国内外人们的欢迎。但是随着人们生活水平的提高,对于健身气功的要求越来越高,健身气功现行的功法已经不能满足人们的健身需求。因此为推动健身气功的进一步发展,国家体育总局健身气功管理中心迎合时代需求,推出健身气功·气舞这一新的功法概念。健身气功·气舞是健身气功的新尝试,是以现行的健
基于硫酸根自由基(SO4·-)的过硫酸盐高级氧化技术(SR-AOPs)在处理典型难降解污染物时操作简便,条件温和而且性能优良,成为典型难降解污染物的理想处理方法,而非均相催化SR-AOP
高速、断续切削的冲击载荷作用下,铣刀一旦发生损伤,其破坏程度将迅速发展,若不及时发现易产生安全性事故。铣刀损伤具有多尺度特性,采用单一尺度的损伤研究方法无法揭示铣刀