基于注意力机制的显著物体检测方法及应用

来源 :扬州大学 | 被引量 : 0次 | 上传用户:wwg139580
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,通过学者们的不懈努力,计算机视觉得到了快速发展,显著性检测也在机器学习和图像处理等领域得到了更为广泛的应用,其中包括目标识别、图像检索、图像分类、语义分割及图像问答等方面。但是,随着图像数据集的不断扩充以及场景复杂度的增加,传统的显著物体检测方法已经很难满足研究者们的需求,在许多计算机视觉任务(如边缘检测和语义分割)中难以捕获语义信息,存在很大的局限性。最近,随着深度学习技术的迅速发展,显著物体检测已经取得了很大的进步。但是,在移动设备的后续应用中,仍然存在低分辨率输出和较大的模型冗余两个主要的挑战。因此,本文研究精确的轻量级深度显著物体检测网络。本文主要研究工作如下:1.本文在HED结构中引入残差学习用于显著物体检测。首先,利用最深层网络较强的语义捕获能力,预测分辨率较低的初始显著性图,然后在各个侧输出依次预测其与真值标注之间的残差,以此来逐步提高显著性图的分辨率。由于只需学习残差特征,可以显著地减少网络模型的参数。相比于现有的其它深度显著性检测网络,本文方法不仅可以得到高分辨率的显著性图,而且网络参数更少,模型也更紧致。2.进一步提出反向注意力机制来引导侧输出残差学习。主要就是利用自顶向下的思想,根据网络中深层特征语义置信度高但分辨率低的特点,通过从侧输出特征中擦除当前预测的显著区域,从而引导整个网络依次地发现缺失的物体区域和细节,其中当前预测是从较深层的侧输出特征中上采样得到的。这种自顶向下的实现方式,能够让网络集中于未检测区域,有效快速地捕获残差细节,加快网络收敛并能显著地提高性能。3.通过将显著性先验作为显著性检测网络的初始输入来进一步减小网络模型大小。本文设计两种方案生成初始显著性预测图,即从卷积神经网络(Convolution neural network,CNN)中学习和使用现有的显著性先验(Saliencyprior)。实验结果表明,无论这些初始预测精确与否,通过基于反向注意力的侧输出残差学习之后,都可以被提升到与现有最好方法相似的性能。4.受益于侧输出残差学习单元以及反向注意力机制模块,本文方法取得了当前更好的性能,并且在简单性、效率(45FPS)和模型大小(81MB)上更具优势。通过利用现有的显著性先验图作为初始预测,在保持精度的同时,模型大小可进一步减小到60.7MB。大量的实验结果表明,本文所提出的方法在现有的几个公开数据集中,在PR(Precision-Recall)曲线、F-measure、MAE(Mean Absolute Error)以及 SM(Structure-measure)评价指标方面,与多个先进的方法相比均体现出优异的性能。另外,平均运行时间也远小于现有方法。因此,到目前为止,本文方法的实用性更高。另外,本文也将显著性检测结果用于背景虚化,取得了较好的视觉效果。
其他文献
随着智能手机的出现与GPS技术的快速发展,越来越多的位置社交网络逐渐产生并被用户所应用,它能为用户提供多种功能,包括分享位置、发表评论以及与好友建立连接等,极大的丰富了人们的生活。而用户量的递增也直接导致了数据量的指数性增长,例如Foursquare,其作为最流行的位置社交网络包含了至少五千万个用户以及一千万个兴趣点,在这海量数据的背景下用户无法精准高效地获取自己想要的信息,对此个性化兴趣点推荐系
从输入图像中分割得到不同物体的语义块信息,是图像分割、语义识别领域的重要研究问题。而该问题的逆问题,基于语义信息生成逼真的指定物体图像,同样是图像合成领域的重要问
网络互助计划是我国出现的一种新型分享经济类型,其在我国社会保障体制、商业保险机制不完善、“大病致穷”的社会背景下有着独特的存在价值。然而,分享经济往往会造成创新式破坏,网络互助计划也不例外,但当前的法学研究对于网络互助计划的法律性质未有定论,其监管亦处于搁置状态,因此探讨网络互助计划的监管逻辑有着重要的理论和现实意义。采用文献分析法、比较分析法和规范分析法的研究方法,立足于网络互助计划的运营现状及
电压门控Kv7/KCNQ/M钾通道广泛分布在中枢神经系统和外周神经系统。Kv7通道在控制细胞膜电位和神经元兴奋性方面发挥着重要作用。神经元兴奋性的改变与癫痫、疼痛和焦虑等多种疾病有关。开发以Kv7通道为靶点的新型通道开放剂对这些疾病具有潜在的治疗作用。研究目的:研究3种新型Kv7钾通道开放剂SCR2682、SCR2673和SCR2692对Kv7通道的调节作用,并评价其抗惊厥、镇痛和抗焦虑作用,为开
有机发光二极管(OLED)作为新一代冷光源,有着低成本、效率高、视角广、对比度大、响应快速、可柔性制造等诸多优点,在照明和显示技术中有着重要应用。倒置型有机发光二极管相比
我国是由多个民族的不同文化形成完整具体的中华文化。中国伊斯兰伦理文化是我国传统文化的一部分,在同中华文化的不断碰撞和适应下完成其地域化、民族化、社会化的历史进程,最终孕育为具有中国特色社会主义制度相适应的伊斯兰教。本文所写的马元章,是我国伊斯兰教知名宗教人士和社会活动家,系哲赫忍耶学派第七辈苏非导师。他深入研究伊斯兰教与不同宗教和睦相处之道,不仅是一位博学多才、满腹经纶的宗教学家,同时也是一位优秀
极化合成孔径雷达(Polarimetric Synthetic Aperture Radar,PolSAR)是一种主动成像雷达,其工作频率低于S波段的微波频段,可避免来自云、雨、尘、雾等物质的影响,同时凭借其主动的工作方式,无需依赖太阳光源,因此可以实现昼夜成像。与单极化SAR不同的是,PolSAR是以散射矩阵的方式来对数据进行存储的,散射矩阵常与不同模型的散射矩阵相关联,因此可以提取地物更加丰富
中国优秀的传统文化有很多,是中华民族源源不断的财富。优秀的中国传统文化博大精深,蕴含着极其丰富的思想智慧。儒家文化中所蕴含的体育理念,为当代初中体育教学提供了有益
在国际交易日趋复杂化的背景下,国际上已经有相当数量的国家在其立法中明确加入了商事仲裁第三人制度,以适应其国家发展的现实状况,随着商事争议的日趋复杂化,商事仲裁中相关
为提高校园足球普及水平,奠定中国足球发展的人才基础,不断丰富足球教学活动内容,强化体育课和课外锻炼,校园足球作为新课程改革之后的一种体育形式,在全国学校推行,且在全国范围内的中小学设立足球特色学校。自2015年政策颁布以来,体育传统项目学校本身就拥有自己以往的足球制度与经验,相对于2015年之后新兴起的足球特色学校足球比赛成绩更加优异。本文通过研究体育传统项目学校足球师资制度、组织管理制度、教学训