基于多光谱数据融合的图像显著性检测

来源 :安徽大学 | 被引量 : 0次 | 上传用户:ztbai
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像显著性检测是计算机视觉中一个重要研究领域,在智能化的时代背景下,提升多媒体大数据信息的处理精度和速率已成为一项严峻挑战。而显著性检测可以从图像中提取最简洁有用的视觉信息,有利于目标的准确定位与内容的快速检索。近年来,随着图像显著性检测技术的迅速发展,虽然有许多显著性检测算法被提出,但针对复杂条件场景下的图像显著性检测仍然还没有完全被解决。针对以上问题,本文分别提出了基于协同图模型和基于多尺度深度网络的多光谱显著性检测算法,以提高复杂场景下视觉显著性检测的精度与鲁棒性。本文的主要工作如下:(1)如何根据多模态图像的特征来建立表示模型去描述超像素的相似性关系,进而实现鲁棒的显著性检测?可见光图像易受光线变化和恶劣环境影响,从而为显著性检测任务带来很大的挑战。针对单光谱成像的局限性,本文融合多光谱图像信息,即可见光和热红外,对超像素进行协同表达,然后提出一种协同图模型优化超像素之间的关系,进而实现鲁棒的图像显著性检测。特别地,为了挖掘超像素之间的内在关系,本文利用低秩和稀疏表示模型来动态的学习超像素块之间的相似性关系。同时,为了利用更多的图像线索,结合超像素位置等特征定义最终的相似性矩阵。然后,使用流形排序算法中得到单个模态下的显著性图像。最后,为了自适应地融合不同的模态信息,为每一个模态引入一个质量权重,通过SVM学习得到,把单模态显著性结果结合各自的质量权重形成最终的图像显著性结果。本文在数据集上进行了实验,验证了提出方法的有效性。(2)如何充分地利用图像不同尺度的深度特征来描述图像局部和全局的对比关系?现有的显著性检测算法大多将显著性检测目标看成一个单独的实体,并仅用全局的信息来表示目标外观,并没有充分考虑到图像的全局到局部的这样一个内在结构关系。对此,本文提出了一种基于多尺度深度网络的多光谱显著性检测方法。首先,对图像划分为三个尺度并使用三个CNN网络对每个尺度下的图像区域进行深度特征提取,提取到的特征作为输入输送到由两个全连接层组成的分类网络中并得到显著性图像。为了融合不同模态下的显著性图,我们分别对每个模态下的图片训练出一个SVM分类器,每个模态下的显著性图片输入到SVM分类器里会产生一个权重用来表示当前模态下显著性图片的可靠性。最后通过对权重进行线性加权就能得出结果。
其他文献
残疾人是因为自然灾害、意外事故、经济贫困、基因遗传、疾病和战争等原因造成的身体或心理有一定缺陷的群体,承受着健全人不曾经历的痛苦和折磨。残疾人作为社会的弱势群体
成本体系是企业竞争力的重要指标,成本管理是实现企业效益最大化的重要途径。全球经济一体化的大背景下,企业之间的竞争已经发展为成本竞争。企业全员成本目标管理能够有效的
目前量子信息论已经成为现代物理学和信息科学的重要前沿领域。它不仅对加深现代物理学(特别是量子力学)和信息科学基础的理解具有重要意义,而且在信息处理,传输和高精密测量等
当代中国对外战略源于20世纪80年代中期邓小平对世界大势和主题的根本判断。在经历1989年春夏严峻政治风潮的考验之后,邓小平提出"二十六字"对外战略方针,并通过1992年其"南
背景与目的:胃癌是十分常见的消化系统恶性肿瘤之一。在我国胃癌发病率和死亡率都较高,而且由于其缺乏早期的特异性临床表现,不易察觉,导致通常诊断出的胃癌都已进入中晚期,
随着RFID技术的广泛推广和使用,如何进行RFID设备的选型成为摆在广大工程技术人员面前的一个重要问题。本文结合具体的产品和应用,介绍了RFID读写器和电子标签的分类和选型,
太赫兹波(THz)是指频率在100GHz到10THz的电磁波。太赫兹波处于微波电子学和红外光子学之间,在电磁波谱中属于有待开发且具有非常大的研究价值和应用价值的频段,在生物医疗、
随着5G通信时代的来临,无线通信在人们的生活中越来越普及,为人们的生活带来很大便利,然而伴随着智能移动终端的快速普及和无线传输带宽的增大,出现了一系列问题。一方面,随
鄂尔多斯盆地位于中国中西部地区,是一个多旋回复合型盆地,蕴藏着十分充足的油气资源,为中国第二大沉积盆地。本文研究地区为鄂尔多斯盆地演武地区,研究区位于鄂尔多斯盆地的
蛋白质-DNA相互作用对于生物的生命活动密切相关。随之人类基因组测序工组的完成,相关人员发现,只有很少的一部分,大约2%的基因是用来编码蛋白质,剩余的基因具体的生物功能还没有