基于深度度量学习的小样本图像分类

来源 :山东工商学院 | 被引量 : 0次 | 上传用户:henrychen999
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
深度学习方法在图像分类任务中取得了巨大成功,然而深度神经网络模型的优异表现高度依赖海量的标签样本数据。当样本数量较少时,模型训练受到限制,易发生过拟合现象且泛化性能差。在实际应用中,海量标签样本的获取往往十分困难。因此,如何高效利用深度学习模型解决小样本图像分类问题具有重要意义。深度度量方法旨在学习一高效度量空间,有效完成输入特征的非线性映射,准确反映样本间相似程度。针对极端的小样本图像分类任务,深度度量方法仍有优异表现。本文开展了基于深度度量学习的小样本图像分类研究,针对如何充分利用无标签图像样本,基于度量学习与增量学习思想,提出深度度量自优化模型;同时,针对如何获取高质量图像特征和类原型,结合原型表达思想,提出多尺度特征类原型表达模型。具体研究工作如下:(1)针对如何充分利用无标签样本的问题,提出深度度量自优化模型。该模型包括孪生网络分类模块和置信度自优化模块两部分。孪生网络分类模块通过构造孪生网络分类器,赋予无标签样本相应伪标签。利用少量标签样本直接参与模型训练得到初级分类模型,通过该分类模型对无标签样本进行标签预测,获取伪标签样本。为解决伪标签样本噪声问题,构建置信度自优化模块,借鉴偶发参数思想,筛选置信度较高的伪标签样本添加到可扩充训练集中。通过反复的训练、预测、添加,实现模型有效的增量自优化学习。(2)针对如何学习高质量的图像特征和类原型的问题,提出多尺度特征类原型表达模型。该模型包括多尺度特征融合模块和类原型表达模块两部分。基于多尺度特征对图像表达的高效性,构建多尺度特征融合模块,利用高斯金字塔策略获取多尺度图像,结合空间金字塔池化方法,解决特征向量维度输出不一的问题,融合注意力机制获取图像多尺度特征。为学习高质量的类代表,构建类原型表达模块,将类内样本的多尺度特征作为模块的输入,学习各类特征代表即类原型。(3)探究类内不同样本特征之间的差异以及不同样本在类原型表达过程中的不同影响力,基于加权思想,提出权值类原型概念。考虑类内不同样本受局部遮挡、背景变化等因素影响,各样本在类原型求取过程中的表现力不同。赋予类内不同样本相应权值以学习更具代表性的类原型,实现小样本图像的精确分类。最后,为验证本文两种方案解决小样本图像分类问题的有效性,在多个小样本学习数据集上进行了大量实验并取得了理想效果,充分证明了本文所提出的两种分类模型在小样本学习中的合理性与可行性。
其他文献
培养学生的化学核心素养是当今化学教育教学发展与改革的必然要求。2018年,我国发布的普通高中化学课程标准(2017版)中对学生的学业内容做出了明确要求,化学学科的核心素养分成了“宏观辨识与微观探析”、“变化观念与平衡思想”、“证据推理与模型认知”、“科学探究与创新意识”、“科学态度与社会责任感”这五个维度。本文依据普通高中化学课程标准(2017版)以及有关于化学核心素养的文献分析研究,对高中生化学
由于溶解氧浓度的变化受多种因素影响,具有非线性,模糊不确定等特点,因此溶解氧浓度的精准预测是渔业养殖中的一个难题。本文以渔业养殖中养殖水质关键参数溶解氧数值为研究对象,采用智能计算和深度学习技术,构建了基于智能计算的溶解氧预测模型,具体研究如下:(1)基于ECA-Adam-RBFNN的溶解氧预测模型研究。该模型提出了一种新颖的增强聚类方法,该聚类算法利用K-means算法以及蚁群算法确定RBF神经
普通高中新课程的改革要求开展基于学生立场的建构学习、探究学习和问题解决学习,促进学生学习方式的转变,以便学生自我构建、不断提升自身的化学学科核心素养。而学历案是一种基于学生立场,强调学生自主构建或社会构建知识和经验的方案,符合新课改着力发展学生化学学科核心素养的要求。为落实学生立场的课堂教学,促进学生化学学科核心素养的发展,着重探讨了基于学科核心素养下高中化学学历案的设计与教学实践。首先对核心素养
现代社会高度依赖互联网,人们在享受着网络服务带来的便利性的同时,也面临着网络攻击带来的威胁。低速率拒绝服务(Low-Rate Denial of Service,LDoS)攻击是一种新型的网络攻击方式,具有隐蔽性强、攻击速率低和检测难度大等特点。软件定义网络(Software Defined Network,SDN)作为下一代网络的热门解决方案,解耦了数据平面和控制平面,采用软件定义的方式对网络进
基于全球化、信息化和我国当前课程改革的背景下。要求人们能够创造性地运用知识与技能来解决实际生活中所发生的问题,在各种复杂的信息和智能化环境中有效迁移处理、解决问题,需要人们具备高阶思维能力,同时也是落实核心素养的具体体现。高阶思维能力是一个人以创新能力和批判性思维能力为核心,进行问题解决的高层次认知活动过程中所表现的综合能力。界定高阶思维能力主要由问题解决能力、批判性思维能力和创新能力构成。由此,
命名实体识别是自然语言处理的一项基础任务,其目的是识别文本数据中人名、地名、机构名等类型的实体。命名实体识别效果对后续的关系抽取、机器翻译、知识图谱等任务有很大影响。近年来,深度学习被广泛用于命名实体识别任务,并取得了很好的效果。然而,现有的深度学习方法大多为有监督的训练方法,在特定领域命名实体识别任务中,由于缺乏标注数据,使得依赖大量标注数据的深度学习模型难以取得优异的性能。本文从半监督集成学习
高中物理教师的教学工作不可能尽善尽美,均会存在不足,这就需要教师不断地进行教学反思,但是大部分教师在教学反思时有一定的主观性和局限性。学生错题作为一种宝贵的教学资源不仅反映了学生的学习情况,还暴露了教师教学的不足之处,可以帮助教师进行教学反思,这就需要教师对学生的错题进行管理,因此建立易错题集作为教师对学生错题管理的有效途径可以有效地指导教师的教学反思。该研究首先介绍了相关研究背景和现状,给出了核
“审美”是音乐教育的核心本质,我国高中音乐学科无论是从课程理念还是音乐教材都一贯体现着“审美”的核心理念。本文以2004年我国教育部出台的《普通高中音乐课程标准(实验)》和2017年《普通音乐课程标准(2017年版)》为指导目标,对课程标准提出的“审美”理念,以人民音乐出版社和湖南文艺出版社出版的高中《音乐鉴赏》教材为例,进行初浅的研究和比较分析。本论文采用了文献分析法、比较研究法、调查研究法和实
多目标跟踪因为其重要的学术价值和非凡的商业潜力,在计算机视觉领域备受关注,例如在自动驾驶、航空航天、医疗诊断、智能监控等众多领域得到了广泛的应用。在最近的十几年中,研究人员已经提出了大量的创新算法来研究这个课题,多目标跟踪的技术取得了很大的发展,但在面临诸如目标重叠、外观剧变、光照变换、身份跳变等问题时,仍然存在着重大挑战。本文旨在从多目标跟踪中的数据关联出发,利用行人重识别技术,分别与多假设跟踪
当标注数据充足的情况下,现有的文本分类方法已经可以取得比较好的效果。近来基于深度学习的文本分类方法的发展,已经使得文本分类任务的性能达到了工业界的应用要求,特别是基于预训练+微调的两阶段文本分类方法,更是将文本分类的效果推上了一个前所未有的高度。但文本分类效果提升的同时,模型的复杂度也在迅速的增加,对标注数据集的规模以及质量的要求也在不断提高,使得应用场景很是受限。在实际应用中文本分类任务的训练数