面向小样本图像分类的深度学习方法研究

来源 :兰州理工大学 | 被引量 : 0次 | 上传用户:qingyun2008520
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
少量训练样本的图像分类是当前人工智能领域和计算机视觉的一个难题。在现有的研究中,深度学习模型在视觉任务方面(如图像分类)已经取得了最为先进的性能。但是在少量训练样本下模型的泛化性能却不尽人意。目前,许多研究工作通过领域自适应和数据增强的方法以弥补样本数据量不足的缺陷,并通过正则化技术,集成学习以及改变类间距离的方法缓解了模型易过拟合,泛化性能差的情况。但这些方法仍无法达到少量训练样本图像分类对模型建模能力的要求。本文基于深层卷积神经网络,针对上述问题完成了以下三个工作:1.提出面向少量训练样本图像分类的交叉熵损失函数的方法。现有的交叉熵损失函数只关注了样本分到正确类的概率,而没有关注样本分类到错误类的概率。针对多分类交叉熵损失函数中的问题,在少量训练样本条件下改进交叉熵损失函数,使之在关注样本分类到正确类样本概率的同时,也关注样本分类到错误类的概率,从而进一步提高模型的泛化能力,改善模型的稳定性。本工作在Stanford Cars-196数据集,UIUC-Sports数据集,LabelMe数据集以及CIFAR-10数据集进行实验验证。实验表明,所提出的方法与现有的方法相比提高了模型的分类精度。2.提出面向少量训练样本图像分类的集成方法。在少量训练样本数据集上深层神经网络易过拟合是一个尚需解决的问题。在现有的研究方法中,集成学习有利于克服模型过拟合。然而,由于深层神经网络的随机性较大,在少量训练样本的条件下,现有的基于深层神经网络的集成方法仍然存在对少量训练样本数据集过度拟合的问题。针对上述问题,本文结合边界学习和原型学习的方法,提出了一个新的集成网络。本工作在LabelMe和Caltech101数据集进行实验验证。实验结果表明,所提出的集成方法与现有的方法相比,提高了模型的泛化性能。3.提出面向少量训练样本图像分类的提取判别性特征的方法。通过压缩特征空间的方式,在不同距离或相似性度量下,使得特征的类内距离变近,类间的距离变远,是当前缓解模型过拟合的另一种方法。然而很多研究表明,即使学习到类内距离近且类间距离远的特征,模型性能也并没有实质的提升。针对这个问题,本文结合原型学习和关系网络,提出了一个新的神经网络,从新的角度学习了样本的判别性特征。本工作在UIUC-Sports数据集,LabelMe数据集,15Scenes数据集和BMW-10数据集进行了验证,结果表明,所提出的方法具有很好的性能。
其他文献
目的:设计开发一种便携式传感器,用于尸体玻璃体液(vitreous humor,VH)中快速检测次黄嘌呤(hypoxanthine,Hx),协助法医学推断死亡时间(post-mortem interval,PMI)。方法:首先通过纺丝法制备了纳米纤维前体(nanofibers,NFs),对NFs高温碳化处理后得到碳纳米纤维(carbon nanofibers,CNFs)。随后利用多巴胺(dopam
不确定性大量存在于工程领域当中,因此在进行可靠性分析时要充分考虑结构中这些不确定性因素,这有助于提高结构的质量和安全性。传统的结构可靠性不随时间变化,又被称为时不变可靠性。然而在长时间的使用过程中,由于结构服役时间的累加、材料性能的衰退等因素的影响,结构可靠性通常会表现出随着时间变化的特性,因此也被称为时变可靠性。基于时变可靠性分析发展出的优化设计方法,能够在优化过程中考虑时变因素对于结构性能的影
天然产物香豆素类化合物在医药、化学荧光检测等领域应用广泛,作为一种药用天然活性化合物,香豆素的结构修饰及生物活性的研究一直是研究的热点。通过在香豆素母核引入活性基团,可以赋予香豆素新的结构和功能。蛇床子素是一种低毒的天然药物,类蛇床子素具有相似的性能,而异戊烯基的引入一直是合成类蛇床子素的关键。本文以间苯二酚为原料,全合成了一种类蛇床子素;利用Hofmann烷基化,在烷氧香豆素上接入胺基,获得了一
在高放废物地质处置和地热能源开发等实际工程领域,岩石经常处于高温环境中,高温会对岩石造成损伤,进而影响岩石的物理力学性质。因此,深入研究热处理阶段岩石受到的损伤和不同热处理条件对岩石力学性质的影响可以为实际工程提供技术指导和科学依据。通过可控温高温箱对北山花岗岩进行加热和降温处理,对处理后的岩石进行了声波测试,探究了处理温度和岩石损伤的关系;基于岩石破坏统计强度理论,建立了北山花岗岩的损伤演化方程
目前学界有关“摩罗诗人”对鲁迅的影响的研究成果还比较少。本文从《摩罗诗力说》这篇文论出发,结合文论产生的时代背景、历史文化语境,鲁迅的成长轨迹及其人生境遇,从精神和创作两方面对鲁迅与“摩罗诗人”的同质性进行了细致考察,较为全面地揭示了“摩罗诗派”对鲁迅的文艺思想、文学创作产生的深远影响。本文首先从时代背景以及东西方思想文化基础两个层面分析了《摩罗诗力说》的创作背景,对鲁迅这篇文论的出发点与写作意图
改革开放以来,我国经济取得了长期的高速增长,极大地促进了人类的生产能力。但是由于经济发展消耗了大量的煤碳、石油、天然气等化石能源,导致我国碳排放位于世界首位,经济发展与资源环境之间的矛盾日益突出。为此,我国作为负责任的大国向世界宣布未来碳减排的目标,如何改善能源消耗结构、实现产业升级以及提高能源利用效率成为我国未来能否实现碳减排国际承诺的关键途径。国内外关于能源消耗碳排放核算及其驱动效应的研究成果
油气藏储层岩石中流体流动规律的认识是是油气藏开发领域的重要研究内容。随着CT扫描成像技术的发展和计算机计算能力的提高,基于数字岩心的孔隙尺度流体流动模拟受到越来越
现有的事件抽取研究主要集中在通用领域,特定领域事件抽取缺少专用语料库和针对性强的抽取方法。为特定领域事件抽取定义全新的事件体系,研究有效的事件抽取方法是一个迫切需
数字图像作为多媒体通信的重要载体,在通信、医疗、军事等方面都发挥着重要作用。由于数字图像在国家安全防护、商业利益保障和个人隐私维护等都有举足轻重的影响。因此,探索安全、有效的图像加密技术成为网络与信息安全领域的重要研究课题。论文的研究主要针对现有图像加密算法安全性不高、鲁棒性不强、加密效率低以及密钥灵敏度低等问题,利用图像哈希、混沌系统、DNA加密、位平面分解等理论和方法对灰度图像、彩色图像、多个
在经济全球化快速发展下,对外直接投资成为国家融入全球经济,在全球价值链占据重要位置的一种方式;中国的对外直接投资的快速增长,促进了全球经济的发展。中国的国有企业和非国有企业在对外直接投资过程中,投资流量以及企业数量呈现出明显的差异,该现象呈现出来的是企业所有制与企业行为之间的逻辑关系。中国企业的行为主要受到国家逻辑和市场逻辑的影响;国家逻辑和市场逻辑主要通过企业所有制的形式体现。国有企业主要表现为