增量型极限学习机算法的研究

来源 :江南大学 | 被引量 : 0次 | 上传用户:dna_cc
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
极限学习机的隐含层参数输入权重和偏置值都是随机选取的,需要设置的唯一参数是隐含层节点的数量。通过最小二乘法求得输出权重,避免了多次迭代和局部最小化的问题,具有良好的泛化性能和极高的学习效率。其广泛应用于医学生物、计算机视觉和图像处理等方面。近年来,对寻找最优隐含层节点数和训练样本在线加入模型的研究较多,本文对增量型极限学习机研究如下:无逆矩阵极限学习机通过逐步增加隐含层节点寻找最优隐含层节点数。本文将其改进为无逆矩阵在线序列版本,称为无逆矩阵在线序列极限学习机(IFOS-ELM)。该算法首先通过舒尔补公式寻找到最优隐含层节点数,然后利用Sherman-Morrison-Woodbury公式将新增样本数据逐步添加到模型中,避免对已经分析过的训练样本的输出权重进行重复计算。文中相应的给出了所提IFOS-ELM算法的详细推导。本文通过不同类型和大小数据集上的实验结果表明,所提IFOS-ELM算法非常适合在线学习场景,在快速学习和性能方面都有很好的表现。但是对于类别不平衡数据,IFOS-ELM算法存在着分类准确率差的问题。为此,本文进一步提出了面向类别不平衡的增量在线序列极限学习机(IOS-ELM)。其基本思想是:(1)根据类别不平衡比例调整平衡因子,将分离超平面推向多数类。(2)利用舒尔补公式或Sherman-Morrison-Woodbury公式逐步增加隐含层节点,以寻求适当的隐含层节点数,从而提高了IOS-ELM的在线学习能力。最后,通过14个二类和多类不平衡数据集上的实验结果表明,与比较方法相比,该算法具有更好的泛化能力和分类性能。
其他文献
非负矩阵分解算法是一种有效的特征提取及数据低维表示方法,其分解过程和分解结果具有可解释性,利用乘性迭代规则能够快速求解。因此,在特征提取、分类及聚类任务中有广泛的
随着我国城市管理信息化建设的不断发展,三维建模技术已广泛应用于数字城市、城市规划、轨道交通、校园、建筑、管网等领域,基于三维模型的应用也快速发展。但是传统的三维建
生物传感器是结合了高选择性的生物识别反应与灵敏、方便的信号转换机制的集成化分析设备,发展特异性强、操作简单、成本低的生物传感器一直是分析化学家的目标。近年来,人工
辐射作为传递能量与信息的一种方式,多年来广泛应用在军用和民用等高新技术领域,除应用最为广泛的热学和光学之外,在电磁学、大气科学、燃烧学、海洋学和航空航天领域均有涉
近年来,随着社会经济的不息发展,人们对饮用水的品质越来越注重,引起人感官不悦的异嗅物质也越来越得到大家的关注。饮用水中典型致嗅物质二甲基异莰醇(2-MIB)和土臭素(GSM)并不
上世纪七十年代以来,我国兴建了大量钢筋混凝土建筑物。由于设计缺陷、施工质量缺陷、使用功能改变以及维护不当等各种原因,许多建筑物呈现出不同程度的承载力不足和变形过大
我国是煤炭生产大国,在数十年的煤炭开采过程中形成了大量的塌陷区,不仅严重破坏了煤矿区的生态环境,还容易引发地质灾害。为研究采空塌陷区稳定性及塌陷引起的地质灾害风险,本文以徐州某矿区为例,通过遥感技术和实地调查,获取矿区自然地理条件和水文、地质工程现状,对矿区采煤沉陷区的分布特点进行分析;然后,基于GIS技术,选用层次分析-信息量法评估矿区的地质灾害危险性,并与易损性评价相结合评估煤矿区工程建设的风
学位
随着人工智能与移动互联网技术在移动端的应用越来越广泛,传统指挥系统中设备专用化、功能单一、没有良好的人机交互等问题,难以满足互联网时代用户的需求。与此同时,在智能
本文研究是在全球气候逐渐变暖和各国低碳城市建设大热潮的背景下展开的。城市是目前世界各国低碳研究关注的重点,因为能源消耗主要是发生在城市,引起全球气候变暖的源头之一
随着文献的大量出现以及学术方法论的创新,民间文献的学术属性和价值被越来越多的学者清晰的认识到。尤其是山西票号的原始文献,对于更深层次的挖掘票号发展具有至关重要的意