基于支持向量机的集成学习算法研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:hnaylz
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
支持向量机是建立在统计学习理论和结构风险最小化原则基础上的新型学习方法,具有良好的泛化性能。集成学习通过训练和组合多个准确而有差异的分类器,为提高分类系统的泛化能力提供了一条新的途径。本文将集成学习技术引入到支持向量机学习中,以提高支持向量机的泛化能力。本文的主要研究工作及创新性成果如下:(1)对支持向量机和集成学习的理论基础、实现方法及其实际应用进行了系统的研究,并简要的介绍了两种经典的集成学习算法Bagging和Boosting。(2)提高个体分类器的精度,增加个体分类器间的差异,可以有效的提高集成学习的泛化性能。特征选择可以提高分类器精度并增加个体分类器差异,扰动支持向量机的模型参数,也可以增加个体分类器的差异性。本文将这两种方法相结合,引入Relief过滤式特征选择算法和基于预报风险的嵌入式特征选择算法两种特征选择方法参与集成学习的研究,并在支持向量机的低偏差区域内随机的选取支持向量机的模型参数,提出了两种基于特征选择的低偏差的支持向量机Bagging集成学习算法。(3)提出了一种新的选择性支持向量机集成学习算法。提出了一种不断删除最差分类器的个体分类器选择方法,并对支持向量机的决策函数值用logistic函数作了一个转化,充分的运用了支持向量机的输出信息,提高了算法的泛化性能。(4)在UCI数据集上对本文提出的三个算法进行验证,算法均取得了较好效果。
其他文献
从新常态下开放经济发展的新要求及适应税收新常态的角度出发,基于陕西外贸类产业税收角度,分析陕西在丝绸之路经济带的定位及其外贸类产业发展现状,对丝绸之路经济带税收状
随着消费者对商品质量更为严苛的要求,退换货问题成为当前电商平台不容小觑的问题,退换货直接影响消费者的购物体验,同时带来额外的逆向物流成本。电商企业发展最关键的是用
随着利率市场化的深入推进,金融脱媒的进一步加剧,互联网金融的快速发展,以及国内经济结构的调整和金融改革的不断深化,商业银行存贷两端承压,息差持续收窄,盈利能力和利润增
随着汽车工业和电子技术的发展,汽车电子化已经成为不可逆转的趋势,汽车各控制单元已经逐步由机械控制、继电器控制演变成为电子信息控制,作为发动机冷却系统,在整车配置及动
矿产资源是人类生存和发展的必要物质基础之一,随着中国现代化建设进程的加快以及经济全球化的不断推进,矿产资源成为衡量一个国家综合国力和国际竞争力的重要基础,同时也是一个国家未来进步和发展潜力的体现。其中铁矿资源在地壳中的分布最为广泛,矿产采集和冶炼技术最为成熟,在目前人类工业生产和日常生活中应用最为广泛。中国国内的铁矿资源非常丰富,且具备分布广泛,矿床种类齐全等优势,但是我们也应该看到,中国的大部分
隐喻不仅是语言现象,而且是一种思维方式,隐喻思维能力是认知发展的高级阶段,也是人们认识世界的一种认知能力,它植根于语言、思维和文化中。隐喻的思维方式能帮助语言学习者
目的:探讨多层螺旋CT肺动脉造影(Multislice spirl CT Pulmonary Angiography MSCTPA)对肺动脉栓塞(Pulmonary Embolism PE)的诊断及应用价值。方法:连续收集196例临床疑似肺
上市公司内部控制水平有待提高,内部控制评价报告大多流于形式,内部控制缺陷整改落实情况有待加强。本文从内控五要素出发分析"互联网+"环境下企业内部控制的特点及面临的挑
<正>热敏点灸是江西省中医院陈日新主任医师课题组经过多年实践,探索出的一种艾灸方法,全称为腧穴热敏化悬灸疗法,是以经络理论为指导,采用艾条温和灸体表热敏化穴,激发经络
随着我国高校高等教育改革的不断深入,高等教育事业的蓬勃发展,与之相配套的基础设施建设也都发生了巨大变化。为切实减轻高校经济负担,满足学校整体发展规划,改善高校基本教学、