组合凸线性感知器在文本分类中的应用及评测研究

来源 :北京工业大学 | 被引量 : 1次 | 上传用户:wanghai19881016
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
文本分类是指根据一定的标准使用计算机对文本自动进行类别标记的过程。它是目前机器学习领域比较热门的研究方向,通常包括文本表示、分类器的选择与训练、分类器性能研究与评价。目前,已经存在许多较成熟的分类器,比如朴素贝叶斯(Naive Bayes)、支持向量机(SVM)、K近邻算法(KNN)等。分片线性分类器作为模式识别领域研究的热点,该分类器确定的决策面是由若干个超平面段组成,与一般超曲面相比,简单易于实现,需要较少的内存消耗。同时,能逼近各类不同形状的超曲面,具有很强的适应能力。目前,学者们也提出了许多设计分片线性分类器的方法。如委员机方法,线性规划的方法,组合凸线性感知器。尤其组合凸线性感知器作为一个构造分片线性分类器的通用框架,具有计算简单、适用能力强等突出优点,然而,它在文本分类的效果有待进一步的评测研究。因此,本文从分片学习的角度,提出了基于组合凸线性感知器的文本分类方法,研究并评测组合凸线器在文本分类中的性能,主要包括以下三个方面:1)详细介绍了组合凸线性感知器,它作为构造分片线性分类器的一个通用理论框架,也是本文研究内容的理论基础。本文研究的重点内容就是将它应用于文本分类领域中。同时,在这个过程中,我们还需要关注如何将这些分类方法有效地应用到文本分类领域。针对这个问题,我们首先使用向量空间模型表示文本空间,将文本信息表示成计算机可统一处理的形式,再采用组合凸线性感知器的相关算法进行文本分类。2)研究了各种常用的特征提取和特征项赋权方法。本文介绍了常用的特征提取方法和特征赋权方法,并且较为全面地研究并测评了不同的特征赋权方法(tf.idf、tf.χ~2、tf.ig和tf.rf),对组合凸线性感知器的分类效果的影响。3)将组合凸线性感知器应用于文本分类的研究。由于实验数据规模较大,文本经过特征提取之后的维度依然较大,在文本分类过程中必然会占用大量的内存,所以在进行分类之前,需要利用主成分分析方法对样本的特征空间降维。在标准数据集上,通过大量实验对比典型的文本分类方法(SVM、KNN)的分类性能,利用正确率、准确率、召回率和F1等评价指标,评测组合凸线器在文本分类上的性能。
其他文献
随着电子信息技术的飞速发展以及在多领域的深入应用,多数企业已经进入信息化时代,它们正在利用信息化技术手段开展信息化建设,通过计算机网络技术实现对企业人力资源、科研
伴随着中国娱乐行业的快速发展,票务系统的需求也日趋增加。业务中包含各地大量的剧院和场馆,有的场馆会用一个场馆图多次演出,有的场馆会随演出项目的不同,座位进行不断调整
食品安全是保证人民生活健康、幸福一个重要的指标,但是目前我国食品安全的形势不容乐观,常常发生食品中毒食品卫生方面的问题,因此需要十分重视并对此监督。为能营造一个良
宽带业务是电信运营的重要组成部分,近年来,随着宽带业务在中国的快速发展,宽带业务市场竞争的激烈,旧的运营模式已经无法适应新的市场竞争环境,从而使得宽带运营商在新的市
输电线路覆冰受多种因素影响,发生覆冰时线路荷重增加,严重覆冰会造成断线、倒杆(塔)、闪络等事故,给社会经济造成巨大损失。基于现场监测数据建立输电线路覆冰预测模型,为电
Al-Si-Mg铸造铝合金拥有质轻,流动性好,耐磨性好,热膨胀系数小,强度较高等优点被广泛用于汽车,航空航天等领域,但其力学性能受限于粗大的α-Al枝晶和针片状共晶硅,所以必须进行变质细化处理。传统铝合金细化剂对铝硅合金细化效果欠佳,且没有变质效果,因此本课题开发两种不同类型,颗粒尺寸可控,对亚共晶铝硅合金同时具备变质细化效果的新型孕育剂。本文通过真空电弧熔炼和真空快淬处理分别制备出Al-Ca-B
在国际贸易快速增长的当今中国,港口作业中计算机的普及程度越来越高。由于国际贸易业务量的逐年增长和业务的多样化,像废物原料这种敏感类贸易商品的数量与日俱增。这也使得
随着大数据时代的到来,数字城市、数字星球正在往智慧城市、智慧星球过渡。智慧化需要对资源进行合理配置,在此过程中,在海量网页中获取有用的信息是智慧化重要且具有难度的
在日常生活中,简历的使用率非常高,互联网的迅速发展使得简历的投递方式从以往的纸质投递转变成网上投递。随着国际化程度的提升,在国内英文简历的使用场景也逐渐增多。简历
重农固本是安民之基、治国之要,农业农村工作,说一千、道一万,增加农民收入是关键。盘活农村土地这“沉睡”资产可为农民增加融资渠道,创造营收机会。2016年初我国开展了推广农村承包土地经营权抵押贷款试点工作,武城县作为试点地区推行农村土地承包经营权抵押贷款,缓解了农户资金需求,促进了农业规模化。本论文通过国内外相关理论及文献的梳理,首先对论文涉及的有关概念进行了阐述,并着重论述了与农地抵押贷款相关的土