商品评论中的属性词聚类和扩展研究

被引量 : 7次 | 上传用户:wangwangge
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着电子商务的迅速发展,互联网上出现了各式各样的商品评论信息。为了实现海量商品评论信息的自动化智能化分析,商品评论分析技术应运而生。由于商品的属性不仅影响到评论文本的分类,更通过与情感词的搭配关系影响到整个句子的情感倾向分析,因此对商品属性的分析是商品评论分析中一个至关重要的问题。商品的属性主要分为显式属性和隐式属性,其中显式属性在句子中直接以属性词的形式出现,是本文所要研究的对象。本文从属性词的同义关系出发,采用无监督和半监督的机器学习方法,深入研究了商品属性词的聚类和扩展。本文的研究成果和创新点如下:第一,提出了基于词向量的相似性传播聚类算法(Affinity Propagation Clustering algorithm based on Word Representation, APCWR)。词聚类的关键问题是词的特征表示、距离或相似度的计算,以及聚类算法的选取。APCWR算法巧妙地使用了词向量来建立词的表示模型,并使用word2vec工具来训练词向量。把文本聚类中的相似性传播算法迁移到词的聚类,设计了预设参数来调节类簇数目,设计了阻尼系数来实现数据平滑。实验表明,APCWR比基于词典的聚类和K-means聚类有更好的聚类效果和算法性能。第二,提出了基于Bootstrapping的属性词扩展算法(Attribute Words Expansion algorithm based on Bootstrapping AWE-Bootstrapping)。本文首先从语义词典、信息检索和信息抽取等角度分析了目前常用的同义词扩展技术。然后基于半监督的学习思想,设计了改进的Bootstrapping算法。AWE-Bootstrapping算法只需要使用少量的种子词,就可以达到比基于规则的方法更好的扩展效果。第三,设计并实现了基于产品属性的情感摘要系统(Sentiment Summarization on Product Aspects, SSPA)的数据设计和建设,并把数据处理的思想和查询扩展的思想应用到了实际的项目当中。互联网上的商品评论数据需要经过数据采集、数据预处理、属性词抽取和数据标注四个处理过程,才能用于属性词的聚类和扩展,其中数据标注是为了测试聚类的效果。经过扩展的属性词,需要经过分类和筛选等再加工,才能生成我们最终需要的属性词库。本文作者把数据处理的思想应用到了"COAE2014情感关键句评测任务和评测数据设计”当中,把相似度计算和查询扩展的思想应用到了KBA评测的CCR任务当中,都收到了很好的效果。第四,分析了同义属性词聚类和扩展的应用。首先从文本分类和情感词-属性词搭配评分这两个角度讨论了属性词在产品评论分析中的应用;然后通过介绍常用语义词典的结构阐述了同义关系在语义词典中的重要作用,说明了同义属性词聚类和扩展在“统计词典”构建中的重要意义。
其他文献
中小企业是我国国民经济的细胞,"万丈高楼平地起",任何大企业都是由小企业发展起来的,每天都有很多中小企业倒闭,又有众多小企业诞生,每一个在企业就业的人都连接着一个家庭,
本文结合施工企业实际,首先分析了当前施工企业工会工作存在的问题,并就施工企业工会工作创新问题进行了认真研究。
目的探讨孤独症儿童与健康儿童血清催产素水平差异及其与孤独症儿童社交能力的关系。方法选取3~5岁孤独症患儿25例与健康儿童20例分别接受血清催产素水平测量,采用社交反应量
最近几年,不论是在新闻报道中,还是在网络热帖中,经常可以看到不孝子女、儿媳、养老机构工作人员等虐待老年人事件的发生,老年人的晚年生活和尊严无法得到保障。这些虐待老年人行
研究慢性胃炎的中医辨证分型现状。总结近年来有关慢性胃炎中医辨证分型的文献,从病因病机、证候分型、存在问题及展望方面进行分析总结。
以玉米须多糖为原料,以小鼠为实验对象进行降血糖活性研究。通过一次性按200mg/kg剂量腹腔注射四氧嘧啶致小鼠实验性糖尿病后,灌胃低(100mg/kg·d)、中(200mg/kg·d)、高(400
目的 了解云南省哈尼族高血压流行现状和和人群血压水平。方法 从 2 0 0 2 0 5 -2 0 0 3 0 5 ,按照全国 1991高血压抽样调查工作手册的要求 ,对云南红河州红河县 ,元阳县
目的:对隔药灸脐法治疗寒湿型腰椎间盘突出症的治疗效果进行量化、客观化评定,以观察隔药灸脐法治疗寒湿型腰椎间盘突出症的疗效。方法:将确诊的寒湿型腰椎间盘突出症患者60
目前高校教学系统的认证机制大多是采用用户名和密码来进行登录,若用户需要访问不同系统中的资源,传统的认证机制必然会耗费大量的时间。因此在统一框架下,建立单点登录的安
目的观察中医辨证施治足转筋的临床效果。方法 2000年以来诊治106例足转筋患者,随机按辩证分型用滋补肝肾、祛寒除湿、补气养血、活血化瘀、疏肝解郁、行气补血六种方法治疗