面向网络舆情分析的观点挖掘关键技术研究

被引量 : 7次 | 上传用户:porminor100
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着Web2.0技术的不断发展,网络用户已经从被动的“读者”变成了主动的“建设者”,越来越多的人借助于Web2.0提供的博客、论坛、评论网站和新闻组等舆论载体发表自己的观点和看法,收集和分析用户的这些观点和看法是了解网络舆情、进而体察民意的重要途径之一。面对不断涌现的海量的网络舆情信息,传统的人工采集、整理、分析信息的难度很大,借助计算机软件成为分析网络舆情信息的必由之路。与传统的面向商品评论的观点挖掘方法不同,面向网络舆情分析的观点挖掘技术需要应对舆情信息数据的海量性、类型的多样性、情感表达的细粒度性和混合性等诸多新的特点。针对舆情信息的特点,如何有效地挖掘网络中不同类型数据中存在的观点信息,是当今网络舆情分析所面临的关键问题,也给计算机技术研究与工程应用提出了许多具有挑战性的课题。为了更好地解决面向网络舆情分析的观点挖掘技术所面临的诸多困难和不足,本文从不同类型的网络数据角度出发,对网络中舆情信息的提取与汇总、情感相似性计算、面向观点的句子压缩以及观点社群构建等内容进行了研究,主要工作包括以下几点:(1)针对博客搜索结果数据,本文提出了一种基于WordNet词典注释的方法来扩展博客搜索结果中情感的表示模型。本文通过新表示模型计算观点相似性,并利用谱聚类对博客搜索结果中的观点进行聚类。在每一个观点聚簇,文本提出了一种基于互增强随机游走模型的方法,在对博客搜索结果项进行排序的同时,提取簇中的情感关键词。在真实博客搜索引擎上的实验结果证实了本文所提出方法的可行性和有效性;(2)针对用户生成内容中的短文本数据,本文提出了一种基于增强情感向量的方法度量网络短文本之间情感相似性。以中文博客情感语料为基础,基于概率话题模型的方法被引入学习短文本中潜在情感状态的概率分布。利用该概率分布,本文采用增强情感向量表示待比较的短文本对,从而计算短文本之间的情感相似性关系。增强情感向量既考虑了句子中情感词之间的潜在联系,又考虑了短文本中程度副词、标点符号等其它的特征。在中文博客句子上的实验结果表明,基于增强情感向量方法的性能超过了直接情感词匹配的方法以及基于潜在情感状态向量的方法;(3)针对中文长句子数据,文本设计了一种从单词重要性、语言连贯性以及观点强度等三个方面度量单词重要性的函数,并基于该函数,采用动态规划的方法提出了一种面向观点的中文长句子压缩算法。实验结果表明,该方法可以去掉中文长句子中次要的事实信息,并保留句子中最重要的表达观点的部分。该方法为进一步观点持有者和观点目标的提取提供了更加准确而有效的数据源;(4)针对标签和评价数据,本文将用户对资源的观点定义为用户对资源的评价与标注,并将网上评价系统中发表相似观点的用户集成起来形成虚拟的观点社群。利用观点社群中用户有相似的兴趣和爱好的假设,为用户个性化推荐资源、标签和潜在的朋友等。通过在真实数据集下的实验表明,该方法可以有效地为用户推荐其感兴趣的信息;(5)针对网络不同类型的舆情数据源,本文设计并实现了一种面向网络舆情分析的搜索引擎原型系统POSearcher。POSearcher采用了一种“话题-观点”词对的方法作为舆情信息的基本存储单位,并基于“话题-观点”词对和文档组成的双层图结构,提出了一种TO-HITS算法来对系统中索引的文档进行排序。POSearcher为网络舆情信息检索、分析和监控提供了一种新的工具。总之,文本从网络上不同类型数据的典型特征和挑战出发,针对面向网络舆情分析的关键技术展开研究,如舆情信息提取与汇总、短文本情感相似性计算、面向观点中文长句子压缩、观点社群的挖掘以及舆情搜索引擎的构建等。理论分析和大量的实验结果证明了这些方法的有效性和高效性。我们希望基于这些方法和技术进一步开发网络舆情搜索、分析和监控系统。
其他文献
随着汽车保有量的增加,汽车道路交通事故逐年上升,已成为全球范围内的一大危害。从各类交通事故的发生来看,其中以正面相撞、侧面相撞和尾随相撞的后果最为严重。因此,增加汽
报道囊谦盆地新生代火山岩 9个样品的K Ar同位素稀释法定年的结果 .全岩或单矿物黑云母的表面年龄均在 32 .0 4~ 36 .5 0Ma的范围之中 .放射成因Ar与K构成了相关性良好的一条
维柯的《新科学》是基于各民族共同本性研究人类历史世界的论著。本论文以《新科学》的诠释方法论为研究对象。诠释是诠释学的基本概念。“诠释学”一词从词源上看,来自于古希腊神话中的赫尔墨斯。赫尔墨斯即神的信使,是神的语言和人的语言之间的中介。因此,“诠释”是一种意义转换,其任务把用陌生的或不可理解的方式表达的东西翻译成可理解的语言。《新科学》作为关于人类历史的研究,是对历史的诠释。因为历史的意义并不是自足
从平潭海峡公铁两用大桥的工程概况、桥址处的主要建设条件、施工图设计原则、变更设计的原因分析和承台标高提高后的方案及成果分析5个方面进行论述,表明设计变更后取得了更
电化学电容器,又称超级电容器,是一种新型的电化学能源存储器件,具有充放电时间短(1-30s)、功率密度高(1-10kW/kg)、循环性能好(10-50万次)、库伦效率高(99%)等优点,然而,其
建筑市场的不断发展壮大,使得人们对建设工程项目创新性和工期的要求越来越高,对于施工工艺复杂、规模庞大的项目来说,通常会采取设计施工并行建设的方式来进行,设计阶段与施
目的:观察并研究因骨质疏松而引起的椎体压缩性骨折(OVCF)的老年患者经皮球囊扩张椎体后凸成形术配合术后口服独活寄生汤治疗后的临床疗效观察。方法:本次研究选用了四川省中医
一系列中小型早第三纪红色盆地出露于青藏高原的东北缘 ,它们是在印度—欧亚板块碰撞过程中因陆壳变形和高原隆升产生的。典型早第三纪盆地的地质填图和详细的沉积学研究 ,及
目前,在移动学习方面的研究随着通信技术的快速发展也取得了一些成就,但是随着人们对移动学习认识的深入,这些移动学习的方法和方式仍存在一些缺陷,本文采用HTML5技术开发实
粮食生产事关国家安全和人们的生活质量,而农业装备的推广和应用是粮食安全和农业现代化的保证。近些年国家对农业装备的发展非常重视,予以了全方位的支持。目前全国有超过20