基于改进型VSM-HowNet融合相似度算法在“标题党”新闻识别中的研究

来源 :吉林大学 | 被引量 : 0次 | 上传用户:gaolch009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着社会的发展,我们身边出现了越来越多的“标题党”现象。“标题党”以博取观众的眼球为目的大肆制作题文不符的新闻标题,被迅速传播和扩散,导致了公众对新闻工作者职业素质的质疑,造成了很多社会问题。因此,“标题党”新闻识别技术的研究对改善网络新闻环境有现实的指导意义。“标题党”新闻是指网络上的新闻在传播的过程中,新闻的发布者用各种吸引人的修辞手法,来制作成具有轰动效应的标题,以此吸引受众的眼球。本文所要研究的关键问题就是基于传统的“标题党”新闻识别方法中的文本相似度的计算方法,给出了用一种基于同义词词林中的词组表示文本中出现的词的改进型的VSM结合余弦相似度的文本相似度计算方法,也给出了《知网》(HowNet)文本相似度计算方法,并研究了基于改进型VSM-HowNet融合相似度算法,用这种融合相似度算法对文本相似度进行计算并对“标题党”新闻和非标题党新闻进行识别。本文首先针对“标题党”新闻现象,阐述了“标题党”新闻产生的原因、危害,文本相似计算目前的研究程度,本课题研究意义和主要内容也被给出。从文本分析的过程、文本相似度的概念和计算方法上给出阐述,还给出了传统文本相似度计算方法存在的问题和王氏主题-词形文本相似度计算方法的不足之处。在方法论的研究中给出了改进型VSM结合余弦相似度的方法,在此方法中把传统的词向量变成用同义词词林中的同义词组的向量形式来表示。也给出了《知网》(HowNet)文本相似度计算方法以及改进型VSM-HowNet融合相似度算法来识别“标题党”新闻和非标题党新闻,对“标题党”新闻和非标题党新闻的识别技术能变得更加完善、高效。然后根据本文中提出的新的文本相似度的计算方法及王氏主题-词形文本相似度计算方法的局限性的基础上给出了实验目的、语料库、内容及过程。最后,通过针对具体的实验过程,对实验结果进行了统计与分析,通过将本文提出的融合相似度算法和王氏主题-词形文本相似度计算方法进行对比,得到了在多种新闻比例下及数据集下王氏主题-词形文本相似度计算方法是不如融合相似度方法的。经过了进一步的研究,用改进型的VSM结合余弦相似度的文本相似度计算方法对“标题党”新闻识别的准确率为60.7%,优于王氏主题-词形文本相似度计算方法较多。且在对非标题党新闻的准确率、召回率及F1值上改进型的VSM结合余弦相似度的方法也优于王氏主题词-形文本相似度计算方法,分别提高了1.35%、6.71%和10.02%。得到了改进型VSM-HowNet融合相似度算法,此方法对“标题党”新闻识别的总准确率、总召回率及总F1值均高于其他文本相似度计算方法,对于识别一篇未知类型的新闻来说,改进型VSM-HowNet融合相似度算法相比于其他文本相似度计算方法是更有优势的。经过实验,本文得到了利用一种基于同义词词林中的词组表示文本中出现的词的改进型的VSM结合余弦相似度的文本相似度计算方法、《知网》(HowNet)的文本相似度计算方法,分别和王氏文本相似度的计算方法做对比,得到了较好的结果。并且得到了用改进型VSM-HowNet融合相似度算法计算得到的对“标题党”新闻识别的总准确率、总召回率及总F1值均要优于其他文本相似度计算方法的结论。
其他文献
1.张家村晨字幕:1989年,中秋节。张勇的旁白:母亲出生于1959年,正是国内的饥荒时期。我出生于1979年,正逢中国改革开放初期。记忆里,我和母亲之间的故事,总是和一条破洞裤子
职业学校残疾学生心理健康值得关注,认识残疾学生的心理问题,并采取适当的疏导方法,直接关系到残疾学生的健康成长。学校在教育过程中要关注残疾学生的表现,针对残疾学生表现出来
榕江乘着东西部协作帮扶的“东冈”,在杭州市桐庐县的倾力帮扶中,积极借力“电商之都”杭州,搭建起了以杭州地区为桥头堡的东部市场“根据地”,进一步拓展了“黔货出山”电商
随着我国畜牧业的快速发展,基层畜牧养殖规模不断扩大,不仅增加了畜牧养殖的管理难度,同时也增大了动物疫病的发生风险.基层畜牧兽医必须提高动物疫病防控意识,推进动物防疫
江汉大学农村教育与教师研究所,集中了一批本校及省内外在本领域研究中颇有建树的学者专家,实行紧密和开放式相结合的研究模式,长期致力于农村教育和农村教师队伍建设研究,在理论
一、实验研究的意义“做人,做中国人,做现代中国人”是陈鹤琴先生教育的目的论,他认为教育不仅是传播知识,根本是要教人做人。交往是做人的重要因素之一,礼貌交往不仅是社会
目前,随着人工智能技术、互联网技术的不断发展,高度智能化的无人驾驶汽车将是汽车发展的必然趋势。无人驾驶汽车不仅能有效提高交通运行效率,保证汽车行驶安全性,还可以替代
氮杂环卡宾在不对称催化领域发挥着重要作用,起初主要应用于极性翻转反应,随着研究的持续深入,其在极性保持反应中的地位日益凸显。到目前为止,氮杂环卡宾除广泛用于极性翻转
Sr_(1-x)Ba_xNb_2O_6(SBN)和(K_yNa_(1-y))0.4(Sr_(1-x)Ba_x)_0.8Nb_2O_6(KNSBN)两种钨青铜型晶体是很有发展前途的光折变材料。该晶体的物理性能由组成和掺杂的类型来控制。
目的探讨医护一体化品管圈在胸外科管道护理中的应用效果。方法选择2017年8月至2018年8月在我院胸外科接受置管治疗的80例患者,依据抽签法分为对照组40例与观察组40例。对照