基于改进互信息和邻接熵的微博新词发现方法

来源 :计算机应用 | 被引量 : 0次 | 上传用户:jueqidf_1
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对目前微博新词发现算法中的数据稀疏、可移植性较差以及缺乏对多字词(大于三字)识别的问题,提出了基于改进互信息(MI)和邻接熵(BE)的微博新词发现算法——MBN-Gram。首先,利用N元递增算法(N-Gram)提取新词的候选项,对提取出来的候选新词使用频率和停用字等规则进行过滤;接着再利用改进MI和BE对候选项进行扩展及再过滤;最后,结合相应词典进行筛选,从而得到新词。通过理论及实验分析,MBN-Gram算法在准确率、召回率及F值上均有一定提高。实验结果表明,MBN-Gram算法是有效可行的。
其他文献
发生在洛邑山的六祖分支,是现在收集到的18部《指路经》,以及《勒俄特依》、《史传》、《西南彝志》、《洪水泛滥史》、心六祖之光》等史书都提到的彝族发展史上的大事。根据记
期刊
民族声乐表演艺术扎根在民族文化的这片沃土上,其地域色彩浓郁,表演形式多种多样。随着历史文化的发展,民族声乐表演艺术也随之变化,在继承民歌、曲艺和戏曲的基础上,借鉴了
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
目的:掌握基层医院的学科建设的发展规律,更好地为加快医院发展服务。方法:通过医院学科建设的实际发展情况,参阅发展过程中的结果。通过对马鞍山市传染病医院当前学科建设中
本文首先对末敏子弹引战配合系统从总体上进行了分析,然后着重阐述了几个与引战配合有关的问题:超前角的设计、子弹倾角的仿真计算、占空比计算、模糊逻辑与遗传算法融合的目标
为武器系统配备先进的火控系统对于发挥其性能起着非常重要的作用。本文结合工程项目“WZ5XX步兵战车火控系统的设计”,分析了步兵战车火控系统的特点和要求,系统地介绍了WZ5XX
本文围绕着“CS成像算法及共并行性的研究”这一问题,对CS算法和算法并行性及其相关问题展开了研究。在第二章中,分析了并行处理技术的现状、实时信号处理对并行处理的要求、以