舆情分析中维吾尔文关键词提取研究

被引量 : 0次 | 上传用户:chenlecheng
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着网络信息化的高速发展,在全球信息量爆炸式增长的同时,新疆地区的数字信息化和网络化也在稳步推进,信息量的日益倍增,已使得传统手工筛选信息主旨和主题词的功效力不能及,在海量数据面前,如何快速、高效地帮助用户获得想要的信息,一直是人们探索的方向。文本挖掘中的关键词提取,无疑可以帮助人们达到事半功倍的效果。由于地域差异和技术的落后,成熟、公开而又实用的维吾尔文关键词提取方法一直未能成形,而这一方法的实现将对信息检索、舆情监控、搜索引擎等领域和政府、医疗、教育等部门的发展和服务起到重要的推动作用,因而维吾尔文关键词提取方法的实现具有重要的少数民族语言代表性和示范性。通过统计词序,并进一步进行词语组合,各影响因子的权重计算,对候选词进行综合权重计算和排序,过滤停用词、低频词,组合词过滤,并提取关键词。在进行多次过滤和加权之后,得到的关键词能够使读者通过这些词来识别文章主题和主要内容。把中文方法移植到维吾尔文单文本关键词提取过程中,并加入维吾尔文词干提取和停用词过滤等要素,在去除基于文本集的TFIDF算法而最大限度地降低对准确率的影响的同时,实现了基于综合特征加权的统计方法,成功地提取出了单文本维吾尔文关键词,由于摒弃了TFIDF算法,其效率也得到了大大的提升。实验表明,该方法对中文文本识别的准确率能保持在65%以上,对维吾尔文的提取的准确率在56%以上,同时对未标注的新词在一定程度上具有反馈意义。
其他文献
行政教育与处罚相结合原则具有中国特色行政原则,同时也是我国行政处罚制度中的重要原则,它是保障我国法律贯彻落实的重要措施之一,也就是对那些实施违法犯罪行为的人进行行
伴随着金融体制改革的进一步深化,银行业传统业务利润的增长空间已不大,竞争的重点自然转向中间业务。在中间业务品种中,企业财务顾问业务成为近年来发展起来的新型业务。文
文化是综合国力和民族凝聚力的重要体现,发展文化产业是增强城市整体竞争力的重要途径。文化产业的发展离不开高素质人才,基于2001年-2007年江苏统计年鉴的数据,运用灰色系统
随着社会分工的不断细化和专业化服务的日趋完善,企业将生产过程中临时性、辅助性、服务性的工作以工作量的形式外包出去,从而减少了企业直接管理的风险,减低了成本。文章从
根据2012年颁布的新《刑事诉讼法》第56条,我国非法证据排除规则及于自诉案件中的控辩双方,也就是说自诉案件中的辩方是受到非法证据排除规则规制的。那么公诉案件中的辩方采
在信息技术的传播和支持下,越来越多的资源被加以整合利用,在教学上也不例外。随着技术的发展、人们观念的提高以及资源的多样化,出现了大量的网络课程,使资源开放并达到共享
随着高校教师收入水平的不断提升,高校教师的个人所得税成为国家税务总局监管的重点,给教师个人带来了负担。在不违反税法的前提下,科学筹划个人所得税、合理节税,是广大高校
<正>侦查是指侦查机关在刑事诉讼活动中,依照法律法规的规定,以发掘案件事实,追查犯罪嫌疑人为目的的一系列职权活动和强制措施,而侦查阶段是刑事诉讼活动中制约较少、救济较
曾斌芳教授认为颈椎病从中医病因学上讲通常由内外因所致,外因为:风寒湿邪侵袭,导致气血不和、经络不通等所致颈部屈伸不利,疼痛酸胀;内因为:肝、脾、肾等内脏的功能失调,导
会计"双师型"师资队伍应具备的相应素养。文章分析了难以形成"双师型"教师队伍的主要问题,提出了构建"双师型"会计教师队伍的有效途径,通过对"双师型"会计教师队伍建设的探讨