论文部分内容阅读
摘 要 随着科学技术的不断进步，维哈柯语同现代网络的结合日益紧密，特别是随着维哈柯语输入法的出现，作为新疆少数民族同世界联系纽带的维哈柯语在网络中有个长足的发展，进而带来的对维哈柯语在的络舆情监测系统研发的要求越来越迫切，本文主要通过对维哈柯文的发展以及网络舆情的特征进行描述，表达了针对维哈柯语的网络舆情监测系统研发的必要性，之后通过介绍搜索引擎在该系统中的作用向大家分析简述了网络舆情监测系统的研发与建设。
关键词 维哈柯语；网络舆情；检测系统
中图分类号：TP3 文献标识码：A 文章编号：1671-7597（2015）04-0016-02
在我国新疆自治区比较流行的是维吾尔、柯尔克孜和哈萨克文，为了能够更好的同全国各族人民乃至世界范围内的交流，人们研制出了维哈柯文输入法并且随着技术进步这种输入法也不断改进，伴随而来的是维哈柯文在网络中的出现日益频繁，从而对于维哈柯文的网络舆情监测系统的研发被提上了日程。
1 网络舆情及其特征
图1 我国历年网民规模增长示意图
网络舆情值得就是人民群众以互联网为载体的对当下比较流行的社会问题表现出的不同的看法的一些网络舆论，作为一种社会舆论，网络舆情主要是通过互联网传播的。因为网络具有虚拟性，开放性的特点，作为舆情的表现形式，网络舆情主要有以下三个很明显的特征。
1.1 突发性
因为网络有开放性，所以网络舆论的形成往往非常迅速。在我们的生活中可以发现，一件事情在网络上曝光之后，通过广大网友发表不同的意见和看法，这件事很快就会转变为一种舆论被点燃的导火索。
1.2 偏差性
因为网络的自由性以及对发言者身份的不确定性，使得发言者可以不受社会制约，随意的发表言论，网民可以通过网络发泄现实生活中难以宣泄的情绪，使得网络舆论充满了不准确性，更容易出现灰色以及庸俗的言论。
1.3 直接性
因为网络的便捷性，使得网民可以通过博客，社交平台和BBS等网站随时随地的发表评论和意见，使得民意的表达更加畅通。
2 网络舆情监测系统研发的必要性
通过对网络舆情的特征进行分析，特别是作为少数民族与外界沟通桥梁的维哈柯语在网络中的广泛应用要求我们应该加快建立对于维哈柯语的网络舆情监测系统并不断完善。
上文中提到了网络舆论的偏差性，在现实生活中网民很可能把自己的情绪发泄到网络这个虚拟空间，特别是作为少数民族，本身与外界的沟通就不够便利，维哈柯语作为一个重要的沟通桥梁，必须加大对其监督。但是在我国，网络舆情的监督还处在一个起步阶段，本身对于网络舆情监督就不够完善，对于使用相对较少的维哈柯语更是缺乏系统的网络舆情监督体制，不能及时准确的对关键性的网络舆论做出有效的反馈从而达到放缓于未然的效果。为了正确引导网络舆论方向，必须加快推进对于维哈柯语的网络舆论监测系统研发。
3 搜索引擎在网络舆论监测系统中的作用
网络舆论监测系统是一个以网页数据搜集技术、网页预处理技术、舆情分析挖掘技术等为技术支撑的全面的监测系统。其中搜索引擎在维哈柯语网络舆论监测系统中起着至关重要的地位。目前为止，针对于维吾尔文、柯尔克孜文和哈萨克文的搜索引擎还处于起步阶段，随着维哈柯语在网络中应用越来越频繁，为了更好地对维哈柯语进行网络舆情监测必须完善针对维哈柯语的搜索引擎设计。该搜索引擎主要包含以下四个模块。
1）数据采集：将维哈柯语网页下载下来并储存到HTML文档中。
2）文档处理：将已下载的网页数据的页面征文从HTML文档库中读取出来，并转化为uni-code字符经过一系列的处理形成索引关键词，之后将关键词保存到索引库中。
3）索引模块：通过索引库的内容在内存中建立索引表，并且根据给下面的检查服务模块送回有关关键词的索引信息。
4）检索服务模块：针对用户查询，将查询关键词进行处理后于数据库对照，最后将索引结果反馈给用户。
首先针对数据采集模块，对使用维哈柯语建立的网站的首页地址、字符编码标准以及网站性质进行统计，并收录大量维哈柯语的词根单词等建立数据库；然后针对文档处理模块，对于已经下载好的页面进行处理和分析，主要是从THML文档中对已经下载的网页进行正文提取和去噪并转换成标准维哈柯语字符；之后针对索引模块，采用倒排索引结构，以求充分提高硬件利用率；最后针对检索服务模块采用长度优先算法和最小编辑距离算法提高纠错效率。
4 设计原则
针对维哈柯语网络舆情监测系统的设计应该遵循以下几条原则。
1）系统的先进性和成熟性。
2）系统的前瞻性和实用性。
3）系统的可扩展性和易维护性。
4）系统的开放性与标准性。
5）系统的可靠性与稳定性。
6）系统的美观性和易用性。
图2 维、哈、柯文搜索引擎文档处理模块结构示意图
5 结束语
总之随着网络技术的不断发展，维哈柯语在网络中的应用也日益广泛，针对于维哈柯语的网络舆情监测系统也将日益完善，以后新疆地区少数民族必将更规范更有效的同世界交流，展现自身的特色，促进全民族繁荣发展。
参考文献
[1]项斌.网络舆情监测系统设计与实现[D].成都：电子科技大学，2010.
[2]西尔伯沙茨，等.数据库系统概念[M].杨冬青，等译.北京：机械工业出版社，2012.
[3]王青，成颖，巢乃鹏.网络舆情监测及预警指标体系研究综述.情报科学，2011（7）.
[4]加西亚一莫利纳，等.数据库系统实现[M].杨冬青，等译.北京：机械工业出版社，2010.
[5]马洪海.UML面向对象需求分析与建模教程[M].北京：清华大学出版社，2012.
[6]马均飞，郑文强.软件测试设计[M].北京：电子工业出版社，2011.
关键词 维哈柯语；网络舆情；检测系统
中图分类号：TP3 文献标识码：A 文章编号：1671-7597（2015）04-0016-02
在我国新疆自治区比较流行的是维吾尔、柯尔克孜和哈萨克文，为了能够更好的同全国各族人民乃至世界范围内的交流，人们研制出了维哈柯文输入法并且随着技术进步这种输入法也不断改进，伴随而来的是维哈柯文在网络中的出现日益频繁，从而对于维哈柯文的网络舆情监测系统的研发被提上了日程。
1 网络舆情及其特征
图1 我国历年网民规模增长示意图
网络舆情值得就是人民群众以互联网为载体的对当下比较流行的社会问题表现出的不同的看法的一些网络舆论，作为一种社会舆论，网络舆情主要是通过互联网传播的。因为网络具有虚拟性，开放性的特点，作为舆情的表现形式，网络舆情主要有以下三个很明显的特征。
1.1 突发性
因为网络有开放性，所以网络舆论的形成往往非常迅速。在我们的生活中可以发现，一件事情在网络上曝光之后，通过广大网友发表不同的意见和看法，这件事很快就会转变为一种舆论被点燃的导火索。
1.2 偏差性
因为网络的自由性以及对发言者身份的不确定性，使得发言者可以不受社会制约，随意的发表言论，网民可以通过网络发泄现实生活中难以宣泄的情绪，使得网络舆论充满了不准确性，更容易出现灰色以及庸俗的言论。
1.3 直接性
因为网络的便捷性，使得网民可以通过博客，社交平台和BBS等网站随时随地的发表评论和意见，使得民意的表达更加畅通。
2 网络舆情监测系统研发的必要性
通过对网络舆情的特征进行分析，特别是作为少数民族与外界沟通桥梁的维哈柯语在网络中的广泛应用要求我们应该加快建立对于维哈柯语的网络舆情监测系统并不断完善。
上文中提到了网络舆论的偏差性，在现实生活中网民很可能把自己的情绪发泄到网络这个虚拟空间，特别是作为少数民族，本身与外界的沟通就不够便利，维哈柯语作为一个重要的沟通桥梁，必须加大对其监督。但是在我国，网络舆情的监督还处在一个起步阶段，本身对于网络舆情监督就不够完善，对于使用相对较少的维哈柯语更是缺乏系统的网络舆情监督体制，不能及时准确的对关键性的网络舆论做出有效的反馈从而达到放缓于未然的效果。为了正确引导网络舆论方向，必须加快推进对于维哈柯语的网络舆论监测系统研发。
3 搜索引擎在网络舆论监测系统中的作用
网络舆论监测系统是一个以网页数据搜集技术、网页预处理技术、舆情分析挖掘技术等为技术支撑的全面的监测系统。其中搜索引擎在维哈柯语网络舆论监测系统中起着至关重要的地位。目前为止，针对于维吾尔文、柯尔克孜文和哈萨克文的搜索引擎还处于起步阶段，随着维哈柯语在网络中应用越来越频繁，为了更好地对维哈柯语进行网络舆情监测必须完善针对维哈柯语的搜索引擎设计。该搜索引擎主要包含以下四个模块。
1）数据采集：将维哈柯语网页下载下来并储存到HTML文档中。
2）文档处理：将已下载的网页数据的页面征文从HTML文档库中读取出来，并转化为uni-code字符经过一系列的处理形成索引关键词，之后将关键词保存到索引库中。
3）索引模块：通过索引库的内容在内存中建立索引表，并且根据给下面的检查服务模块送回有关关键词的索引信息。
4）检索服务模块：针对用户查询，将查询关键词进行处理后于数据库对照，最后将索引结果反馈给用户。
首先针对数据采集模块，对使用维哈柯语建立的网站的首页地址、字符编码标准以及网站性质进行统计，并收录大量维哈柯语的词根单词等建立数据库；然后针对文档处理模块，对于已经下载好的页面进行处理和分析，主要是从THML文档中对已经下载的网页进行正文提取和去噪并转换成标准维哈柯语字符；之后针对索引模块，采用倒排索引结构，以求充分提高硬件利用率；最后针对检索服务模块采用长度优先算法和最小编辑距离算法提高纠错效率。
4 设计原则
针对维哈柯语网络舆情监测系统的设计应该遵循以下几条原则。
1）系统的先进性和成熟性。
2）系统的前瞻性和实用性。
3）系统的可扩展性和易维护性。
4）系统的开放性与标准性。
5）系统的可靠性与稳定性。
6）系统的美观性和易用性。
图2 维、哈、柯文搜索引擎文档处理模块结构示意图
5 结束语
总之随着网络技术的不断发展，维哈柯语在网络中的应用也日益广泛，针对于维哈柯语的网络舆情监测系统也将日益完善，以后新疆地区少数民族必将更规范更有效的同世界交流，展现自身的特色，促进全民族繁荣发展。
参考文献
[1]项斌.网络舆情监测系统设计与实现[D].成都：电子科技大学，2010.
[2]西尔伯沙茨，等.数据库系统概念[M].杨冬青，等译.北京：机械工业出版社，2012.
[3]王青，成颖，巢乃鹏.网络舆情监测及预警指标体系研究综述.情报科学，2011（7）.
[4]加西亚一莫利纳，等.数据库系统实现[M].杨冬青，等译.北京：机械工业出版社，2010.
[5]马洪海.UML面向对象需求分析与建模教程[M].北京：清华大学出版社，2012.
[6]马均飞，郑文强.软件测试设计[M].北京：电子工业出版社，2011.