金融主题垂直搜索引擎的研究与实现

来源 :浙江工业大学 | 被引量 : 0次 | 上传用户:chen_2006tt
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息科学的进步与互联网信息资源爆炸性的增长,搜索引擎已经成为互联网最重要的应用之一。面对浩瀚的网络资源,通用的搜索引擎存在信息量大、查询不准确、深度不够等问题,因而垂直搜索引擎应运而生,它具有“专、精、深”的特点,并且具有行业色彩,能够对某一特定领域、特定人群或特定需求提供有价值的信息和相关服务。本课题专注于金融主题垂直搜索引擎的研究与实现,通过技术研究建立金融主题的垂直搜索引擎,从海量的信息资源中筛选出满足用户需求的金融信息。本文讨论和研究搜索引擎和垂直搜索引擎的相关原理、技术和实现过程,在此基础上,利用开源的Heritrix爬虫工具包、Lucene全文检索工具包、HtmlParser解析工具包和ICTCLAS分词系统实现金融主题垂直搜索引擎的网页抓取模块、预处理模块、索引模块和查询模块四个核心模块。该搜索引擎在网页抓取模块中建立金融主题词库,根据适用于主题判别的向量空间算法,修改Heritrix爬虫工具包使其支持超链接的过滤;在预处理模块中利用HtmlParsel解析工具包结合统计学对网页文件进行去噪;在索引模块中修改Lucene全文检索工具包使其支持ICTCLAS分词系统,利用Lucene对网页内容进行分词和建立倒排索引,提高了搜索引擎的查询的效率和准确率;在查询模块中利用ICTCLAS分词系统和Lucene全文检索工具包,使查询结果符合用户的需求。实验结果表明金融主题的垂直搜索引擎能够较好满足用户对金融主题信息的需求。
其他文献
随着建筑工程中计算机应用的迅速发展,许多工程造价软件、技术标制作软件、评标定标软件等相继推出,减轻了建筑工程造价人员的劳动强度。但各种工程造价软件在使用过程中,表
电子商务是一件新事物,它的出现改变了人们固有的生活方式和经济交流的形态,立刻显现出巨大的生命力,在全球范围呈现繁花争艳、欣欣向荣的发展态势,并且对世界经济的方方面面
目的:分析唾液中miR-193a的表达水平与慢性牙周炎的相关性及临床意义。方法:采用qRT-PCR检测慢性牙周炎组(n=100)和健康对照组(n=50)唾液中miR-193a的表达水平;分析健康对照
茶叶籽(Camellia Sinensis O.Ktze)油是一种有待开发的高档木本食用油资源。传统的茶叶籽带籽壳压榨方法导致油的色泽、气味等品质下降,加大了后续精炼的难度和营养成分的流失;而
Klug等书号:978-7-04-031727-5出版日期:2011年2月定价:76.00字数:100万本书作为一本优秀、简明的遗传学教材,内容全面,重点突出,条理清楚,行文严谨,插图精美,被美国科罗拉多州立大学、