基于Lucene的垂直搜索引擎的设计与实现

被引量 : 6次 | 上传用户:txmotor
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网技术的飞速发展,网络信息资源的数量呈现出数量级的递增。传统的搜索引擎由于不能获取即时更新的网络信息资源,在面对用户的即时性查询或者深度而专业的搜索请求时,便显得力不从心。在这种情况下,面向特定领域的垂直搜索引擎便产生了,相对于通用搜索引擎的查询不准确以及深度不够等局限性,垂直搜索引擎的产生正是为了满足用户专业而有深度的搜索请求服务的。垂直搜索引擎专注于特定的一个领域,比如房产、旅游、汽车、教育等。提供专一化、有深度的信息检索服务。和通用搜索引擎相比,垂直搜索引擎的查询结果是和特定行业或特定领域相关的,由于相关的信息量较少,能够及时更新,这样就保证了查询结果的实时性和准确性。本文首先介绍了垂直搜索引擎的研究背景和研究意义,以及垂直搜索引擎的发展现状等。接着对垂直搜索引擎关键技术进行了介绍,主要包括网络爬虫的抓取过程和爬行策略,网页的主题信息提取算法、网页排序算法。接着对经典的网页排序算法进行了研究,包括PageRank算法,HITS算法。本文是在标准PageRank算法的基础上,添加了网页相似度判断的因子,以及表示网页新旧程度的时间因子。通过对PageRank算法的改进,能够较好的改善标准算法中存在的主题漂移以及查询结果偏重旧网页的问题,从而较好的改进了排序的结果。然后对开源Lucene及其关键技术进行了详细阐述,主要包括Lucene的系统组成、索引过程、评分机制及其检索过程。最后,通过研究垂直搜索引擎的关键技术,分析并设计了垂直搜索引擎的结构和系统实现框图,在Lucene与Hertrix的基础上开发了一个垂直搜索引擎。并且把前文改进的PageRank算法应用到Lucene的评分机制中去,经过对系统的运行测试,验证了改进后的PageRank算法具有较好的排序效果,达到了预期的效果。
其他文献
随着工业的迅速发展,金属结构制造已经成为制造业中一种重要的金属加工工艺,在工程机械、建材机械、造船等许多行业都得到广泛应用。各种新工艺新技术新材料新设备的不断出现
本文主要讨论概率问题中的参照类问题。所谓参照类问题,简单地说,对于每个具体事件都可以有不同的归类方式。但是,概率计算中对于这些不同的归类会得出各种不同的概率值,这使
近年来,新郑市以经济发展为核心,促进各产业协调发展,取得了显著地成绩。红枣产业作为新郑市重要的特色产业,在促进新郑经济发展中起着非常重要的作用。红枣产业的发展直接促进经
背景和目的2型糖尿病(T2DM)是一种常见的、多发的内分泌代谢失常性疾病。传统治疗方法,包括控制饮食、加强运动、口服降糖药、注射胰岛素,都很难使患者血糖长期保持正常,也不能
特定辐射源识别(specific emitter identification,SEI)是电子战领域的热点问题,而利用辐射源中频波形分类是SEI的一种自然选择。针对多径环境下的SEI波形检验遇到的难题,采
<正>4月16日,我国大型稀土企业集团——中国南方稀土集团有限公司在江西省赣州市挂牌成立。这是全国稀土行业推进资源开发整合、发展壮大高端矿产产业的重大举措。中国南方稀
目前SO2对环境的危害越来越大,而工业锅炉排放的烟气是SO2的主要来源之一,同时也是雾霾天气的成因之一。湿法脱硫是一种常用的烟气脱硫技术,主要包括石灰石/石膏法、氧化镁法、
弗朗西斯·哈斯克尔[Francis Haskell]被某些评论家誉为自从二十世纪三十年代伟大的流亡学者以来,在英国,可能在世界上,最伟大的关于西方艺术史研究的历史学家,他也是最富有原创
对当前少儿游泳初级培训存在的问题进行了初步梳理与分析,指出:功利因素日益突出、竞技游泳思维盛行、教学手段不够人性化以及政策法规不完善是当前少儿游泳培训市场存在的主
目的:分析bFGF和BMP-2基因单独和联合转染对体外培养的羊BMSCs的增殖和骨向分化的影响,比较Collagen-I、OC、OPN等成骨相关基因于转染前后相对表达量的差别,为构建组织工程骨