信息检索系统的设计与实现

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:heguojing514
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着网络的普及,丰富多彩的网络资源给人们的生活、工作以及学习带来了巨大的方便。然而,信息数量庞大、排列无序以及垃圾信息的干扰等都阻碍着人们充分利用网络资源。为了使网络用户能够方便快捷地找到自己所需信息,搜索引擎便应运而生了。一般来说,搜索引擎都由搜索器、索引器、检索器和用户接口四个部分组成。Centaurea系统为全文检索提供工具包,实现了索引器、检索器和用户接口三个部分。本文详细介绍了Centaurea系统的设计与实现。首先,分析海量搜索引擎的基础技术,即分布式文件系统。然后,设计倒排索引文件的数据格式,描述整型数据压缩编码ByteCode,并比较其与其他压缩算法更适合倒排文件压缩的特点,给出了倒排索引创建算法和实现。由于Centaurea系统将执行效率放在第一位,所以给出提升索引创建速度的实现方法,包括字符串整型化处理和文件缓冲管理等。本文同时分析了构建分布式索引和检索系统的解决方案。搜索引擎的检索效率是评价搜索引擎质量的一个重要指标。本文阐述了Centaurea系统中的检索器的设计与实现,分析影响检索性能的主要因素。另外,论文还阐述系统中使用的相关度计算方法,并简要描述向量空间模型。论文的组织形式以实际系统中各模块为主线,这些模块包括倒排文件数据格式,倒排索引创建,查询,打分等。在论文最后给出系统的综合测试结果。
其他文献
复用技术能提高开发效率和软件质量,软件演化技术能有效降低维护成本,尽可能地利用现有软件资产,这些技术是解决软件危机的重要手段。而框架做为应用系统的基础平台,应当整合这些
数字家电控制系统的功能是采用一种访问方式,通过控制系统对数字家电的本地监测和管理,实现对家电设备进行远程控制。其好处是方便使用、节约资源及对设备的安全使用。 数字
随着Internet技术的发展,安全协议在电子商务和电子政务中的应用越来越多。与此相应的就是人们对协议的安全性更加关注,尤其是在特殊环境下如何建模和分析安全协议显得尤为重
随着互联网的飞速发展,基于电路交换的公共交换电话网(PSTN)逐步被基于分组交换的下一代网络(NGN)替代。NGN是基于IP网络的电信网络,它的出现是电信网络中的巨大变革。软交换
发展中国家的通信设备市场是通信行业的新兴市场,主要集中在亚洲的大部分国家、非洲的全部、拉美和东欧一些国家,这些国家数量很多,目前占全球通信设备市场的20%多,未来这些
高动态GPS卫星信号模拟器可模拟产生接收机收到的各颗GPS卫星信号,是高动态GPS接收机研制与测试不可缺少的测量设备;同时也可用于系统级GPS仿真实验,为最终确定GPS测量方案提供
近年来,随着RFID技术的快速发展,RFID技术在应用领域的研究也蓬勃开展,使用RFID技术进行室内定位就是研究领域之一。定位技术根据应用地理范围不同,分为室外定位技术和室内定位技
基于内容的图象检索技术是近年来国内外在图象数据库研究中出现的一个新热点问题。本文围绕图象特征提取和图象相似性度量两个问题展开论述。以Gabor基小波提取图象特征理论
基于相似度匹配的移动社交网络(PMSN)在移动设备日益普及的今天,其应用越来越广泛,针对它的相关研究也越来越热门。而在相似度匹配的过程中,对于用户个人属性的隐私保护和对
面向开放域的问答系统是自然语言处理领域中最具有挑战性的热点研究问题之一。随着互联网的飞速发展与普及,信息量的急速膨胀,有效查找和利用这些信息的迫切需求使得信息检索与