基于查询子意图识别的检索结果多样化方法研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:jiaxiaoli00
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
互联网的飞速发展使得人类的信息总量呈现出指数级增长的趋势,为了使用户能够更快更准确地在海量的资源中找到与当前需求相关的信息,信息检索技术应运而生。目前,搜索引擎作为信息检索的一个重要应用已经成为人们日常工作生活中不可获取的工具,它对用户提交的代表其搜索意图的查询词进行检索并按照文档与查询词的相似度的大小关系作为返回相关文档的排列顺序。然而,相同的查询词对于不同的用户来说所代表的查询意图可能并不相同,造成这个结果的原因主要有两个:一是查询词可能存在着歧义性,二是查询词下可能涵盖着多个子意图。因此,仅仅考虑相似度的检索方式会使某些用户的需求不会被满足,检索结果应该考虑用户的多样化需求。为了满足用户的多样化需求,本文对检索结果多样化问题进行研究,提出了基于查询子意图识别的多样化方法,充分考虑返回文档集合与用户查询意图的相关性和返回文档之间的多样性。本文中的基于查询子意图识别的多样化方法是在传统的显式多样化方法和隐式多样化方法的基础上发展而来的,兼有显式多样化方法中对原始查询下不同的子意图进行显式覆盖和隐式多样化方法中降低返回文档集合的冗余性的特性。方法中主要包括原始查询下的不同子意图的识别,不同子意图的权重大小关系预测和利用不同权重的子意图进行多样化结果排序三个方面。因此本文主要从以下几个方面展开研究:1.对原始查询下的不同子意图进行显示挖掘。将商业搜索引擎给出的与原始查询相关的Related查询和Suggested查询作为候选子查询,并利用人工标注的方式将不同的候选子查询划分为不同的子意图。同时,与其它三种挖掘候选子查询的方式进行性能比较,证明了我们使用的方法的有效性。2.对不同类别的子意图进行权重预测。通过对6个月的浏览器用户日志的挖掘,提取出32个与子意图相关的特征,并利用SVM排序模型对不同类别的子意图进行权重预测。3.对检索结果多样化问题进行分析,并提出基于查询子意图识别的检索结果多样化方法并给出算法的一般过程。通过与传统的显隐式多样化方法的性能上限和一种显式多样化的变种方法的性能进行比较,证明基于查询子意图识别的检索结果多样化方法的有效性。并对基于查询子意图识别的检索结果多样化方法的性能与子意图类别个数的关系进行分析。通过在NTCIR9子意图挖掘任务的数据集合上的验证,证明我们使用的子意图挖掘方式具有很好的表现,为其它需要使用查询子意图的工作奠定了基础。通过在NTCIR9多样化结果排序任务的数据集合上与其它检索结果多样化方法的比较,证明基于查询子意图识别的检索结果多样化方法更能够满足用户对于多样化检索结果的需求。
其他文献
位置服务的广泛应用,已经为科研提供了大量人类基础轨迹数据,一些位置服务系统每天产生的轨迹数据可以达到TB甚至PB,与此同时位置服务业务应用的多样性导致数据的格式不一致(例如
近年来随着数据的爆炸式增长,数据的存储规模越来越大,传统的单机系统已经无法满足高速增长的数据存储需求。分布式存储系统使用大量廉价商用服务器通过网络互联,可以提供极
服务计算是跨越计算机与信息技术、商业管理、商业服务等领域的新学科,是应用面向服务的体系架构(SOA)技术消除商业服务与信息支撑技术鸿沟的直接产物。按SOA原则而构造实现的
网格任务调度是网格计算的重要组成部分,直接影响着网格计算系统的性能。然而,由于网格环境自身具有异构性、分布性、开放性、不确定性以及动态性等特点,这就对传统的任务调度策
大数据的几个特性中,关于数据多样性的研究较少。度量空间数据管理分析方法把数据抽象成度量空间中的点,具有高度的通用性,是应对大数据多样性挑战的有效手段之一。由于度量
随着信息技术的高速发展,面向服务的架构(SOA)的出现极大地提高了软件开发的效率,但同时由于Web数据与资源共享程度的不断提高,资源的安全问题却变得越来越严重,如何支持分布式环
随着数据中心应用提出的需求不断变高,数据中心网络作为数据中心的重要组件,其负载也变的越来越大。这样导致拥塞情况频繁的发生,容易形成一种被称为incast的吞吐量大幅下降的现
多点监测无线传感网络中,由于节点能量有限和数目众多的特点导致网络的寿命受到限制。网络中数据包的无线收发消耗了节点的大部分能量,在无线传感网络内部的传感数据汇集过程
本文根据WSN网络自身的特征,给出了路由协议所需要的设计原则,详细分析了多路径路由协议,基于这些多路径路由协议的特点,开展了针对SMR协议的进一步研究。同时针对基本的蚁群
全球变暖与人类活动产生的温室气体和气溶胶有直接联系,而人类对温室气体的认知水平高于气溶胶。大气气溶胶不仅通过吸收和散射太阳辐射直接影响大气系统的热量平衡,而且作为云