基于WordNet的语义相似性度量及其在查询推荐中的应用研究

被引量 : 0次 | 上传用户:dama5011
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
语义相似性度量一直以来都是人工智能、心理学、认知科学等领域的研究热点,并有着非常广泛的应用。作为自然语言处理技术的重要内容,它所依赖的语言知识表示中最重要的初始环节就是语义词典。一部能够表达概念关系的语义词典是自然语言处理工作中不可或缺的基础性资源。美国Princeton大学开发的WordNet就是语义词典的优秀范例。其基本思想简单明确,形式化做得彻底。目前,WordNet已成为一个事实上的国际标准,其框架的合理性已被词汇语义学界和计算词典学界所公认。与此同时,伴随数据爆炸性增长,人们越来越依赖搜索系统来获取信息。查询推荐技术成为近年来搜索领域的研究热点。其可弥补当前Web搜索方式在表达能力上的局限性,辅助用户更好地表达查询意图。随着查询推荐技术应用研究的深入,查询词信息稀疏、内部信息缺失严重,使得查询推荐技术面临许多挑战,并严重制约查询推荐技术的进一步推广和应用。而将语义相似性度量研究成果推广到查询推荐的研究中,可有效解决查询词信息稀疏等关键问题,是未来发展的重要方向。基于上述背景,本文首先探讨了国内外有关语义相似性度量和查询推荐的研究现状,从语义层面表示数据,围绕语义相似性度量,建立了基于WordNet概念拓扑结构的信息内容IC模型;提出基于概念自身内容IC和路径信息混合的语义相似度算法;进而将算法应用到相似查询判定中。本文主要创新和贡献如下:1.在WordNet语义相似性参数研究方面,提出了基于概念拓扑结构的信息内容IC模型。概念信息内容IC是概念语义相似度算法的参数,对语义相似度算法的性能具有决定性作用。本文提出的新模型不需要任何语料库的参与,概念节点所包含的信息内容,取决于该节点及其子孙节点的拓扑结构,IC值是该节点自身及其子孙节点排列方式的函数,包括该概念节点的深度,子孙节点的数目以及每个子孙节点的深度。实验结果表明:该模型性能明显优于其它IC模型,能够有效的区分开不同概念,使得概念的信息内容IC获取更为精准。2.在WordNet语义相似性度量方法研究方面,提出基于概念自身内容IC和路径信息混合的语义相似度算法。该算法不仅反映了概念节点在语义分类树中的路径信息,也反映了语义密度信息,即:将概念的信息内容IC和在语义分类树中的路径信息都考虑在内。实验结果证实:此算法较国内外学术界已有算法更接近人类的判断,性能更优。3.在相似查询度量方面,提出基于语义的相似查询度量方法。相似查询度量是后续查询推荐的核心问题。该方法从语义层面表示数据,兼顾用户检索词项的相似性以及用户点击文档内容的相似性。在此新方法基础上,通过实验聚类相似查询,形成相似查询扩展字典。实验结果显示:该算法能更精准地捕获相似查询,为后续的查询推荐奠定了良好的基础。4.在查询推荐方法研究方面,提出了基于主题的查询推荐方法。该方法充分考虑了用户查询主题与session中query的关联性、推荐query与初始query在语义上的包含关系、相似程度等因素。实验结果证实:基于本文提出的推荐方法,能更准确捕获用户查询意图,大幅提高搜索准确率。本文研究成果具备一定的学术理论价值,并已初步成功应用到了信息检索领域,未来可进一步推广到网页分类、问答系统、广告推送、电子商务等多种信息领域,具备较高的商业应用价值和宽广的应用前景。
其他文献
咳嗽是机体的自我防御机制,临床以咳嗽为唯一症状或主要症状、时间超过8周、胸部X线检查无明显异常者为不明原因的慢性咳嗽。引起慢性咳嗽的病因有多种,虽然机制还尚不清楚,
人大工作程序性强,法律规范多,对新闻报道工作要求严格,如何做到人大新闻报道严谨性和可读性的统一,使程序性平淡记述变得生动活泼,使呆板的法律法条变得浅显易懂,是从事人大新闻报
对污泥浓度、机械作用、COD负荷、pH、温度等制革废水UASB厌氧处理的几个主要影响因素进行了研究.结果表明,随着污泥浓度的增强,甲烷产气量增加,产气速度提高,COD的去除率先
目的:研究乳腺癌肿瘤间质浸润的炎症细胞的类型、数量和临床意义。方法:收集石蜡包埋乳腺癌119例及乳腺良性病变组织30例,采用免疫组织化学方法,CD20、CD3CD68和stabinlin-1抗体
高山滑雪起源于欧洲的阿尔卑斯山脉地区,它的发展要晚于北欧滑雪。高山滑雪可分为实用滑雪、娱乐滑雪,竞技滑雪和探险滑雪四类,其中娱乐滑雪占到多数。高山滑雪以其独特的速度魅
随着全球化进程和信息通信技术的快速发展,智慧城市建设愈发引起重视,其建设对于解决城市发展中存在的问题十分有益,也可以促进国民经济发展和经济结构战略性调整,提高社会生
<正> 松下全自动洗衣机电脑程序控制器(以下简称“程控器”)由电源板和电脑程序控制示板两部分组成。松下全自动洗衣机是我国近年引进的新产品,主要生产厂家有营口洗衣机总厂等
提出构建基于Web的煤机装备优化设计系统,为煤机装备设计与制造企业提供资源共享服务,既提高了设计效率,又缩短设计周期。以MATLAB软件为基础,基于ASP.NET技术和C#语言,开发
本文论述的是冯·赖特的行动理论。他的行动理论包括两个方面:一是行动与因果关系的关系;二是行动本身的理解和说明,这其中包括行动和意向的关系。冯·赖特所论述的行动的这两
研究以江苏省和安徽省为例,采用"中小学教师工作压力问卷"和"一般自我效能感量表",对随机抽取的小学教师的职业压力和一般自我效能感进行考察。结果表明:小学教师的职业压力