基于词语搭配知识和语法功能匹配的句法分析器

来源 :南京师范大学 | 被引量 : 12次 | 上传用户:nicday
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
句法分析技术是信息处理领域的核心技术之一,也是难点所在。本文认为,词语搭配和句法结构之间有着密切的联系,将词语搭配知识加入到句法分析过程中有助于句法分析精度的提高。本文以词语搭配库和句法分析器互建的思想为指导,在研究中引入了哈工大、伯克利、斯坦福三所大学研制的句法分析器;在对比三个句法分析器分析结果的基础上,分别提出了两种大规模词语搭配的自动获取方法。第一种方法基于依存关系的句法分析,比对句法分析结果中的相同词对;第二种方法基于短语关系的句法分析,比对句法分析结果中的相同层次。实验表明,词语搭配的两种自动获取方法都能够有效的获取大规模词语搭配,其中基于短语关系的获取方法可以从14年新华社语料中获取得到约500万词语搭配型,抽样搭配精度约84%。使用自动获取得到的词语搭配资源,本文选取了四个搭配筛选条件用于词语搭配的优选,在搭配精度和搭配规模之间找到一个最佳的组合优选方式,并以此构建了一个包含十四个数据项的、百万搭配型数量的词语搭配知识库,知识库的抽样搭配精度超过90%。通过对知识库中的十四个数据项分别进行个体分析和关联分析,进一步挖掘了搭配类型、搭配次数、搭配距离等搭配相关属性之间的内在规律和联系。在建设完善了大规模、高质量的词语搭配资源之后,本文将词语搭配知识添加进基于语法功能匹配的句法分析算法,构建了一个基于词语搭配知识和语法功能匹配的句法分析器(CGFM)。使用新华社新闻语料作为开放测试语料,在单句法分析器的个体性能评测中,CGFM分析器开放测试的句法分析F值约为80%,添加了词语搭配知识之后的句法分析器相较之添加以前,句法分析的F值最多能有近4%的性能提升。在CGFM分析器、哈工大分析器、伯克利分析器、斯坦福分析器这四个分析器的横向性能评测中,CGFM分析器的表现优异,在短语分析评测和依存分析评测中均处于领先。
其他文献
青年,是处于人生从少年到成年中间的特定年龄阶段的人类个体组成的社会群体。青年观是人们对这一社会群体的总看法。邓小平的青年观,是在我国的社会主义现代化建设的实践中形
<正>商业与政策的十字路口,交叉在这个曾经荒芜的小镇。5288元人民币的VIP门票早早售罄,在闲鱼上被炒到一万二千元,依旧挡不住参与者的热情,来自6大洲81个国家及地区12万人次
创新是提高学生能力的一个重要手段和途径,而激发学生的创新能力是音乐教学的一个重要目标。因此,应当重视音乐教学中的学生创新能力培养。对音乐教学中如何创建和谐的教学氛围,激发学生的创新能力进行研究,并在此基础上提出一些有效的策略。  音乐教学 创新能力 学生  音乐作为一种艺术表现形式,具有很强的感染力和普遍性,进而对人们创造思维的形成以及创造能力的培养有着不可忽视的重要影响。  一、创建和谐的教学氛
本文将主要从木霉菌孢子产生、萌发及制剂方面,对木霉厚垣孢子及分生孢子的研究进展进行论述,以期为合理开发木霉孢子制剂提供理论依据。
体育运动学校应以发展竞技体育为核心,以建立重点专业为载体,以输送升学为导向,优化专业建设,加强体教结合,以业余训练与新型职业教育的衔接贯通为运作模式,寻求新的发展方向