论文部分内容阅读
本文在超过2000万词汇的大量科学统计的基础上,提供了维文尔字母频率表.这对今后语言文字研究和制定科学的维吾尔文字输入键盘布局方案、维吾尔文字压缩算法的设计、语文类课程内容的补充等众多方面有着非常重要的参考价值.
维吾尔文字母频率统计及其应用
【摘 要】
：
本文在超过2000万词汇的大量科学统计的基础上,提供了维文尔字母频率表.这对今后语言文字研究和制定科学的维吾尔文字输入键盘布局方案、维吾尔文字压缩算法的设计、语文类课程内容的补充等众多方面有着非常重要的参考价值.
【机 构】
：
新疆大学信息科学与工程学院(乌鲁木齐)
【出 处】
：
第二届全国学生计算语言学研讨会
【发表日期】
：
2004年6期
其他文献
动词一直是语法学界研究的一个热点问题,随着新词语的涌现,新词语动词也层出不穷,在此基础上我们建立了可带体词性宾词的数据库,研究新词语动词带体词性宾语的能力.
人称代词(r)和名词(n)的线性序列中人称代词和名词的关系呈现出多样性,本文在现代汉语语法信息词典的基础上考察了r和n的组合类别,指出汉语r+n的搭配存在选择限制,r和n可以形成表示领属关系的定中结构,也可以形成表示同指关系的同位结构.并归纳出r和n的语义关系及共现条件,最后给出部分切分规则.
词性标注的关键是兼类词的排歧.本文探讨了一种方法来解决兼类问题,并以动词中的兼类词为切入点做了实验,即利用非兼类动词(纯动词)在大规模语料中的分布信息来判断具体上下文中出现的某个与动词有关的兼类词的词性.这种方法不需要人工标注好词性的训练语料,所需知识仅停留在词表一级,而且对其他存在兼类现象的语言也同样适用.实验结果证明了该方法的可行性.
熟语是自然语言中存在的普遍现象,所有的语料库在标注阶段都要处理熟语.为了把熟语问题处理好,本文以英汉熟语为例,在英汉熟语对比研究的基础上,介绍并分析了国内外现有语料库对英汉熟语的标注方式,发现并解决了一些汉语熟语在词性标注时存在的问题,进一步指出了对汉语熟语的语义进行标注的研究方向.
本文充分利用当前HowNet资源中概念的可计算性和句子对齐的汉英双语平行语料库信息,将词义排歧的问题转化为两种语言相对应句子词义组合的相似度计算问题,进而利用动态规划法的思想设计出一种在一定的时间和空间复杂度内,有效的标出多义词义项的算法.该方法从以前对每个多义词进行排歧时只考察其上下文环境和对应信息,改变到对句子所有中的词同时考察上下文环境,这样就可以从另一个角度来进行词义排歧,并且取得了满意的
本文提出了一种基于词对齐的双语组块对齐的方法.它利用已有的词对齐信息和英语组块识别结果,进行汉语组块的识别和双语组块的对齐.通过对双语组块对齐实例的分析,我们将组块对齐分为三种情况:(1)双语组块对应连续(2)双语组块对应不连续(3)组块合并情况.根据这三种情况,我们提出三种不同算法,进行双语组块对齐.实验结果表明,该方法的正确率和召回率分别达到90.76﹪,88.59﹪.
现有的文本分类方法需要较大的训练语料,在训练语料足够大的前提下可取得不错的效果,训练语料的规模直接影响分类的效果.然而,要大规模人工进行语料标注是一个难题.本文将k-means聚类算法引入到文本分类中,首先在无标注语料上进行词聚类,然后将聚类结果作为文本特征来代替词特征.通过这种方法,利用无标注的训练语料来改善训练语料不足的情况下文本分类的效果.实验结果表明,采用这种方法,在同等训练语料的情况下,
本文以大规模经过分词系统标注后的真实语料的统计数据为依据,对名词特别是二元"名+名"组合的组合能力以及合法性进行了初步的统计分析.
本文在现代藏语组块分析的前提下,讨论带助动词的谓语组块中助动词的自动识别策略.文章首先介绍了藏语助动词的功能以及在各类句法结构中的分布特征,然后根据这些句法分布特征提出了助动词的基本识别算法以及识别中可利用的句法规则.