基于新统计量mt的汉语自动分词方法研究

来源 :微处理机 | 被引量 : 0次 | 上传用户:lixiaojin1987
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
汉语自动分词是进行中文信息处理的基础。传统分词需要大规模加工过的熟语料库做为测试集来训练模型以获取参数,代价高昂。在互信息和t-测试差的基础上,通过将两者进行线性和非线性组合,提出了一个新的统计量mt。该统计量所需的所有统计数据直接从待切分的生语料中获得,无须大规模加工过的熟语料和人工干预,大大降低了分词成本。测试结果显示,该统计量关于字问位置的分词正确率为80.14%,比单独使用互信息和t-测试差分别提高了6.83%和7.27%。
其他文献
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
<正>目的评价培美曲塞联合铂类(PC)对比多西他赛联合铂类(DC)探讨局部晚期及晚期非鳞型非小细胞肺癌同期放化疗的近期疗效与安全性。方法经病理组织学或细胞学确诊的初治、II
会议
目的:探讨长期吸烟者不同戒烟时间对小气道功能的影响。方法选择有小气道功能病变的长期吸烟男性患者23例为戒烟组,非吸烟健康男性28例为对照组,分别测定戒烟组戒烟前及戒烟后3
目的本文对肠癌低位保肛术的手术要点以及治疗体会进行总结、分析和探讨,为临床治疗提供一定的参考。方法对2011年7月~2013年7月我院进行治疗的56例肠癌患者进行低位保肛手术
目前,我国现行的高中物理教材关于弹性碰撞的定义与部分大学物理教材中关于弹性碰撞的定义存在明显的差异,导致的结果是:对某些碰撞按两种定义做出的判断结论相同,对某些碰撞
对SS1机车抱轴承的承载能力、组装精度、结构缺陷以及运用中出现的燃轴故障原因进行了分析;并提出了改进建议,最后对“瓦轴间隙讨论”发表了看法。
放射治疗是恶性肿瘤尤其是乳腺癌的重要治疗方法之一,在乳腺及胸壁接受放射治疗的过程中,设计照射野时常不能完全避开心脏,即使在使用三维适形或/和三维适形调强放疗的情况下
通过对起重机吊钩防脱钩装置失效问题进行的有限元分析,提出一种新的设计方案,试制了样件并投入实际生产中,结果表明,该防脱钩装置有效性较之前得到了提高。
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield