基于深度学习的蒙古文古籍整词识别技术研究

来源 :内蒙古大学 | 被引量 : 4次 | 上传用户:tsmkgszcd
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
蒙古文古籍是研究蒙古族历史文化的重要资源,为了加强对蒙古文古籍的保护,提升蒙古文古籍在研究中的利用率,越来越多的蒙古文古籍被转化成数字图像形式。但是蒙古文古籍图像不能直接编辑,无法进行有效分析、统计和检索,因此对蒙古文古籍图像进行识别并将其转化为可编辑的电子文档是一项十分有意义的工作。然而,蒙古文古籍采用木刻雕版印刷,因此蒙古文古籍存在着字体形变过大的特点,并且蒙古文古籍成文年代久远,因此,存在着不同程度的污损、缺失与褪色,由此导致了蒙古文古籍单词图像质量低下,这给蒙古文古籍单词图像的识别带来了极大的不便。现今,对蒙古文古籍识别的研究相对较少,主要基于字元切分的方法,即,将待识别的文字切分成字元,以字元作为识别单位,并在此基础上的多知识策略的方法,其存在如下问题:第一、只能适用于高质量,噪声较少的蒙古文古籍单词图像。第二、字元切分的准确性是决定识别结果的重要因素。本文主要研究基于深度学习的蒙古文古籍整词的识别技术,目的是为了解决以往在蒙古文古籍单词图像识别中存在的字元难以有效切分及对图像噪声敏感的问题,希望通过对蒙古文古籍整词进行识别来进一步提升识别正确率。本文以蒙古文古籍《甘珠尔经》为素材,对蒙古文古籍整词识别技术进行了探索,本文的主要研究内容如下:(1)本文使用的实验素材来源于内蒙古大学图书馆的数字化《甘珠尔经》,从中随机选取100页,经过版面分析、二值化、最终切分为20176幅蒙古文古籍单词图像作为实验样本,并将其分为1336类,并且每个样本都进行了人工的标注,由于存在个别类中样本数量过少的问题,即数据集分布不平衡问题,本文采用SMOTE技术(Synthetic Minority Over-sampling Technique)进行样本的扩充。扩充后样本总量达到267200张,作为本文实验的新数据集。(2)针对蒙古文古籍单词图像质量不佳、单词图像进行字元切分时难度较大的问题。根据深度学习在图像识别领域取得的优异性能,以LeNet-5模型作为实验基础模型,本文提出了改进的基于卷积神经网络(Convolutional Neural Network,CNN)的蒙古文古籍整词识别技术和基于循环神经网络(Recurrent Neural Network,RNN)的蒙古文古籍整词识别技术,分别通过改变图像尺寸、训练次数、数据集分布平衡性及循环神经网络中输入粒度大小等因素来观察对模型识别能力的影响,并对卷积神经网络与循环神经网络的表现性能进行了实验结果的对比。(3)上述的整词识别方法,不能解决集外词识别的问题。在此基础上,结合长短期记忆网络(Long Short-Term Memory,LSTM)的优越性,本文又提出了基于CNN-LSTM的蒙古文古籍整词识别方法,虽然识别正确率达到84.5%,低于CNN和LSTM的识别正确率,但成功的解决了集外词的问题。
其他文献
从美国次级贷危机以来,世界经济就出现持续的低利率、低通胀和低增长并存。本文结合已有研究思考是否存在其他货币政策可操作目标以应对现有宏观经济环境。党的十九大报告明
目的:胃癌(Gastric Cancer,GC)是全球第五大常见恶性肿瘤和第三大主要死亡原因。尽管目前的治疗方法提高了早期胃癌的存活率,但许多患者来就诊时通常已是胃癌中晚期,其死亡率
书院制育人模式旨在促成人的全面发展,是实现立德树人教育任务的主要实践途径之一。近年来,伴随着不断实践探索,书院制得到了进一步快速发展,书院试点范围正由一流高校向普通高校逐步扩充,在书院建设方面,物理空间建设作为实现全面育人培养目标的物质前提成为了首要突破点,而如何在物理空间基础上落实立德树人的任务,是否存在可以参照的书院制育人模式等是目前书院制实践发展亟需关注的话题之一。本研究将从理论视角建构书院
背景脑胶质瘤的病理分级对于患者预后及生活质量具有重要的影响,其中低级别的患者术后的生活质量及预后要优于高级别。而丘脑部位胶质瘤患者的预后不仅和肿瘤级别相关,还明显
目的:根据中国国家癌症中心最近的一份报告显示,胃癌(GC)是中国最常见的恶性肿瘤之一。虽然在本报告中观察到死亡率下降的趋势,但胃癌的死亡率依然高居肿瘤死亡率的第三位。多
目的:胃癌是我国消化系统最常见的恶性肿瘤,严重威胁人类健康。细胞凋亡与肿瘤的发生发展有着密不可分的关系。肿瘤细胞凋亡明显受到抑制,凋亡抑制蛋白(IAPs)家族在肿瘤细胞
葡萄糖、过氧化氢和鸟嘌呤是生命活动过程中不可或缺的生物小分子,血液中其浓度的异常可能引发艾滋病、糖尿病和癌症等。因此,用于检测葡萄糖、过氧化氢和鸟嘌呤的电化学无酶传感器的发展引起了广泛的关注。近年来,基于过渡金属纳米材料构建的电化学传感器用于检测葡萄糖、过氧化氢和鸟嘌呤的工作被广泛研究,而关于过渡金属镍铁类普鲁士蓝(Prussian blue analogue,PBA)纳米立方体材料用于检测葡萄糖
本次创作的川剧弹戏剧本《孙策与太史慈》,取材于《三国演义》第十五回《太史慈酣斗小霸王,孙伯符大战严白虎》。通过详细考察和对比了不同版本的三国时期的史料,在力求忠实
中国现有的食品质量安全认证和管理体系种类较多,生产者和消费者对认证产品感到茫然和不知所措。随着基础设施的改善和科学技术的普及,食品运输相对成熟,但食品运输安全方面的研究却很少。食品质量安全与消费链中存在食源性危害(消费者摄入)有关。由于可以在食物链的任何阶段产生食品质量安全危害,因此必须通过食品链中所有相关方的共同努力,充分保障整个食物链并确保食品质量安全1。在经济高质量发展的同时,人民群众越来越
目的:结直肠癌(Colorectal cancer,CRC)是世界高发恶性肿瘤之一,在女性中发病排第2位,男性排第3位。近几十年来,西方化的生活方式显著增加了肥胖和运动缺乏的发生率,从而促进