实时手写数学符号识别研究与应用

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:qncy1239o
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
数学公式输入的效率与学习成本一直没有得到很好的平衡,基于UI模板(如Word,Math Type等)的输入方式简单直观,但是效率较低。基于Latex的输入方式效率较高,但是具有较高的学习成本,难以快速上手。为此设计并实现了一种结合手写数学符号识别和可视化编辑的数学公式输入方法,不仅提高了数学公式的输入效率,而且极大地降低了输入数学公式的学习成本,具有实际的应用价值。本文主要工作包括Math Symbols135手写数学符号数据集的构建、三种实时手写符号识别算法模型的设计与实现、一个卡片式笔记本软件系统的设计与实现。构建的Math Symbols135数据集包含13142个样本135个类别,每个样本包含一个手写数学符号的图片数据和笔画轨迹点序列数据。第一个算法以图片数据作为输入,以改进的Dense Net作为网络骨架,第二个算法以笔画轨迹点序列数据作为输入,以多层感知机网络作为骨架,第三个算法融合图片和笔画轨迹点序列数据作为输入,通过两个骨干分支来同时提取同一样本的图片和笔画轨迹点序列数据的特征来进行分类。卡片式笔记本系统是本文在知识管理工具领域的探索,它使用不同卡片来承载不同内容的编辑与展示需求,以求达到更好的学习与笔记记录体验。本文工作的创新点主要有两点。第一,提出了金字塔形多层感知机算法,用特殊形式的多层感知机网络架构来处理笔画轨迹数据,具有较强的拟合能力和极快的运行效率,实现了实时高准确率的手写数学符号识别;第二,设计了一个有别于传统笔记软件的卡片式笔记本软件系统,它能够脱离富文本编辑器的限制,针对特定形式的内容和场景设计专门的卡片来满足学习和笔记记录需求,具有巨大的扩展空间。本文开发的卡片式笔记本软件系统目前已支持markdown、富文本、代码、UML图、数学公式等内容的编辑与渲染,提出的数学公式输入方法在笔记系统中得以实现,验证了其可行性与有效性。设计的三种实时手写数学符号识别算法在Math Symbols135数据集上分别取得了94.6%、97.7%和99.2%的识别准确率,且达到了实时识别的性能要求。
其他文献
指静脉是一种稳定安全的生物特征,在生活中有广泛的应用前景。目前指静脉识别技术的应用存在许多挑战,如:一、传统的指静脉特征提取算法基于手工设置的特征参数(静脉模式的几何和拓扑结构,局部二进制码等),算法的泛化能力不好,基于深度学习的方法在学习特征表示时,没有充分利用样本的类内和类间关系,算法的识别性能存在一定提升空间。二、基于红外传感器采集的指静脉图像容易出现对比度低、曝光过度、模糊等质量问题,因此
学位
由于世界各地对石油及其附属产品需求量的增加,石油的海上开采、运输更频繁导致海上溢油事故频发。因为溢油事故发生后表面浮油对海洋环境的负面影响最为直接,所以海洋溢油治理采取的一系列紧急措施都是针对表面浮油的去除,以期短时间内最大限度去除污染源。然而在紧急处理后仍会在海水中的残留一定量的溶解性石油烃(Dissolved Petroleum Hydrocarbons,DPH),在海洋水利条件影响下DPH发
学位
目的:分析淋巴瘤病人生命意义感在心理痛苦与生命质量间的调节效应,为提升病人的生命质量提供参考。方法:采用生命意义感量表、心理痛苦量表、淋巴瘤病人生命质量量表对350例淋巴瘤病人进行调查,并应用分层回归分析和简单斜率法分析三者间的关系。结果:淋巴瘤病人生命质量得分为(118.75±21.53)分,其中功能状况得分最低。淋巴瘤病人生命质量与生命意义感呈正相关(r=0.405,P<0.01),与心理痛苦
期刊
语音是最常见的一种沟通方式,为了使机器代替人工,开发人员提出了语音识别技术,使得机器能够代替人脑来将语音转化为文本。但是带噪环境下语音识别技术的准确率会显著下降,所以往往需要使用语音增强技术作为其前端先进行处理。本文面向航空管制场景,探索了复杂噪声环境下的轻量级语音增强方案。研究了可以在不同噪声环境下自适应地学习该种噪声特征、并有针对性进行降噪的算法。由于提出的算法均基于卷积神经网络,所以将不同的
学位
随着软件工程技术的不断发展,软件的功能变得越来越丰富,这给人们的生活带来了极大的便利性,但软件的复杂性和多样性,也使得软件安全漏洞与日俱增,传统的软件测试方法说明软件存在某些安全漏洞,但是不能保证软件不存在某类安全漏洞,相比之下形式化验证方法则可以做到这一点。操作系统作为基础系统软件,其安全性至关重要,使用形式化验证方法对操作系统内核的实现代码进行验证,是保证其安全性和正确性的有效手段。而操作系统
学位
高效磨削技术以其确定性、高效率、高精度等特征已成为现代制造技术重要的发展方向之一,被有效的应用于精密加工和超精密加工中,是能够兼顾加工效率与加工品质的加工手段。如何有效降低磨削温度是高效磨削技术研究的核心问题,特别是在对难加工材料诸如高强度钢、钛合金、高分子材料等进行磨削时,该问题将更加突出。从提升磨削弧区换热性能、控制磨削烧伤的角度考虑,具有大螺旋角沟槽的结构化砂轮,其沟槽走向与磨削方向、切削液
学位
在计算机视觉领域,为了提高神经网络模型的检测能力,研究者们通常会使用大量的带人工标注的图片或视频数据来帮助神经网络更好地学习视觉特征。为了避免收集和人工标注大量训练数据带来的高昂耗费,能从大量无人工标注的图片或者视频中帮助神经网络模型学习泛化特征的自监督学习方法开始迅速发展。本文正是以自监督学习方法为基础,设计了一种新的辅助任务用以帮助卷积神经网络获得一定的语义理解能力,并将完成辅助任务的神经网络
学位
近些年来,国家相关政策的实施引发了全民健身热潮,慢运动的理念也随之风靡全国,慢运动逐渐成为居民主要运动健身方式,城市健身步道作为专业的线性运动空间是居民慢运动的首选场所,然而通过研究发现,虽然国家在规划阶段布置了大量的以点状与面状为主的运动空间,但居民对城市健身步道这一线性运动空间仍存在大量需求。本文基于上述问题,采用问卷调研与采集手机健身类APP数据相结合的方式,交叉对比研究慢运动人群需求,从需
学位
肱骨外上髁炎是临床中一种常见的骨科疾病,大多是因为不正确的运动姿势或者运动过度引起的以肘关节外侧疼痛为主的骨关节疾病。该病的临床表现以局部骨关节疼痛、活动受限等症状为主,严重时往往影响患者的日常生理活动。随着中医外科学的发展,中医外治法在治疗各种疾病中得到广泛应用,且效果显著。同样在肱骨外上髁炎的治疗上也有着明显的治疗优势,其治疗方法主要包括针刺、推拿、外用药物、以及民族特色医学等。文章通过检索近
期刊
推动我国既有建筑节能改造工作的有序开展,是提升我国能源利用率,实现节能减排目标的关键途径。EPC(Energy Performance Contracting,合同能源管理模式)是助力节能改造工作开展的全新模式,ESCO(Energy Service Company,节能服务企业)作为该模式的核心运行主体,通过为用能方提供一条龙服务,使我国节能改造工作进入新篇章。由于我国ESCO尚处于发展起步阶段
学位