基于神经网络的中文论文数据分析技术研究

来源 :北方工业大学 | 被引量 : 0次 | 上传用户:x1u2e3
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,互联网得到了十足的发展,网络通讯传输技术也迅速发展,人们创造传输信息的能力大大增强,网络上充斥着越来越海量的各种虚拟信息和资源。传统的文本分析技术在面对复杂海量的文本时越来越乏力。近年来,深度学习技术的发展使得人们对于数据的处理利用能力大大提升。本文在文本关键语句提取,分类,相似度计算几个方面进行了研究和探索,通过改进并结合文本摘要提取技术和深度学习技术提出了一种有效的方案来进行中文文本的分析处理。在文本关键语句提取方面,针对后续工作的需要和TF-IDF算法的缺陷,对其进行了适当的改进,添加了DAC系数来衡量词汇在类间的分布情况,使最终的权值能更好的衡量词汇的重要程度,从而得到质量更高文本摘要。借助word2vec技术提出了一种基于语义的相似度计算方案。训练skip-gram网络来获得词的向量映射表,将词汇向量化,之后结合词汇的权值来构建文本向量,再利用余弦距离公式来计算文本间的相似度。使用前文中通过文本摘要提取技术获得的文本关键语句和词向量映射表构建网络的输入数据形式,结合卷积神经网络完成长文本分类的任务并对本文所用的卷积神经网络进行了详细的分析与说明。为了验证方法的可行性和有效性,设置实验对文中所提算法进行性能测试,结果表明借助深度学习技术的文本分析技术相较于传统技术具有一定的优越性,文本摘要提取时所做的改进对于最终效果也有一定的增益。最后本文使用上述方案构建了一个可以针对中文文本进行处理的文本分析系统。本文通过改进TF-IDF算法来获取了更高质量的文本摘要,将其结合word2vec技术提出了一种基于语义的文本相似度计算方案,又结合卷积神经网络技术提出了一种高效的长文本分类方案。
其他文献
近年来海上风力发电在全球蓬勃发展,成为海上风能最具应用前景的形式之一,已受到国家的高度重视,国家能源局《可再生能源“十三五规划”》对海上风电的发展也提出了具体的规
国家形象宣传片是国家形象的重要表达方式之一。随着互联网的发展,网络成为了中国国家形象宣传片的主要发布渠道。自从2011年第一部官方制作的国家形象宣传片播出以来,不断地
语音情感识别是人机交互技术的重要技术之一,同时也是语音信息处理领域的热门研究之一,在医疗、教育等领域有着非常广泛的应用前景。虽然近几年来深度学习给语音情感识别领域
随着我国烟草行业的发展和市场竞争的日趋激烈,卷烟工业企业及其相关辅料配套企业为适应行业和自身发展的需求,从提升产品质量、增强企业核心竞争力,以及降本增效的角度出发,启动生产线技术改造项目。该类项目普遍具有较高投资和较大难度等特点,项目在实施前后会存在多重(含多阶段、多层次)风险,都给技术改造项目提出了更高的要求和挑战。因此,对技术改造项目进行风险管理是十分必要的,具有重大的现实意义。本文以N公司微
博彩业在澳门属于龙头产业,对社会经济发展起到了重要的推动作用。澳门特区政府在2002年开放了赌权,积极引入外资和竞争机制,实现了资源的优化配置,也进一步巩固和提升了博彩及旅游业的“龙头”地位。在博彩业的带动下,澳门的其他产业也获得了快速的发展,推动澳门加速发展成为亚洲区博彩旅游中心。在建筑业方面,受博彩业的带动作用影响,澳门的建筑业在近二十年间也获得了长足的发展。根据相关统计,澳门建筑业生产总额在
迄今为止,已有近4000颗系外行星被发现,然而只在几个行星系统中发现了大气逃逸,且对大气逃逸信号的研究也不是很充分。在本文中,我们基于已有的流体动力学模型和新发展的一维辐射转移模型,来研究行星大气的物质损失率和恒星辐射的Lyα被行星大气再吸收的统计情况。我们选取了大量的样本(近450个系外凌食系统),这些样本包括了从类地行星到热木星的不同尺度行星,其中一些是目前已经观测到的行星系统,另外一些是我们
吸积态毫秒X射线脉冲星是低质量X射线双星的一个重要的子类,在这类源的爆发态能观测到相干的毫秒X射线脉冲。它们具有低质量X射线双星和毫秒脉冲星的双重特证,为毫秒脉冲星的再循环理论提供了直接证据。此外,吸积态毫秒X射线脉冲星对研究致密双星的吸积物理和中子星的物理性质也具有重要意义。然而,它们的形成与演化仍不清楚。本文利用MESA恒星演化程序模拟低质量X射线双星演化。基于低质量X射线双星的演化模型和吸积
对暗条的研究是当前太阳物理研究中最热门的前沿课题之一。近年研究发现日冕物质抛射(CME)同暗条爆发密切相关,而且暗条爆发往往伴随着双带耀斑的开始。因此对于暗条的分析研究,不仅能够让我们探讨暗条本身的活动现象,也将有助于我们更深入的了解CME和耀斑等爆发活动的物理本质。SDO卫星自2010年升空开始,为我们源源不断地提供了全日面、多波段和高时空分辨率的连续观测,以及光球视向磁场和矢量磁场等磁场数据。
词汇,作为语言学习的重要元素,对日常交际和语言学习起着举足轻重的影响。如今,词汇记忆一直是困扰高职生的主要问题。因此,如何提高学生的兴趣,如何让学生长久对词汇学习保
当今世界,宗教越来越成为一个国际性的文化现象,“宗教热”和“宗教复辟”趋势逐步深化。因此,对国内外学术理论界具有重大影响意义的宗教伦理及思想进行新的研究变得十分必要。法兰克福学派的批判理论在西方马克思主义学界产生了重大影响,其学派创始人霍克海默的社会批判理论中蕴含的宗教批判思想也为后世对资本主义宗教进行研究提供了借鉴。在当代社会,为处理好宗教与现代化的矛盾,就需要对霍克海默的宗教批判理论进行整体性