基于眼动注意力机制的文本标题生成方法研究

来源 :陕西师范大学 | 被引量 : 0次 | 上传用户:wmrik
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着在线网络平台的不断普及,网络购物、网络教育、数字娱乐等平台产生的文本数据呈现出惊人的增长,用户每天可以浏览到大量的文本。然而,过多的数据必然带来信息过载的问题。此外,用户在阅读冗长的文本时不仅会感到乏味,还很难获取到有价值的信息。遗憾的是,从大量的文本中选择和吸收所需的信息是具有挑战性的。文本标题自动生成方法是指为给定文本生成一个长度仅有一句的文本标题。鉴于文本标题不仅可以引导用户选择感兴趣的信息,还可以为用户提供基本的文本信息,节省用户浏览文本的时间。因此,研究人员试图通过生成高质量的文本标题来挖掘出源文本的关键信息,从而有效地解决信息过载问题。近年来,随着人工智能技术的飞速发展,越来越多的研究人员通过构建神经网络模型来自动生成文本标题。然而,基于流行的编码器-解码器框架所构建的标题生成模型仅在处理特征较少的短文本时更有效,在为长文本生成标题时的表现较差。此外,以往关于文本标题生成技术的研究主要集中在通过源文本的词频、词性等语法特征来抓住源文本的主要信息,而忽略了基本的诸如眼动数据等用户认知数据,导致生成的文本标题质量较差。为了解决这些问题并生成高质量的文本标题,本文探究了用户在源文本中不同部分的停留时间对生成标题的影响,并基于单词的阅读时间与其重要程度之间的相关性构造出一种眼动注意力机制。在此基础上,我们提出了一种有效的基于神经网络的文本标题生成模型。此外,我们还将所提出的模型与经典的文本标题生成模型进行了对比实验。实验结果表明,我们提出的模型性能明显优于经典的标题生成模型。本文的主要贡献如下:·本文建立了一种眼动注意力机制来捕捉源文本中的重要信息。首先,我们基于三个眼动数据集构建了阅读时间预测模型从而获得了文本单词与其对应阅读时间的映射关系。然后,根据不同单词的阅读时间计算单词的眼动注意力权重,权重较高的单词获得更多的注意。最后,眼动注意力机制识别出源文本中含有关键信息的重要部分。·本文提出了一种基于眼动注意力机制的文本标题生成模型。首先,为了能够准确识别出源文本的关键信息,我们构造了基于门控递归单元的双向编码器来生成上下文语义向量。其次,该模型将眼动注意力权重与上下文语义向量相结合。最后,将其输入到我们的注意力解码器中,生成一个完整的文本标题。·本文设计实验分析了基于不同神经元和单词嵌入方法的阅读时间预测模型的性能。此外,我们还建立对比实验来验证我们所提出模型的有效性。最后,实验结果验证了我们提出的模型能够生成质量更高的文本标题。
其他文献
学位
学位
学位
学位
航空、航天、核能、石油化工等高端技术领域对一个国家的装备制造、军事安全和国际话语权至关重要,其发展程度是衡量一个国家工业水平、国防实力及综合国力的重要标志。陶瓷基复合材料因具有高熔点、良好的高温强度保持率和优异的抗氧化和抗烧蚀能力等,被广泛应用于以上领域,如高超声速飞行器的热防护系统、发动机的高温结构部件及核聚变反应堆的关键部位等多个方面。陶瓷基复合材料在使役过程中常常面临复杂的高温环境,如若发生
随着电子信息技术的快速发展,电磁吸波材料在民用和军事领域有着广泛的应用。传统吸波材料因其合成工艺复杂、成本昂贵、原料不可再生,达到使用期限报废后不能循环利用也不易降解等一些列问题,使得在实际应用中有很大的局限性。因此,开发出工艺简单、成本低廉,吸波性能优异、且兼顾环保的高应用价值吸波材料显得尤为重要。稻壳、棉纤维等生物材料与传统吸波材料相比,具有天然微结构丰富、来源广、价格低、可降解再生等优点,成
共价有机聚合物(COPs)具有低质量密度、良好的结晶度、优异的化学稳定性、高表面积等特性,在气体存储和分离,非均相催化,药物输送,光电转化以及能量存储等领域具有广泛的应用。近来研究发现,酸性介质中具有蒽醌基团和吡啶N嵌段的共价有机聚合物材料在易发生氧化还原反应。这种氧化-还原活性材料可作为赝电容储存材料。然而,该类聚合物导电率较低,二维片层结构常使其氧化还原功能团被掩埋,电解液难以渗透接近,电容储
河口余水位是影响水深和水位的一个重要因素,受到河流、海洋、气象等诸多要素影响,目前大量研究表明其主要取决于径流量、潮汐和风应力等共同作用,随时间和空间变化显著。长江作为我国第一大河流,随季节变化的径流对长江河口余水位起着重要作用,同时陆架环流等海洋因素的贡献亦不可忽视。研究河口余水位的时空变化及其成因对河口水位预报、水资源利用、海堤设计、防洪、航行等具有重要的重要科学意义和应用价值。长江流经我国1
短纤维增强树脂基(SFRP)复合材料具有加工方便、密度低、力学性能优异及耐腐蚀等优点,广泛应用于汽车、船舶及体育用品等领域。聚醚酰亚胺(Polyetherimide,PEI)作为一种特种工程塑料,具有优异的耐热性能、绝缘性能、阻燃性及成型加工特性,但与金属相比,其力学、摩擦磨损等性能较低。因此,为满足航空航天、军工装备等高端领域的应用要求,需要添加短切碳纤维等填料以改善PEI的力学、热学、电学及摩
在海洋科学考察原位化学分析需要开发各种电化学传感器,而其中关键的部件是参比电极。为此我们开发了Nafion膜封装制备Ag/AgCl参比电极,固相合成法制备固体电解质钛酸镧锂(LLTO)、钛酸镧钠(NLTO)全固态参比电极,并对这些参比电极的结构与性能进行研究。主要研究内容如下:(1)通过电泳沉积法制备Ag/AgCl电极,进一步用Nafion膜进行封装制备参比电极。加入AgCl用来维持AgCl电离平