基于深度学习的情感对话生成模型研究

来源 :华中师范大学 | 被引量 : 0次 | 上传用户:wangwuhua123456789
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人机对话作为人工智能领域的核心技术之一,一直以来备受学术界与工业界的关注。早期,人机对话系统的构建主要基于规则、模板或者检索的方法。近年来,深度学习技术的发展使得现有人机对话技术有了突破性的进展。随着人机对话系统应用场景的不断扩展,人们提出更高的需求,无论是任务型人机对话还是开放域的闲聊,都希望机器兼具智商与情商,能够灵活地与人交流,理解并且表达情感,而不是给出冷冰冰的回复。然而,现有的对话生成研究大多致力于提高回复内容的相关性,在情感对话生成上的研究还较少。本文研究基于深度学习的情感对话生成,即根据用户对话消息与指定情感类别,生成语法正确、内容相关且包含指定情感的回复,情感类别包括{其他、喜欢、悲伤、厌恶、愤怒、快乐}六种。本文的主要工作如下。本文提出基于内容与情感联合解码的情感对话生成模型(EDG-JDCE)。研究表明,在对话生成模型中加入情感因素会导致生成回复的内容相关性降低。为了缓解上述问题,该模型构建基于内容与情感的联合注意力机制与联合解码器。在解码器中设计独立的内容解码单元与情感解码单元,分别学习对话中内容与情感的表达能力。在解码过程中,引入基于内容与情感的联合注意力机制,根据内容与情感的表达状态,获取注意力权重,动态对用户对话消息进行编码。同时,本文在该模型的基础上,探讨One-hot与Embedding两种常见的情感类别表示方式对模型的影响。本文在NLPCC2017发布的情感对话语料上进行对比实验,实验结果表明,相比其他模型,该模型在各项评价指标上均有一定程度的提升。EDG-JDCE模型使用极大似然函数作为目标函数,同样会出现这种方法下普遍存在的“安全回复”的问题,如“我不知道”等。为了提高回复的多样性,本文提出基于序列生成对抗网络的情感对话生成模型(EDG-SeqGAN),主要包括生成器、内容与情感鉴别器。生成器使用EDG-JDCE模型,内容与情感鉴别器均基于双向长短时记忆网络。在对抗训练中,使用内容鉴别器保证生成器生成与用户对话消息内容相关的回复,使用情感鉴别器引导生成器生成包含指定情感类别的回复,从而最终生成更接近真实对话的回复,提高回复的多样性。实验结果表明,本文模型生成的回复在内容和情感上相关,同时也更加丰富、多样。
其他文献
<正>转眼到了年终,考核、总结、规划、年会纷至沓来,公司上上下下都在做着年末的最后冲刺和收关,许多企业的人力资源部也将人才盘点提上了日程。然而许多HR反馈,每年都做人才
<正>2016年随着供给侧结构性改《革进一步深化,"营改增"试点全面推开,这是我国应对经济下行压力采取的果断、有力措施。"营改增"全面推开过程中,中央陆续出台相关政策措施,并
技术市场成交额是登记合同成交总额中技术部分的成交金额,反映了一国技术市场的发展情况。与研究与试验发展人员全时当量、发明专利申请受理数、研究与试验发展应用研究经费
Bennett公式是至今用于各种角膜地形图仪测算角膜前表面非球面特性的经典,但是我们发现该公式是根据近轴光学理论所立,具有只能近似描述中央区角膜形态特性的局限性。我们新
城市生态系统健康评价适应于城市可持续发展和人类健康的需要。城市生态系统的健康是人类生存和发展的必要条件。维持城市生态系统健康,促进城市生态系统的良性循环,是国内外
实验室检测结果数据科学、准确、公正与否直接关系到客户的切身利益,也关系到实验室的形象和信誉,是检测实验室所出具的数据能否被社会承认、认可和使用的根本要求。采用科学
2017年是《实践论》《矛盾论》发表80周年。"两论"是毛泽东把马克思主义哲学与中国革命实践经验和中国传统哲学优秀成果相结合的产物,是马克思主义哲学中国化的典范。研究"两
目的研究基因缺陷型2型糖尿病模型动物db/db小鼠的早期生物学特性,为db/db小鼠应用于降糖药物的研究奠定基础。方法采用db/db小鼠为模型组动物,db/m小鼠为对照组动物,测定两
为了揭示陕西省农村基本公共服务设施均等化空间差异,促进全省农村公共服务均等化健康发展,建立了由3个Ⅰ级指标(基础设施完善度、公用服务完备度和环境友好度)、13个Ⅱ级指
随着互联网和信息经济的发展,网络营销被越来越多的企业采用,成为企业营销的发展趋势,越来越多的现代消费者转化成双渠道消费者。然而随着企业采用网络营销渠道,也引发了双渠