基于序列的意图识别与回复生成技术研究与应用

来源 :华东师范大学 | 被引量 : 0次 | 上传用户:a381697182
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着自然语言处理技术的发展,任务式对话系统的应用也越发广泛,其中意图识别(Intent recognition)与回复生成(Response generation)是任务型对话系统中的两个重要的组成部分。意图识别旨在通过对用户的上下文的理解,判断出用户当前的行动目标,而回复生成根据当前的对话状态生成对话内容反馈给用户,使得机器回复内容更加符合对话历史与当前场景。因此,对于意图识别和回复生成的研究有助于构建更加符合用户需求的对话系统。当前,意图识别与回复生成领域仍然面临一些挑战。一方面,在意图识别模型中,系统与用户间的多轮对话历史往往无法得到充分应用,同时由于用户在对话过程中意图会随着用户的需求发生转折,用户当前对话的意图难以判断。另一方面,由于生成模型对于历史信息的感知并不充分,生成的回复内容常常会与对话历史冲突或重复。以上述问题为出发点,本文进行了以下工作:(1)针对当前智能系统对话中存在的意图序列相关的特点以及多模态信息混杂的情况,本文提出一种基于序列的多模态对话意图识别模型。该模型结合了在对话过程中存在的图像信息,通过对话序列捕捉用户的意图变化,并引入图注意力网络优化了对意图序列的编码。在真实电商场景下的实验数据表明,引入图注意力网络的意图序列建模和多模态信息能够让模型更加精准地识别出用户当前对话的意图。(2)现有的回复生成模型忽略了对话历史感知中历史对话动作序列的重要作用,本文针对此提出一种基于对话动作序列的协同生成模型。该模型中将对话动作预测与回复生成视为多任务进行学习,并引入了历史对话动作序列信息。在多轮对话数据集Multi WOZ上的实验数据表明,引入历史对话动作序列后的模型在各项指标上的综合表现具有优越性。(3)本文将序列建模的思想与上述工作中的回复生成模型应用在心理学,开发了一种基于对话策略的情绪支持对话系统,该系统在助人技术理论指导下定制对话策略,通过对话历史选择合适的策略引导回复生成,系统框架基于Django实现,并以Pepper机器人作为典型终端进行部署,能够在用户情绪消极时,为用户提供有效的情感支持。
其他文献
三维人体形状补全是计算几何分析和计算机视觉中的一个重要问题,随着三维形状捕获设备的发展,三维形状数据变得易于获取,但由于设备精度等因素的限制,得到的形状往往是破损的。在计算机动画设计过程中,若可以对破损的人体形状进行快速补全,则可以基于现实人体形状进行快速建模;同时,快速补全人体形状可以让自主无人系统以更高的精度感知人类的存在,提升人机协同效率。传统过程化补全方法依赖手工建立的几何和概率模型对破损
剩余污泥(waste activated sludge,WAS)是城市生产生活过程中产生的大宗有机固体废物,其产量年年攀升,给城市环境管理带来了巨大压力。剩余污泥兼具污染属性和资源属性特征,其科学处理与处置对于生态文明建设具有重大意义。因此,本论文针对“污泥处理与处置过程中脱水难度大、新兴污染物丰度高和资源转化效率低等”技术难题,系统开展了硫氧自由基(oxysulfur radical,OSR)预
纠错码使得通信系统具有检错和纠错的能力,从而保证了通信的可靠性。在纠错码理论的相关研究中,自正交码是一项十分重要的研究课题,在通信、数据存储以及密码学等领域有着广泛的应用。随着量子通信技术的发展,自正交码还被发现可以用于量子纠错码的构造,引起了诸多学者的研究兴趣。通常情况下,自正交码可以由线性码的正交包来构造。BCH码作为一类特殊的线性码,其结构清晰,纠错能力强,且构造方式较为灵活。因此,本文对B
硬件模型检查器是保证计算机硬件设计正确无误的工具之一。然而,硬件模型检查器本身作为一种软件,他自身也有可能存在着一些缺陷。这些缺陷或导致程序崩溃,或导致验证结果与实际不符。而使用人工撰写测试用例的方式去检查这样的缺陷,效率极其低下。因此,我们需要一种自动化的测试方法,来对硬件模型检查器进行测试。模糊测试是软件测试领域非常重要的自动化测试方法之一。它能够自动化生成随机的测试用例。模糊测试已经在多种类
三维电极生物膜反应器(3D-BERs)是一种新型的氢自养反硝化脱氮技术,无需额外投加电子供体,避免了二次污染。由于氢自养微生物在粒子电极界面挂膜时间较长,导致反应器启动较慢,初期脱氮效率不高,因此我们前期的研究中在3D-BERs中投加纳米α-Fe2O3,使之与微生物在粒子电极界面自组装形成纳米杂化生物膜,从而促进反硝化微生物的富集,加快反硝化的启动过程。目前仍有一些问题有待解决,如3D-BERs的
实体提取是指从文本中识别出具有特定意义的实体,关系提取是指判定实体与实体之间存在某种关系,最近热门的实体和关系联合提取的本质是在同一个模型当中同时对这两个任务进行训练。在生物医学上,实体和关系的提取对于疾病的治疗研究具有很大的应用价值。本文依托以“COVID-19爆发”为基础构建突发公共卫生事件医疗综合决策智能辅助平台课题,目的是从生物医学文本中提取出与某种疾病或病毒相关的基因通路,为疾病的治疗方
随着印制电路板(PCB)行业的蓬勃发展,传统的PCB质量检测方法的检测效率已经很难适应现在的PCB生产需求,近年来,基于机器视觉技术的自动光学检测系统(AOI系统)逐渐成为主要的PCB质量检测方法。常见的PCB缺陷分为两类,第一类缺陷包括划痕、异物、元件贴反等2D范围内的缺陷;第二类缺陷包括走线弯曲偏移、走线交叉等3D范围内的缺陷。为了检测第一类缺陷,AOI系统使用高分辨率但视野非常有限的工业相机
近年来,嵌入式软件被广泛应用在一些安全关键领域中,嵌入式软件的需求也日益复杂,其中最为关键的就是需求中包括的实时规范。传统的时序逻辑语言如LTL、CTL等无法处理连续时间上实值信号的变化情况。因此,可以描述实值信号特性的STL成为了必要的选择。但是由于缺乏支持STL的工具,自动验证系统是否满足STL性质十分困难。另一方面,Simulink已被广泛应用于模型驱动的设计与开发中。但Simulink本身
化石能源的巨大消耗,生存环境的急剧恶化,人类对于获取一种可再生的且环境友好的清洁能源非常迫切。其中氢能因为燃烧热值高、产物只有水等优点得到了人们的重点关注。但是,传统的制氢工艺(化石燃料制氢)存在着污染大、能源消耗多等问题,为了解决这些问题,电解制氢获得了广泛的关注。本文分别对催化电极中的基底材料改性工作、催化纳米材料的形貌调控、纳米形貌对于电催化性能的影响、硫化引进的硫活性位点对于电催化的改进以
针对多辆卡车在高速公路上协同运输的场景,学术界和工业界已经对自动驾驶的车队系统进行了广泛的探索。在部署智能车队之前,十分有必要确保其驾驶行为的安全性。自动驾驶车辆的行为都由决策功能指挥,其决策基于观察到的驾驶场景。然而,目前仍然缺乏有效的验证方法来确保队列系统中基于场景的决策过程的可靠性。在本文中,我们针对跨海高速公路上行驶的智能重型卡车组成的队列驾驶场景,提出了一种形式化建模和验证方法,为队列车