基于强化学习的对话系统自对话技术的研究与应用

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:zhaofaqiang0124
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
任务型人机对话的目的是帮助用户通过对话的方式完成特定领域的任务,现阶段已被广泛应用在很多企业的智能客服中。训练任务型人机对话系统有多种方法,现阶段最流行的是基于强化学习的训练方法。虽然强化学习与其他方法相比有很多优点,但仍然存在一些问题。在使用强化学习训练人机对话系统的时候,往往需要构建用户模拟器。现阶段用于构建用户模拟器并训练人机对话系统的方法,往往存在多样性差、训练耗时过长等问题。为了解决这些问题,本文在广泛调研的基础上,开展了基于强化学习的对话系统自对话技术的研究与应用,具体工作如下:提出了一种异步更新的合作式强化学习算法用于训练任务型人机对话系统。该算法有两个特点,其一,利用多进程技术,通过异步的方式将子进程中的参数更新到主进程的人机对话模型中,不同子进程间的人机对话模型,协作更新主进程中的人机对话模型策,不同子进程间的用户模拟器,协作更新主进程中的用户模拟器;其二,子进程中的对话策略模型与用户模拟器进行对话交互,两者均使用强化学习算法训练联合更新各自的模型,使得在训练对话模型的同时也对模拟器进行了训练。与其他基线算法对比实验的结果表明,本文提出的算法在训练时间、对话成功率和对话丰富度这三个指标上均取得了显著的性能提升。设计并实现了一个人机对话系统,该系统既包含一个基于上述训练算法训练的会议室预订人机对话系统,也可以与用户进行聊天。
其他文献
金属氧化物ZnO和TiO_2均为宽禁带半导体,具有物理及化学稳定性高、抗辐射性能好、价格低廉等优势,一维纳米结构的ZnO和TiO_2具有大比表面积、载流子定向传输的特点,已经广泛地应用在生物传感器、光催化、太阳能电池、阻变存储器以及紫外光探测器等多个领域。由于化学生长的一维纳米结构的形貌以及薄膜的均匀性难以精确控制,增大了光电子器件中的接触电阻,限制了载流子传输和器件的工作稳定性;大量的表面态和缺
实施精准扶贫是实现全面建设小康社会以及中华民族伟大复兴目标的重中之重;某市在积极推进精准扶贫工作并取得诸多成效的同时也面临一些问题;有关部门在制定扶贫政策时未充分考虑当地现状,所制定的政策难以满足扶贫对象的实际需求;扶贫人员现场造访扶贫行为缺乏统一行动标准,降低精准扶贫的规范性和针对性;此外扶贫人员难以及时上报现场扶贫情况。因此需要开发精准扶贫管理系统解决某市的扶贫工作问题。精准扶贫管理系统包括W
半监督分类是图像分类领域的一个重要研究方向,它用少量的标记数据训练分类器,用大量的未标记数据辅佐训练过程,达到提高分类器性能的目的。伴随着深度学习的不断发展,半监督分类技术得到了质的提高,成为当下处理大数据分类问题的重要研究方向。如何充分利用未标记数据将是提升半监督模型分类性能的关键所在,同时,其性能的好坏很大程度依赖于网络结构、损失函数和分类器等多种因素的影响。本文针对半监督深层生成网络模型未能
今天,纺织和服装行业(TGI)的全球出口总额的约一半来自发展中国家,如孟加拉国,印度,越南和,印度尼西亚.In在某些情况下,TGI成为收入的主要来源。例如,TGI占孟加拉国总出口的80%左右。尽管一个国家的TGI具有重要意义,但发展中国家的TGI技术基础设施仍然相对落后,影响该行业的可持续和长期增长。自20世纪90年代以来,廉价和丰富的劳动力一直是TGI的主要支柱。但劳动力和资源的价格越来越高,日
随着全球经济与科技的迅猛发展,寒区水利、水上交通、冰雪娱乐等对人民生产生活产生了极大的影响。我国北方地区江河湖泊和部分海域普遍存在冰冻现象,冰层的存在削弱了大气与水之间的物质和能量交换,对局部微气候和冰下水生态环境具有一定的影响,同时影响寒区水利与交通工程及冰雪娱乐活动的安全,情况严重时,会造成不同程度的冰灾害,对人类的生命财产安全产生威胁。因此,开展冰特征研究对冰环境和冰工程都具有重要意义。冰的
随着柘城县经济社会的发展,地下水开采量相继增加,而地下水过度开采造成某些区域地下水长期处于超采状态,导致地下水水位逐年下降,形成大面积降落漏斗,同时地下水超采也造成了柘城县地下水水质恶化、苦咸水层下移、河流断流等一系列环境地质问题。在查明地质和水文地质条件的基础上,建立研究区水文地质概念模型和相应的数学模型,采用数值模拟法,进行地下水资源评价,为柘城县地下水资源可持续利用和科学管理提供依据,具有重
有机-无机杂化类二维钙钛矿材料因其高载流子迁移率、高荧光量子产率、较高的激子结合能、带隙可调、制备工艺简单等优异的性能引起了人们的广泛关注。此外,有机层与无机层交
针对作为初晶硅形核基底的AlP颗粒尺寸不易控制的问题,本文以Cu-P中间合金为研究对象,采用ZEISS Axio Vert.A1光学金相显微镜、扫描电子显微镜(Scaning electron microscope,SEM)、D/MAX-2500型X射线衍射分析仪等手段,对静态溶解时由水淬得到的凝固组织进行分析,系统研究了Cu-P合金在铝熔体内的溶解过程。研究发现固态Cu-P合金向铝熔体的溶解过程
我国于1998年在医疗保障体系中首先建立了城镇职工基本医疗保险(以后简写为职工医保),重庆市于2001年建立职工医保,截至2017年年底参保职工总计640.28万人,其中在职455.34万人,退休职工184.94万人。医保基金的收支平衡关系着医疗保障体系的稳定,是医疗保险制度得以稳健运行的经济基础。我国经济已步入新常态,在医保基金收入方面,随着全民医保时代的到来,基本医疗保险参保率维持在95%以上
伴随着时代的发展和社会的进步,全球经济不断融合扩张,消费者经济生活水平的提高,导致需求急剧增长,而信息科学技术的升级带来了电子商务的突飞猛进,网购的成交量、交易商品的种类和范围都在迅猛增长,对快递业的发展及快递配送提出了更高的要求。其中城市快递配送要求逐步出现了高频次、准确时效性高、个性化服务、小批量等特点。在网购飞速发展的环境下,各类快递共同配送联盟应紧抓时代脉搏,适时提高自身发展目标,努力做到