面向客服的自动问答系统关键技术研究

被引量 : 3次 | 上传用户:haozhizhegogo
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
自动问答系统是自然语言处理领域的一个重要研究方向,旨在让用户用自然语言进行提问并获得答案。基于常问问题集的问答系统,将用户的常问问题和与之相应的答案组织起来,所给定的答案更加准确、高效。一直以来,如何获取高质量的海量常问问题集数据是该类系统的发展瓶颈,而目前互联网中存在着数以千计的人工客服,每天产生数以十万计的人工客服数据,为基于常问问题集的问答系统提供了新的发展机遇。本文以某游戏交易平台的23万人工问答语料为数据基础,以该平台在线自动客服系统为应用背景,主要做了以下几方面工作:首先,本文设计了一套完整的基于常问问题集的问答原型系统。在本文所设计的系统的框架内,综合运用中文分词、命名实体识别、中文词性标注、句法分析、关键词提取、信息检索、相似度计算法等相关技术与算法,为在海量数据上实现基于常问问题集的问答系统提供了一套完整的解决方案。然后,本文重点对基于常问问题集问答系统中的核心模块——问句相似度计算模块进行了详尽的研究与分析。通过对几种传统相似度计算方法的比较,结合本文的实际应用背景,总结出运用传统相似度计算方法解决本文所处理问题时的缺陷与不足。在研究与分析的基础上,本文从权重调整、同义词扩展、词汇对齐、依存句法分析等几个角度提出了详细的改进方案,并引入线性模型,使用Pranking算法对本文所研究的多种相似度计算方法进行特征融合,进一步提升系统性能。最后,本文通过实验,对前文的理论分析的正确性和本文提出的改进算法的有效性进行验证。对于效果较差的相似度计算方法,本文进行了进一步的错误分析,提出了进一步的改进方案。本文提出了一套完整的基于常问问题集的系统框架,并对问句相似度部分做了重点研究,得到了一些成果,但也存在一定的问题,如:在同义词扩展的过程中,存在大量的一词多义现象,给相似度计算带来了新的噪声,应进一步进行词义消歧工作;使用依存句法分析技术会大大降低系统的响应时间等。
其他文献
采用广播的方式进行信息的传递是无线移动通信的一个非常重要的特性。在无线通信系统中,任何的通信参与者都相互独立地接收来自信源的信号,它们之间的相互合作使信息的传输变
目的探讨脑室引流患者的处理措施。方法 30例脑室引流患者,均为2008年7月~2009年6月住院的病人,其中男19例,女11例,年龄在40~72岁,引流时间为3~7d。通过穿刺放出脑脊液以抢救脑
银行是中国最资深的金融机构,但市场的逐渐开放(如利率市场化)让银行不仅面临着金融机构之间、银行同业之间的业务竞争,还遭遇新兴金融领域(比如互联网金融)的强大冲击,同时
目的探讨肿瘤坏死因子(TNF-α)在系统性红斑狼疮(SLE)中的变化及其与感染发生的关系。方法收集22例非感染组SLE、20例合并肺部感染SLE病例及20例正常对照组血清,用试剂盒检测
多物理耦合分析自动建模软件SuperMC/MCAM能够在工程CAD模型/影像与多种辐射输运计算模型之间进行快速自动双向转换。但因辐射输运计算模型不支持样条曲面,SuperMC/MCAM不能处
目的查找不同年龄组视疲劳的原因以求恰当的防治办法。方法将362例病人分成4个年龄组,运用眼科常见检查法来详细探察比较。结果视疲劳的原因多样,不同年龄组其构成原因不同,
近年来,福建省对未成年人的违法矫治工作取得了不菲的成绩。但在实践与发展过程中,也存在着不少亟待解决的问题。十八届三中全会召开以来,中共中央提出了依法治国的重要执政
<正> 如果说前几年中学英语教学主要是为了升学,那么,随着我国教育和建设事业的发展,现在的英语教学已不仅仅是为这一目的了。它本身固有的实用性和交际作用已愈加明显。因此
无机功能薄膜材料在微电子设备、化学和生物传感、能量转化及储存等方面具有重要的应用。晶体粒子的成核及生长过程显著影响无机薄膜的微结构,比如比表面积、孔隙、粒子取向
蒙特卡罗方法因其模拟精确性高、几何适用性强等优势在粒子输运计算研究中被广泛应用,但收敛速度慢是蒙特卡罗方法用于反应堆模拟时的重要瓶颈,减方差方法正是解决蒙特卡罗计