自然语言处理平台化软件的设计与实现

被引量 : 0次 | 上传用户:tianzhizui
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
搜索引擎、人工智能已经深入到人们生活的方方面面,而自然语言处理又是搜索引擎和人工智能的核心步骤。但是,目前在使用自然语言算法处理的过程中存在诸多的问题,主要表现为使用自然语言处理的算法比较复杂,同时相关算法的调用通常只能通过本地静态链接加载模式,导致系统对自然语言处理效率低下。为此,本文结合企业实际研发项目,提出了一种自然语言平台化的方案来有效解决上述的问题。论文的主要工作包括以下几方面内容:首先,设计了四种不同计算架构用于支持不同场景下自然语言处理的计算服务。四种计算架构分别是:普通流式计算架构,适合普通的较稳定快速的架构服务:在线计算架构,适合对于延迟有极高要求的在线服务;大规模离线架构,适合吞吐量极大离线计算服务;本地计算架构,适合占用资源少但访问量比较高的算法。其次,设计了统一的自然语言处理服务调用接口。该接口封装了四种架构的服务调用,屏蔽了四种架构的访问的差异性,为用户提供了简单高效的自然语言处理服务:该接口为用户提供了C++和pychon语言编程以及HTTP调用两种访问模式。最后,利用zookeeper、inotify和RPC等技术,完成了自然语言处理平台化软件的开发。系统实际运行表明,系统各项功能符合设计要求,并在负载均衡、故障恢复、流量控制和统计等方面性能优越,取得了良好的应用效果。
其他文献
澳大利亚最大的葡萄酒包装供应商Portavin称,随着澳大利亚葡萄酒对中国市场出口激增,以软木塞封瓶的澳洲葡萄酒出现上升。
居住区园林景观设计在居住区规划设计中占有重要地位。介绍居住区园林景观的内容及其设计原则,分析当今居住区园林景观设计的现状及存在的问题,可以预测居住区园林景观设计的
目的:探讨"治未病"思想对防治脾胃病变的指导意义。方法:归纳有关文献资料,结合当代研究成果对治未病"思想防治脾胃病变进行探讨。结论:防治脾胃病变是一个复杂的系统工程,是
运用主成分分析、多变量解析和单因子方差分析方法对青岛、舟山以及日本爱知、香川4个群体的青鳞小沙丁鱼Sardinella zunasi(125尾)5个分节特征和15个量度特征进行了比较分析
<正> 中国共有五十六个民族,汉族是中华民族大家庭中文化较悠久、人数最多的一支。五十六个民族中,有的有文字,有的没有文字,没有文字的占多数。人们习惯上称"中国书法",严格
目的:确定桂枝解热作用与化学组分桂皮醛、桂皮酸的相关性,探索桂枝活性作用的物质基础。方法:采用高效液相色谱法建立桂枝色谱分析条件并测定特征性成分含量;以大鼠解热试验
目的通过检测吉西他滨联合顺铂方案化疗敏感及耐药的晚期非小细胞肺癌患者治疗前血清蛋白质谱的差异,寻找可能的化疗耐药血清预测因子。方法收集非小细胞肺癌(non-small cell
目的探讨血必净注射液对严重创伤患者外周血T淋巴细胞亚群变化的影响及其临床意义。方法将33例严重创伤患者随机分为对照组(16例)和血必净治疗组(17例)。对照组患者给予常规
目的观察乙型肝炎疫苗接种后9年效果。方法对9年前经随机、双盲、有安慰剂对照严格设计的,曾完成疫苗全程接种的疫苗组126名、安慰剂组135名5~9岁儿童进行随访并采血,询问发病情况,检测乙型
2 0世纪 ,科学技术的进步创造了巨大的物质财富 ,但同时也带来了越来越多的社会问题 ,人类面临生存的困境。究其原因 ,主要是人类过多地注重了科学技术的工具理性 ,而忽视了