基于ES的银行系统智能运维平台的设计与研究

来源 :兰州大学 | 被引量 : 3次 | 上传用户:undeadto
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着社会信息化的建设,银行业务线上化成为主流,电子替代率越来越高,需满足客户需求的银行系统也越来越多。同时随着银行客户、业务和系统的不断扩大,银行系统中已经累积了海量的日志信息,这些日志信息产生速度快、类型丰富多样、且蕴藏着银行各类系统运行的关键信息,对确保银行系统的健壮性和稳定性研究都有极其重要的意义。如何能够有效地对银行系统的日志进行采集、解析、存储和分析管理对银行的发展显得极其重要。日志的分析过程要求快速性和及时性,需要投入大量的时间成本和人力成本来跟进,给银行系统运维工作带来了极大的困扰。经过对某城市商业银行的深入调研,本文从某城市商业银行数千台生产服务器产生的海量日志为研究基础数据,结合银行系统特点和日志提升系统运维能力的需求,设计实现了基于Elasticsearch(简称ES)技术的银行系统智能运维平台。本文的主要工作包括:(1)设计并实现了针对银行系统的数据采集解析平台。从该城市商业银行的业务系统日志数据采集的基础上,增加对中间件,主机,负载均衡器,防火墙,数据库和操作系统层面的日志原始数据采集,经过实时解析和计算完成对原始数据的萃取、清理、转换和整合,将非结构化、半结构化和混合类型数据提炼处理并应用在运维管理中。同时保障了数据的安全性和完整性。(2)研究海量日志的实时收集,分析、搜索和存储等的关键技术,使用功能强大的Elasticsearch技术,实现海量日志实时高效的搜索和存储。同时,这些存储好的海量数据又会被用于系统问题的定位、搜索、分析、干预、解决和预测,进而提升各个系统运维的效率和服务水平。(3)研究使用Kibana技术实现Elasticsearch存储数据的实时监控可视化展示,且通过Kibana可视化页面对Elasticsearch存储数据实现页面高效检索。(4)实现智能化铺助运维。本文使用时间序列预测算法Prophet进行了数据预测异常分析,观察数据的走势,以及判断是否在正常情况下的可接受的范围内,如果超出平时的实际值太多,管理员就应该引起注意,以做好积极应对准备,减少系统异常瘫痪时间,保证系统平稳安全运行。且实现异常及时告警机制,有效提升了运维效率和排障效率。
其他文献
结合本溪市威宁大街地下管廊工程狭长形基坑施工的实际,对其所在土层、周围环境、基坑特点及开挖条件进行分析,通过基坑支护设计、施工方案的比选,决定采用钢管桩加预应力锚
铁氧化物可以提升厌氧发酵产甲烷速率,通过影响厌氧环境内微生物胞外聚合物进而影响甲烷的产生。但对产甲烷过程中胞外聚合物的影响尚未研究透彻。目前诸多学者研究表明微生
我们报道了一种新型非对称熔锥型零耦合器结构的理论模型,采用椭圆近似的方法得到了零耦合器渐变区和束腰区的横截面的变化函数,并在实验中得到了验证.
[目的]本研究的目的在于探究一种高效的通过使用3D打印技术进行个性化踝关节矫形器(AFO)的制作方法和流程,并通过有限元分析方法来进行验证其实用性。并通过有限元方法对于五
介绍了在大学物理实验教学实践及改革过程中,如何改变思路,创建以为学生服务为宗旨的物理实验中心。通过分层次教学实现因材施教,使学生通过对大学物理实验这门课的学习,既能掌握
本文通过作者参与高校资产清查工作的实践,以及多年从事高校固定资产管理工作的一些体会,探讨了对国有资产清查的认识及今后资产管理工作中应重视的一些问题。
该文阐述了对大规模使用计算机设备的单位如何加强对计算机设备的管理与维护,特别是如何保证大规模计算机设备的正常工作。
为提高起重机的安全性及使用效率,减少施工安全事故,研制了起重设备远程在线监控及安全管理系统。通过计算机与互联网技术,收集各施工单位起重设备的运行状态数据。并监控设备运
随着远洋运输的发展,逐渐形成了轴辐式航运网络,这使得干、支线运输网络之间的运输任务分工越来越明确:干线运输网络主要负责运输各个干线港口之间的来往货物;支线运输网络则是负责对干线港口的各种货物进行灵活的集疏运操作。在轴辐式航运网络中,一般是多条支线服务于一条集装箱干线,且支线船的数量常常是干线船舶数量的几倍,集装箱支线运输在船舶合理调度方面具有更大的优化空间,所以各界学者专家对于集装箱支线运输在船舶
上海虹桥国际机场T1航站楼改造工程中新建了大跨度钢结构屋面,且与外立面幕墙和雨篷钢结构为一体化设计,因此,对构件安装空间的关联性要求和对构件加工精度要求都很高。通过