基于组态组件的铁道电力监控信息HBase云存储研究

来源 :华东交通大学 | 被引量 : 0次 | 上传用户:gankai0319
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目前,随着电网规模的逐渐扩大和走向智能化,各种智能电表、传感器、物联网系统等智能设备将应用于电力监控系统中,电力监测的数据量极大且以几何形式大规模增长,达到TB甚至PB量级。仅以录波数据为例,针对目前的主流故障录波器的结构和所采用的录波技术,则故障录波瞬时数据采集量为2.008MB/s,每7日采集的数据量为1185.978G,每一年采集的数据量就为432.882TB。作为保障电力系统正常运行的重要支撑,电力大数据存储的安全性和处理的高效性显的至关重要。现有的供电监控系统采用磁盘阵列作为硬件设备进行数据的存储,采用关系型数据库系统进行数据库管理,采用套装软件应用于紧密耦合类业务,致使数据库管理系统的扩展性差、存储能力有限及分析速度慢,难以适应供电监控系统对状态监测数据可靠性和实时性的更高的要求。学术界在电力SCADA领域引入云计算,将云计算技术应用于铁路供电监控大数据的存储管理,研究供电监控大数据的应对方案。Hadoop云计算的分布式文件系统支持负载均衡策略,具有可伸缩性,从而增强了整个供电监控系统的业务承载能力。使用架构在Hadoop云计算平台上的HBase数据库存储系统对监控大数据进行管理,采用并行处理、分布式运算的方式,可以实现强大的海量数据存储和计算功能,具有高容错和高可靠性,突破了大数据传统存储方式下分析计算存在的瓶颈和容灾问题,为供电监控系统海量数据安全、高效的存储和管理提供了一种新的解决思路。针对铁路供电监控系统关系型数据库存储的特点,结合Hadoop集群和HBase存储技术以及实际软硬件实力,本文实现了一种基于HBase数据库的铁路供电监控系统海量数据的存储方式。首先,利用力控(Force Control)组态软件开发10k V供电网监控系统,实现对设备运行情况的实时监督与控制;然后,将监控系统采集的数据经一次转存至My SQL关系型数据库中;最后,通过Sqoop技术将转存后的My SQL数据库进行二次转存,存储至HBase的No SQL数据库中,进行监控数据的云存储研究。实验表明:可以进行铁道供电监控系统的HBase云存储,实现了数据从关系型数据库转存至非关系型数据库,在数据存储方面比传统的关系型数据库存储方式有更多的优势,并且数据量越大,存储效率更高且读取速度更快,HBase的优势越能体现出来。研究结果对铁路供电监控系统大数据的处理具有重要的理论和实践价值。
其他文献
自上世纪90年代以来,江苏省高速公路建设发展迅速。目前,省内高速公路的规划路网基本建成,高速公路的建设管理也从快速建设期进入了养护维修期。国外实践证明:路面管理系统是维持
光偏振旋转角测量在科学研究、工业和医疗中有广泛的用途,在生物和化学领域以及新兴的生命科学领域中也是重要的测量手段。微量流体物质的旋光检测是微流控光学技术的重要研究
生物学家说:趋福避祸、趋利避害是人的本能.rn这个冬天,在这场突如其来的疫情中,你却不顾个人安危,趋险、趋祸、趋害,向险而行,用行动为我们重新定义了“人”——大写的人.rn
期刊
选区激光烧结技术是20世纪80年代在制造领域出现的具有划时代意义的新技术。选区烧结技术具备柔性制造、自动化程度高、生产周期短、产品个性化的特点。以上优点使得该技术受
学位
2018年8月来的非洲猪瘟疫情给行业带来了沉重的打击,但是坚强的养猪人没有认输,咬着牙含着泪开始了与病毒的短兵相接、殊死搏斗.一批批的养猪人迎难而上,开启了复养的尝试,然
期刊
随着国家对我国房地产市场的宏观调控力度不断加强,推出了限购、限价、限售等相关政策,使得房企市场发展受到限制,再加上房企自身特殊性,资金回收周期较长,会增加房企经营管
在建筑、国防和工业等领域,需要对结构体进行健康监测,以避免安全事故的发生,保障工作人员的生命财产安全。由于结构体(比如大型建筑物、飞行器、舰船等)体积庞大,关键目标部位数
如何有效改善当前水利工程建设管理问题是二十一新世纪以来我国水利行业关注的一个重要问题,需要有关部门及个人引起高度重视.本文主要介绍了当前水利工程建设管理存在的主要
在信息化社会日益发展的今天,随着人们对网络系统传输容量和传输速度的要求不断提高,目前光网络传输中已经大量采用DWDM(密集波分复用)系统,而DWDM技术的成熟和不断发展离不开光器
光纤光栅以其体积小、重量轻、结构简单、抗电磁干扰等特点,广泛应用于光纤通信系统和光纤传感领域。物联网时代的到来,光纤光栅作为传感基元广泛地分布在各个地方,探测周围的环