基于Hive的电力设备状态信息数据仓库

来源 :电力系统保护与控制 | 被引量 : 0次 | 上传用户:caonimalegebicaonima
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着智能变电站的建设及其状态监测系统的发展,电力设备状态信息数据规模逐渐增大。针对现有电力数据仓库在海量状态数据存储查询和分析处理方面的不足,提出基于Hive的电力设备状态信息数据仓库及其多维数据快速查询与分析方法。通过对状态监测系统与生产管理系统(PMS)的分析,将电力设备静态信息与状态监测信息存储到Hive数据仓库中。设计了基于Hive的电力设备状态信息数据仓库的系统架构和海量状态数据存储结构,采用Hadoop分布式文件系统(HDFS)对数据进行分布式存储管理,Map Reduce作为海量数据查询分析的计算模式,HiveQL查询语言作为数据仓库的控制工具,并给出了数据仓库的工作过程。建立一个基于Hive的电力设备状态信息数据仓库实验平台,分别利用5个节点和10个节点的Hadoop集群进行测试,结果表明上述方法具有较好的扩展性,能满足大规模多维电力设备状态数据存储查询的需要。
其他文献
新疆德隆天一实业公司是2001年6月新组建的一个企业。公司组建后面临着产品质量水平不高、设备状态较差、工艺落后、物流混乱、管理混乱和没有一个完善的企业经营发展战略等
中药成分的复杂多样决定了中药质量控制模式必须采用多成分定量和多指标质量控制,但中药化学对照品性质不稳定、货源严重紧缺和检测成本昂贵等,严重阻碍了这一模式的发展,成
ITS(internal transcribed spacer)序列分析已成为近年来国际上植物多样性研究的热点,并在药用植物种质资源研究中得到广泛的应用。但由于相关研究成果众多,一定程度上也阻碍
为了实现电动汽车充电站监控系统的标准化管理,应用IEC61850建模技术和UML建模方法,在分析交流充电桩的监控功能及信息量基础上,在间隔层通信管理机中建立交流充电桩的逻辑设
胜任特征是指“能将某一工作(或组织、文化)中有卓越成就者与表现平平者区分开来的个人的深层次特征,它可以是动机、特质、自我形象、态度或价值观、某领域知识、认知或行为技
列宁指出:“城市是经济、政治和人民精神生活的中心,是前进的主要动力。”从哲学发展的观点看,城市化是人类文明发展的必然趋势。改革开放以来,我国城市化进程得到了迅速发展,城市
在当前各类扒窃案件中,以苹果手机为犯罪对象的扒窃案件发案率很高,严重危害了公民的财产安全和社会治安秩序。借用犯罪学日常活动理论可以从犯罪嫌疑人、被侵害物品、受侵害
树脂传递模塑Resin transfer molding(RTM)是近年来飞速发展的一种低成本高效率的复合材料成型技术,目前已被广泛应用于航空、汽车等工业中。但是RTM是一种比较难增韧改性的工
CAPP系统(Computer Aided Process Planning)在现代制造系统中扮演着重要角色,智能化是CAPP系统发展的主要趋势之一。本文对智能CAPP系统中的工艺决策方法和信息模型等关键技
可转换公司债券,作为一种新型的金融衍生产品,在20世纪90年代进入我国资本市场,由于其特有的投资和投机价值,越来越得到政府、企业及投资者的认同。可转换债券在开拓我国企业融资