基于Hadoop的海量电能质量数据云计算平台研究

被引量 : 0次 | 上传用户:luoboge
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着科学技术的发展和国民经济的增长,对电能的需求量日益增加,同时电力用户对电能质量的要求也越来越高。为了提高电能质量,电能质量监测数据采集系统的监测数据采样频率需要明显提高,监测范围也将大大扩展,由此涌现出海量的电能质量监测数据。目前电力系统的电能质量的分析计算基于调度中心的集中式计算平台实现,面对大规模电能质量数据,其计算速度慢,任务执行效率低,分析结果存在严重滞后性。基于传统关系型数据库的数据管理难以满足其要求,或需付出高昂的成本代价实现。如何对海量电能质量数据进行可靠快速的处理成为电能质量分析中的重要问题。本文通过对Hadoop计算框架和MapReduce并行编程模型等云计算关键技术进行研究,在现有的电能质量分析计算平台的基础上,结合Hadoop在海量数据存储和处理方面的优势,开展基于Hadoop的海量电能质量数据云计算平台设计和实现工作。在数据存储方面,通过对电能质量监测数据存储和处理特征分析,实现了基于HBase的大规模数据存储平台,具有可扩展性和高可靠性,同时结合面向列存储数据库HBase和关系数据库SQL Server各自的特点,分别存储不同类型的数据,不仅提升了平台性能,而且使平台可以较为方便地整合到现有的电能质量监测系统中,以增强现有系统;在数据处理方面,通过对现有的电能质量分析算法程序重构,实现了基于MapReduce的电能质量分析处理,并对基于MapReduce电能质量分析作业提出了一些配置参数优化方式,增强了分析处理过程并发性,提高了电能质量计算分析效率。此外,针对HDFS存在的单点故障问题,课题设计的平台增加了热备节点,实现了具有高可用性的存储系统。在实验部分,对比现有传统方式电能质量分析处理,计算了不同时间段的电能质量稳态谐波指标,验证了基于Hadoop电能质量分析平台的正确性和优越性。
其他文献
本文立足于全球节能环保潮流、我国节能减排战略和电力供需矛盾形势,从分析借鉴国内外电力需求侧管理及其在办公楼宇用电节能方面的理论经验、政策法规、技术方法入手,运用我国
本文以加强生态保护与可持续发展为指导,构建了以生态承载力、生态绿当量和生态支持能力为目标的多目标规划模型,并建立灰色关联度判断矩阵对用地结构优化方案进行投影,探讨
<正>社群经济也是部落经济,基于长尾用户的个性、自我、偏好等形成不同的群落,通过社交和网络服务的方式,建立用户体验。互联网技术的发展改变着人与人的连接方式,也因此,社
随着职业教育改革的普及和深入,越来越多的学生进入高职院校学习.英语是高职院校的必修课程,是当今社会衡量学生综合素质的重要内容,已经成为学生求职就业的基本需求.通过研
农业是国民经济的基础,农业的快速发展离不开金融支持。但在现阶段,农业相关的信贷抵押物缺失或集体土地及房屋不能抵押登记造成无法满足银行对抵押品要求,同时,由于农业贷款
中医中酒精性肝病属于“酒风”、“酒疸”、“酒癖”、“酒臌”、“伤酒”、“胁痛”等范畴。《圣济总录·黄疸门》谓:“大率多因酒食过度,水谷相并,积于脾胃,复为风湿所搏,热
农业是国民经济的基础,而农业企业是农业经济发展的重要组成部分。农业企业在发展的过程中,面临着各种各样的成长烦恼,特别是人力资源问题。人力资源作为企业发展的珍贵资源,
物联网概念的提出与应用的兴起,为信息产业带来了新一轮的发展热潮。物联网通过智能地感知识别与控制,使人与人、人与物、物与物之间相互关联起来以实现信息的共享。随着物联网
近年来对国际贸易问题研究的一个重点集中在出口增长方面,出口增长通常会带动一国经济的增长,对出口增长途径及其影响因素的研究有利于改善出口结构,保持出口稳定的增长。最近出
采用ANSYS有限元分析软件,对金刚石圆锯片进行了屈曲分析,讨论了锯切转速、锯片厚度、锯片直径以及锯片结构对临界载荷的影响规律,为薄圆锯片的结构设计和锯切参数优化提供了参