智能电网大数据在线分析与决策系统研究

来源 :华北电力大学(北京) | 被引量 : 0次 | 上传用户:dfhjaljgjre
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着全球能源互联网的建设以及智能电网建设的快速推进,大量的物联网信息采集设备终端将会接入电网,这些终端将会产生海量的采集数据——智能电网大数据。为应对这些海量数据分析的需求,本文研究了智能电网大数据的流处理和批处理引擎的构建,并在此基础上完成了智能电网大数据在线分析与决策系统的设计。本文在国内外的研究的基础上研究了智能电网大数据的来源和分类,对智能电网大数据分析的主要需求进行了分析。本文对大数据相关的分布式计算理论进行了介绍,其中主要介绍了分布式计算框架MapReduce、分布式文件系统GFS和HDFS、分布式应用程序协调服务Chubby和ZooKeeper、分布式资源管理框架YARN和Mesos的原理和架构,同时也介绍了Map Reduce迭代计算模型、BSP计算模型、SSP计算模型这三种分布式数据分算法基础模型;随后研究了智能电网大数据流处理的任务需求,对流处理的概念进行了介绍,同时研究了智能电网大数据流处理系统的需求特征,着重研究了Strom、Spark Streaming、Samza这三种流处理引擎以及其应用场景,根据其特点和智能电网大数据流处理分析的特性需求本文选择Strom作为构建智能大数据在线分析与决策系统的流处理引擎,并通过基于Storm的VFDT算法在重要电力客户供用电安全实时分析中的应用展示了Strom在电网数据实时分析上的有效性,通过机器的扩展和模拟数据流的增加进行压力测试证明了Strom流处理引擎的在智能电网大数据分析场景中的可扩展性;随后,对智能电网大数据批处理的任务需求进行了研究,提出了利用Spark建设智能电网大数据批处理分析引擎的方案,并通过基于Spark的随机森林算法在海量用电负荷数据分析中的应用验证了该解决方案的有效性、可扩展性;最后,在以上研究的基础上对智能电网大数据在线分析与决策系统进行了详细的需求分析,并设计了系统的整体架构和每个模块的功能,这一设计方案可为后续的软件开发提供直接的参考依据。
其他文献
全基因组关联分析(Genome-Wide Association Studies,GWAS)是通过利用人类基因组中的几百万个SNPs位点上的基因型信息作为遗传标记,对案例-对照数据或者随机人群数据进行分析,筛选出与疾病相关的SNPs的有效方法。人类的复杂疾病主要受基因-基因交互作用(Gene-Gene Interaction,GGI)的影响。目前,全基因组关联分析大多数使用疾病与单个SNP位点相关
光声成像是一种基于光声效应的新型生物医学成像方法,它以短激光脉冲作为激励,以超声波作为信息载体重建组织结构特征。与CT、超声成像、光学相干层析成像、核磁共振等传统的
外商投资企业在我国经济中已占据重要地位,其中工业企业运行情况对我国工业经济具有重要影响。近年来,外资工业企业的总体运行表现不佳,外资工业企业的总资产、销售产值和利
玉米株型研究综述李少昆,赵明,王树安(北京农业大学农学系,北京100094)早在50年代,Stringfiend(1956)和Duncan(1954)发现,提高早熟玉米的产量,尽可能应用直立型玉米,而增加密度是进一步研究的问题。Moss(1964)研...
自人类进入后基因组时代以来,建立简单、灵敏、快速、特异性强、高通量的蛋白质检测方法,已成为分析科学的研究重点之一。蛋白质参与生命体每一步反应和活动,与许多人类疾病
目的:探讨随访工作在社区重点慢性病管理中的应用及其作用探析。方法:随机选取某个社区中126例高血压患者以及58例糖尿病患者作为观察对象,分为高血压组和糖尿病组,在规范随
房地产行业目前已经成为我国的一个重要的支柱行业,而房价一直是房地产行业最为敏感的因素,房价是否合理关系到房地产行业能否健康的发展。房价主要是由供求关系所决定的,因此,要
资产证券化在二十世纪七十年代初出现在美国,最早主要为住房抵押贷款的证券化,继而在全球范围内得到了普遍的认同和迅速发展。在之后的发展过程中,资产证券化品种也从最原始
慢性肾病(CKD)早期即可出现继发性甲状旁腺功能亢进症(SHPT),晚期SHPT表现损伤全身血管、骨骼等各系统,引起肾性骨营养不良、血管和心瓣膜钙化,心血管结构和功能改变,增加心血管
文章从语义层面探讨"VO1要VO2"句式的构成情况、宾语O1和O2的语义关系、宾语O2的语义激活过程、宾语的语义类型、宾语O2的指称功能以及"VO1要VO2"句式的句式义。研究指出,"VO