基于Hadoop的智能电表云服务系统设计与研发

来源 :广东工业大学 | 被引量 : 1次 | 上传用户:wusic
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
进入21世纪后,智能电网一向是电力行业研究和应用的热门,受到了中国以及其他国家的高度重视和大力推广。智能电表是智能电网建设的重要环节,在智能电表大力推广和不断发展过程中,电力部门和相关企业积累了大量的电力数据,这些数据不光具有海量、高频、异构、分散等特点,并且数据之间存在关联性和相似性。传统电力系统的数据采集、存储及处理能力已远不能满足需求,面对超大规模的智能电表数据生成量,能够正确并且实时地对电力数据进行采集、存储和应用成为电力系统建设一直寻求的目标。随着通信技术和云计算的快速发展,人们对多样化、便捷化、个性化的用电缴费管理服务需求不断增加,智能电表云服务已成为一个迫切的发展趋势。本文从智能电表云服务的国内外研究现状出发,结合电力企业现实工作中遇到的一些问题和需求,给出了新的思路和解决方法,提出了“基于Hadoop的智能电表云服务系统”的设计目标和原则,主要为了解决传统电力系统中存在的电量数据采集实时性和可靠性差,海量异构电量数据存储和处理难,以及用电服务单一、不透明等问题。首先详细介绍和总结了智能电表云服务的国内外研究情况,着重分析了现有技术在数据采集、存储和应用方面所面临的问题;对云计算技术尤其是Hadoop平台的研究现状进行了总结和分析。根据系统的功能和性能需求,设计了基于Hadoop的智能电表云服务系统的整体架构,明确了设计难点和关键支撑技术。其次,在本文构建的并行数据采集和分布式存储计算方案的基础上,对云服务系统的数据采集层、数据存储层和系统应用层进行了详细的分析和设计,利用WIFI高速率、远程通讯的特性以及双机备通讯服务器实现了电表数据的主动上报,完成了基于传统数据库与Hadoop集群相协作的大数据存储和基于分布式编程模型Map Reduce的大数据分析计算功能,实现了云服务系统基本的用电缴费管理服务。最后本文详细介绍了Hadoop、HBase分布式集群的安装及配置方法,通过实验对比分析,证明使用Hadoop平台存储和处理海量数据,可以取得优于传统方法的效果,具有高效的数据存储和访问的能力;设计分布式Map Reduce程序处理海量日志文件,可以很轻松实现海量数据的并行处理;此外通过整合系统各个模块,对云服务各功能进行了相关测试,验证了方案的可行性和高效性。
其他文献
涑水河是黄河的一级支流,孕育了中华早期文明。通过大量详尽的历史资料记载,对明清涑水河的水文特征进行复原刻画。结果表明:涑水河上宽下窄,上陡下缓,洪水集中;姚暹渠系人工
慢性肾功能衰竭是由于各种慢性肾脏疾病晚期肾功能减退引起的综合征。赵老师阐明其病理性质为正虚邪实;病位以脾肾为主,常累及它脏。提出临证贵在把握疾病不同阶段的病机特点,明
目的:脂肪肝(Fatty liver disease,FLD)发病率日渐升高,对多种重大疾病影响颇深,因此,开展FLD的中医药治疗是我们努力的方向之一。本研究者观察脂肝方对FLD脾虚痰湿型患者的
角度测量是技术测量中的一个组成部分,每个零部件的加工、装配和安装都会遇到各种角度测量问题。随着生产和科学技术的发展,对产品和零部件角度测量应用越来越广泛,对精度要
本文采用纸张作为超滤复合膜的基膜,并选用合适的成膜材料,采用表面涂覆工艺制备纸质超滤复合膜。实验研究了不同打浆度纸张的最大孔径,孔隙率,纯水通过量和对牛血清蛋白的截
在全面贯彻落实科学发展观,建设社会主义和谐社会的时代背景下,依法管理宗教事务需要不断地发展和完善,以适应宗教和谐、社会和谐的要求。经过几十年的努力,我国宗教事务管理
人类对物体识别存在着整体布局加上与特征侦察(或称局部特征识别)两种加工方式,对不同种类物体识别时的加工方式是否一样,何种因素对物体识别加工方式选择起着决定性作用等问
中国现代企业的管理理论在改革开放不断深化的进程中不断进化,从全盘接受西方管理科学,到如今结合中国文化及中国管理思想的精华,形成了企业文化管理中国化这一必然趋势,中国
<正>华北地块南缘罗圈组被多数学者认为是冰碛成因或冰水混成成因的杂砾岩地层,并认为可与分布于华北地块边缘及其周边的小型或微地块上的其他杂砾岩地层相对比。但因缺乏可
商业银行的数据规模随着传统业务扩展和互联网发展水平的不断提高而与日俱增,使得银行对数据的存储、管理和应用要求越来越高。通过搭建基于Hadoop技术的大数据平台,利用分布