基于MapReduce框架的电力大数据增量式属性约简方法可行性分析

来源 :电子设计工程 | 被引量 : 0次 | 上传用户:parabird
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
对于大数据时代中电网数据量大、速度快、类型多的特点,传统属性约简方法已经无法满足大数据预处理需求,以此提出基于MapReduce框架的电力大数据属性约简方法。利用某光伏发电系统对属性约简的求和算法进行分析,以传统算法改进属性约简算法,从而有效解决大数据环境下计算过程中的效率问题。改进的大数据属性约简算法是以实际需求开展,对复杂任务进行有效处理,结合实际需求解决问题,最后对方法进行实验分析。通过实验结果表示,文中分析算法具有良好的处理能力与可行性,并且能够提高属性约简效率。
其他文献
传统输电线路巡检航线自动规划方法规划的线路花费巡检时间较长,巡检路径难以达到最短,且不能优先经过风险系数较高的杆塔,针对上述问题,引用激光雷达点云数据设计了一种新的
针对宫颈细胞进行取样和识别,并结合图像算法等相关技术,设计一种有效的宫颈细胞取样检测系统,利用智能机械运动设备、精密流体控制泵、深度学习等设计并搭建了一个自动化操作平台,通过RS485与基于C#语言编写的上位机系统建立串口通信,来完成对宫颈细胞的进样采集等一系列实验操作,并对采集到的宫颈细胞图像使用YOLOv3算法识别检测。实验结果证明了该系统的可行性与实用价值。
针对电力工程建设数据规模日益庞大,而现有数据处理方法无法满足需要的问题,文中基于B/S结构从客户端、服务器端和数据采集端3部分构建了基于深度学习与聚类算法的电力工程建
目前的穴位探测仪大多依据低电阻原理,准确率不高。针对这一现状,提出了一种基于低惯性面积原理的新型穴位探测仪的电路设计。设计中采用经过自行研制的点阵电极作为测量探头
针对医疗财务系统中数据规模庞大,而传统的数据检测手段难以发现其中细微异常数据的问题,设计了一套智能化的异常数据检测系统。该系统通过对异常数据的模式分析,并基于差异
针对三维阻变存储器的材料特性和器件结构,采用了一种基于CMOS 40 nm工艺的自适应读写电路,该电路具有高可靠性、低功耗以及反馈自适应的技术特点。通过多层译码结构、写入验
传统的多目标不确定度计量系统计量时间较长,计量过程稳健性较差。为了解决上述问题,设计了基于双侧公差限的多目标不确定度计量系统。系统硬件设计了模拟信号发生器、数据采
为了提升滚动轴承的识别效率,保障机械设备的正常安全运行,文中提出了一种基于鲸鱼优化算法与多核学习的支持向量机相结合的故障诊断方法。在研究过程中,由于滚动轴承信号的
1月25—26日,全国水利工作会议在北京召开。李克强总理作出重要批示。水利部党组书记、部长鄂竟平出席会议并讲话。他强调,要坚持以习近平新时代中国特色社会主义思想为指导,
随着工业技术的发展和单片机技术的大幅提升,纸张装袋靠简单的人工计算数量的时代已经成为过去,但是测试装置的精度暂时还达不到很高程度,文中设计以STM32F103ZET6为控制核心