BDAP——一个基于Spark的数据挖掘工具平台

来源 :中国科学技术大学学报 | 被引量 : 0次 | 上传用户:love43524
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
大数据处理系统是大数据领域的一个热点,为此首先研究大数据分析平台的架构与功能,将大数据分析平台分为数据源、数据吸收层、数据存储层、平台层、安全与监控层、设备层和应用层.平台包含多个数据预处理和算法模块,平台架构为大数据分析了奠定基础.在功能上,该平台功能全面,可以自由组合各种操作,模块之间耦合度低,便于维护和拓展.在用户体验上,调参、建立流程、监控、数据挖掘过程都是可视的,融合工作流和调度流技术.在性能上,该平台相应算法的性能优于Hive和MLlib.最后,举例说明大数据挖掘平台的应用场景.可以对电网线路
其他文献
在教育技术领域,知识可视化指视觉表征形式,与此相对应的是承载知识的图解手段。知识可视化的视觉表征并非孤立的单位,而是符号的系统。根据视觉形式分为表层形式和深层形式,
当前,我国的利率市场化改革在形式上已经完成,汇率市场化改革也在加速推进,国内的宏观经济环境变化明显。过去,学者们关于货币政策传导机制的研究主要集中于信贷渠道和利率渠
<正> 引言 本文献给为中国扬声器工业作出巨大贡献的老一辈电声专家们! 记得大约在十五年前的深圳特区,我第一次听一套组合音响,是TEAC的卡座,杂牌的功放配合一对十寸低音喇
Ceramic capillary membrane has received much attention due to its relatively high pack density and favorable mechanical strength.However,it is difficult to prep
马克思在经济批判中运用了价值介入的研究方法,其是指他在异化劳动理论、剩余价值理论和人类解放理论等研究中,将特定价值目标和价值尺度等德性价值通过反思、评判等方式融入
采用溶胶凝胶法,以纳米TiO2和含氢硅油(PMHS)为原料,通过硬脂酸对纳米TiO2表面进行改性,然后将改性后TiO2与含氢硅油复合,经机械共混、浸渍提拉、热处理等过程,形成超疏水复
随着现代传媒技术的发展和开放教育资源理念的兴起,网络环境下教育资源的开放与共享成为了信息时代的大趋势。针对教育部启动高校视频公开课项目建设规划,探讨分析了大学视频
本文主要综述了重金属镉对水生动物的影响及其机理,以期为进一步研究重金属对水生动物的毒害作用提供参考。
人力资源的整合是企业并购过程中的一个重要环节。通过人力资源管理制度设计的五要素模型,分析各要素在并购过程中的作用表明,把人力资源管理制度应划分为内隐的企业文化和外
<正> 在万能铣床上铣齿轮,一般采用万能分度头,用手摇插孔分度。此分度方法,生产效率低,劳动强度大,质量不易保证。为此,我们根据万能分度头的结构和原理,设计制造了一种自动