基于Spark架构的机器学习平台设计与研究

来源 :信息技术与信息化 | 被引量 : 0次 | 上传用户:chenzhong1983
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网信息技术的大规模应用,挖掘海量实时数据蕴含的价值受到越来越多地关注和研究。本文构建基于Spark的机器学习平台,该平台集成经过并行优化改进的经典机器学习算法,满足在不同场景下的机器学习需求。最后通过在单机环境、Hadoop环境和本文平台三个环境下进行实验对比,说明本文构建的混合架构机器学习平台性能有很大的提升。
其他文献
为解决冰厚测量过程中存在的耗时、耗力和自动化等问题,本文设计了一种基于GPRS技术的冰层厚度自动测量仪。系统使用传统电钻为基础,通过添加一个单片机为核心的后端控制模块
临床交接班管理是医疗安全管理的重要内容之一,为了优化交接班管理制度、提高医疗质量、保障患者安全,我院建设了医护交接班管理系统。通过与医院信息系统(HIS)、医技系统对
航空科技工业是我国经济的重要支柱,其在民用化发展中向其他产业领域形成技术外溢对于促进相关产业的发展、取得较为明显的民用化效果有着积极的意义。由于技术外溢的程度受到
为研究无背索曲塔曲梁斜拉桥施工中各参数变化的影响,对桥梁施工过程进行预控和参数误差识别,确保成桥时主梁和主塔位移、应力及拉索索力达到设计状态。以无背索曲塔曲梁斜拉
食品陈化现象是食品生产中常见的现象,然而由于研究得不够深入以及技术手段的落后,人们对于食品陈化现象还没有整体的认知。基于此,本文简要综述了陈化现象在食品领域的应用
通过基于ITIL的运维管理,企业不仅能实现对IT资源的统一管理,而且能根据用户的需求提供可量化的服务,提高IT资源的利用率,降低运营成本。通过对IT基础架构库的研究,本文提出