数据流计算环境下的集群资源管理技术

来源 :大数据 | 被引量 : 0次 | 上传用户:shuwenglei
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
以集群为基础的高性能计算的发展经历了3个阶段的演化,即计算子系统与存储子系统的分离、计算子系统与存储子系统的融合以及以数据并行为基础的dataflow编程模型。随着Spark、Flink等数据流编程模型在大数据计算领域的广泛使用,计算作业类型千变万化,如何保证各种数据流计算作业对集群资源的共享使用是集群资源管理的核心,也是降低基础设施成本的主要手段。分析集群资源管理的历史变化,从数据流编程模型的角度出发,对HoD、集中式、双层调度、分布式以及混合式管理展开了深入的探索,介绍了其各自的优缺点以及应用现状,为
其他文献
将以PC为基础,使用PCI和USB总线的数据采集卡为硬件,labview软件编写的操作面板等组成的虚拟仪器技术运用于蓝绿激光器的状态监测中,对于保持气室中工作气体XeF2浓度的稳定性,提
目的探讨体外循环术中有效的给药途径,减轻血管活性药物对血管壁的刺激.方法回顾性分析90例单腔中心静脉插管和84例双腔中心静脉插管患者的临床资料,并比较两组患者术中和术
笔者以往较多关注民国时期美国政治学对中国政治学尤其是清华政治学系的影响,并撰文探讨中国近代政治学科的形成与日本明治时期的法政学的关系。来自美日两方面的影响固然还有
根据山东省提出的"双一流"建设工程对高层次创新人才培养的要求,针对专业型硕士培养模式存在的问题进行了分析,并就目前校企联合培养的主要形式及特点进行了总结。就校企联合
对8824运输巷掘进穿层揭煤安全施工措施进行了总结,为矿井揭煤安全施工积累了经验。
为确定潞安集团潞宁煤业24102工作面大跨度切眼的合理支护参数,分析巷道顶板受力情况,建立力学模型,认为巷道顶板挠度与巷道跨度有着直接关系,跨度越大,顶板挠度越大;利用FLA
ue*M#’#dkB4##8#”专利申请号:00109“7公开号:1278062申请日:00.06.23公开日:00.12.27申请人地址:(100084川C京市海淀区清华园申请人:清华大学发明人:隋森芳文摘:本发明属于生物技
随着社会老龄化压力的增大,我国养老保障体系的改革引发了全国各界越来越多的关注,其中一个焦点便是如何有效管控养老金隐性债务规模增大所带来的风险。本文基于开放系统认识
近年来,人民银行省级分支机构通过实施"省级数据中心基础环境‘云’化工程",使得各类网络服务需求快速增长,逐渐暴露出传统的数据中心网络的局限性。软件定义网络(Software D
施米特阐述了传统的敌人概念在欧洲公法上的确立,以及这个概念在以英美为主导的新世界秩序中被破坏的过程。而在当前国际政治秩序中出现的反恐战争里,恐怖主义导致了对战争和