一种提高虚拟化Hadoop系统数据本地性的资源调度方法

来源 :计算机研究与发展 | 被引量 : 0次 | 上传用户:huzhaohua1
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在Hadoop系统中,大规模数据分析应用程序的数据本地性是影响其性能的关键因素.传统的Hadoop系统是部署在物理机中的,目前针对传统Hadoop系统提高数据本地性的资源调度方法在虚拟化的Hadoop系统中效果不佳.这是因为在虚拟化的Hadoop中,数据的分布被分为2个层次:虚拟机和物理机.采用将计算节点和存储节点分别部署在不同虚拟机中的方式部署虚拟化Hadoop系统,并提出了一种提高数据本地性的资源调度方法.首先,在任务提交阶段,调节作为计算节点的虚拟机的计算能力,使其能够运行数据本地性较高的任务;其次
其他文献
目的了解青藏高原牦牛携带屎肠球菌(Enterococcus faecium)情况,以及耐药性和毒力基因。方法使用链球菌培养基分离细菌;使用生化反应和16srDNA序列分析方法鉴定;采用PCR方法检
在移动端金融产品APP开发应用中,UI组件的设计关乎产品使用和用户体验,如何合理设计UI组件,提高金融产品APP的用户舒适度,是开发者需要关注的设计重点。文章介绍了"原子设计"
鼠疫是由鼠疫耶尔森菌引起的人兽共患的烈性传染病,鼠疫生态地理景观是形成自然疫源地的重要因素。疫源地地理景观类型多样,结构复杂,探讨地理景观特征与鼠疫的关系及其相关
该产品由脸盆龙头和给皂器组合而成,带有可随时间变化颜色的LED发光灯、红外线感应装置以及中控电子系统,具有健康提示作用。洗手时,手触及给皂器红外线感应区域,给皂器感应
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield