基于Hadoop的访问热点副本迁移技术

来源 :计算机与现代化 | 被引量 : 2次 | 上传用户:jijipanji
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
提出一种云环境下的访问热点负载均衡模型:基于节点的吞吐量与响应时间等主要参考指标,构建节点负载判定模块;文件在HDFS存储的过程中,将文件对应的数据块编号与存储路径相结合,设计存放在数据节点中的数据块到文件目录映射表;提出一种基于节点负载以及节点的存储空间的迁移源节点和目标节点选择方法;基于机架感知的机制,制定一种动态副本迁移方案。最后利用执行器下发指令给相应的数据节点,执行具体的迁移任务以及完善迁移后副本因子等参数信息的调整。通过迅速扩散副本的方式,来增加热点文件的副本数量,使得系统能够对外提供更
其他文献
目的 探讨血管紧张素转化酶(angiotensin converting enzyme,ACE)I/D基因多态性以及血清ACE活性与中国老年人骨丢失的关系. 方法 采用问卷调查方式采集研究对象的人体测量学数
医学术便函[2016]第004号由中华医学会、中华医学会骨质疏松和骨矿盐疾病分会主办的中华医学会第八次中青年骨质疏松和骨矿盐疾病学术会议将于2016年5月26-28日在山东省济南
<正>肿瘤药物的安全性是大家普遍关注的问题。由于人体的特殊性,很多药物进入人体后,效果和在动物模型中相差甚远。在药物进入临床以前,我们都会进行药物的动物实验和临床前
随着网络技术和多媒体技术的发展,网络上教学资源的规模变得十分庞大,如何根据学习者的需要推荐其感兴趣的资源成为近年来研究的热点。然而,目前基于协同过滤的推荐算法较少考虑
现有反k邻域的流数据离群点挖掘算法存在一些不足之处,即需要遍历每个数据对象,计算复杂度较高,稳定性较差。为了解决这些问题,本文提出一种改进的基于反k近邻的离群点检测算
<正> 一、一种不错的栽培方式 近几年来,稷山瓜农摸索出一套西瓜地膜(或微膜)防霜覆盖争早技术。它是用细枝条作成拱形,然后播种覆膜,或用地埂支撑覆膜栽培方式。
针对云计算环境下能源消耗严重以及服务器能耗相对较高的问题,本文基于遗传算法提出一种大数据节能优化模型对任务调度进行优化,从而降低服务器能耗,并设计相关的算法对模型进行
目的 探讨高龄(≥80岁)男性血清Ⅰ型胶原C-末端肽交联(C-terminal telopeptide of type Ⅰ collagen,CTX)的独立相关因素. 方法 对423例高龄男性进行伴随疾病和生活方式的调查,并
目的根据健康汉族男女性血清Ⅰ型原胶原氨基端肽(procollagen type 1 N-terminal propeptide,P1NP)和Ⅰ型胶原羧基端肽交联(βcross-linked C-telopeptide of type 1 collagen,
目的 调查不同地区和级别医院中不同科室临床医生参与骨质疏松管理工作现状,从医生角度了解目前防治骨质疏松的缺口,为学术界和卫生管理部门制定和完善骨质疏松防治策略提供