面向云存储的分布式文件系统关键技术研究

被引量 : 0次 | 上传用户:jukai9751
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
云计算是当前研究与应用的热点问题。云存储作为云计算的底层服务,对上层服务提供重要的支持;同时,云存储可以有效的存储和管理海量数据,所以更是成为专家学者们关注的焦点。云存储是一种架构复杂的分布式文件系统,一是其建立在云计算系统的基础设施之上,这样的基础实施是基于廉价的或虚拟化了的不可信物理硬件;二是其必须支持超大节点规模和海量数据的高效存储,这对于系统架构和模块设计的关键技术提出了巨大的挑战。本文首先研究了面向云存储的分布式文件系统中关键的架构技术。基于主从式结构的分布式文件系统,提出了通过元数据服务器的多个代理机来构建对等式的元数据服务层的通用云存储架构方案,分析与评估表明其具有较高的可用性和可靠性。针对文件系统中元数据和文件数据存储和访问的不同特点,面向云存储的分布式文件系统架构主要分为元数据服务层和块数据服务层。本文随后研究了这两层的关键技术。对于前者,主要研究了基于所提架构中的元数据复制技术。Paxos是众多云存储系统中采用的数据一致性算法。本文通过工程实现上节点监控机制的采用和通信协议的优化,改进了基本的paxos算法,并用其较好的解决了该架构下的元数据复制问题。实验证明了优化后的算法由于减少了数据提交过程中的消息数和网络带宽的使用,性能得到了一定的提升。对于后者,主要研究了其高效的存储技术。在指出目前云存储系统中固定文件分块策略的弊端后,本文提出了一种动态的大小可变的文件分块存储算法,分析和仿真表明,该算法能有效提高系统并行处理能力和平衡热点文件引起的节点负载,同时没有大量文件碎片的产生,具有较高的实用性。
其他文献
中国每年要宰杀数亿头生猪,会产生大量的猪血,这些猪血一部分被加工成食品而得到利用,其余大部分则当成废品处理掉。
<正> 一代名中医的宝贵经验,不仅可见其医著医案,还散在于他们带教时的言谈之中。笔者在1983年全国中医内科师资班进修期间,邓老介绍了他从事中医的部分经验体会。言简意赅,
期刊
两轮自平衡小车是一个典型的复杂系统,但其本身又不是非常复杂。其动力学系统具有多变量、非线性、强耦合、参数不确定等特性,其运动环境、控制任务复杂,在完成平衡控制的同
本文旨在揭示这样一个现象:"大都无城(庞大的都邑外围一般不设防)"是二里头时代至汉代中国古代都城的主流形态。而城、郭兼备的都城形态,与里坊制、纵贯城市的大中轴线大体同
目的:观察针药结合治疗眼肌型重症肌无力的疗效。方法:对100例眼肌型重症肌无力患者以针刺阳白透鱼腰,太阳,夹阳白分别透攒竹、丝竹空;艾灸局部及百会;T9~T12段华佗夹脊穴位注
<正>教学《孔雀东南飞(并序)》时学生问:本文歌颂刘兰芝、焦仲卿双双殉情的反抗精神,可是他们非死不可吗?焦仲卿如果不说"吾独向黄泉"这样决绝的话,刘兰芝也就不约"黄泉下相
利用ANSYS建立齿形滑环式组合密封的二维轴对称模型,分析压缩量、介质压力及齿形滑环结构对组合密封的接触应力、变形、Von M ises应力及剪应力的影响。结果表明:随着压缩量
<正>案情简介案例1:甲于劳动合同期内向A公司提出辞职,公司表示同意,但要求甲按规定继续工作30天。一星期后,甲表示不辞职了,A公司拒绝接受甲撤销辞职。双方为甲能否撤销辞职
采用间隙挤出实验和磨损实验,研究了几种高压转轴密封材料的抗间隙挤出性能和抗磨损性能。结果表明:PTFE复合材料的抗间隙挤出和抗变形性能较差,而聚酮和聚氨酯材料的较好;聚
为了解决高速高压的旋转轴用密封问题,使普通液压油不泄漏到安装的轴承上,使轴承在工作中正常润滑,保持正常使用寿命,利用弹性体弹性变形原理,选取适当弹性压缩率,参考多种密