基于共享日志的文件系统元数据服务性能提升方法研究

来源 :兰州大学 | 被引量 : 0次 | 上传用户:dabing_12130
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网,大数据等应用与技术的快速发展、数据不断的增多。面对海量的数据,传统的数据存储系统在一定程度上有着局限性。而分布式文件系统的高容错,高容量,可扩展性更加适应大数据时代的存储要求,受到广泛的重视。分布式文件系统通常由元数据服务器和存储服务器组成。现有的分布式文件系统有集中式的,分布式的元数据服务,或者采用无元数据服务器的方式对元数据的管理。集中式的设计简单和有很好的一致性,但访问负载过大时,元数据成为了系统的性能瓶颈。并且也有单点故障的问题。分布式能解决了性能瓶颈和单点故障,但为保证数据的一致性,需要进行节点间的加锁同步操作,带来性能的额外开销。另外,如果没有及时同步或同步遭到破坏,就会导致数据一致性问题。无元数据服务器消除了性能瓶颈,单点故障,以及数据一致性等问题。但不能对文件系统的元数据进行全局管理,在执行遍历目录,小文件的读写时效率很低,并且客户端需要承担对文件定位的职能,这也增加了客户端负载。本文通过研究发现共享日志具有很好的数据一致性,并且不存在单一的I/O瓶颈和单点故障问题。所以针对现阶段分布式文件系统元数据服务的问题,本文提出了一种基于共享日志的元数据服务模型。该模型利用共享日志的特性解决了性能瓶颈,数据一致性等问题,以一种更加合理的方式对全局的元数据信息进行管理。通过实验与GlusterFS元数据信息管理进行测试对比,发现在与GlusterFS一样保证数据一致性的情况下,该模型有很好的元数据操作性能。
其他文献
目的:探讨西玛津对小鼠精母细胞(GC-2 spd)增殖的影响及可能的作用机制。方法:以小鼠睾丸组织cDNA为模板PCR扩增SPAG6蛋白编码区域,构建SPAG6/pEGFP-N2重组质粒,并通过酶切鉴定
背景1-甲基芘(1-MP)是烷基化多环芳烃的一个代表性化合物,具有肝脏致癌性。它的致癌作用依赖于代谢活化,即甲基的羟化和羟基的磺基结合这二步反应依次发生,以形成亲电子性终
随着时代的变化,艺术的形式也在不断发生改变,特别是在当代,这样一个消费文化占主导的社会;传统的架上绘画也受到了越来越多新媒介的冲击,那么如何在这个新时期创作出好的艺
目的观察牡荆素对链脲佐菌素(STZ)诱导的糖尿病小鼠睾丸功能障碍的保护作用以及探讨其作用机制。方法1观察牡荆素对糖尿病小鼠睾丸功能障碍的保护作用采用腹腔注射STZ 45mg/kg连续给药5天构建Ⅰ型糖尿病小鼠模型并随机分为正常组、DM组、西地那非组(5mg/kg)、牡荆素(10,20,40mg/kg)组,灌胃给药62天,观察牡荆素对糖尿病小鼠睾丸功能障碍的影响:(1)采用葡萄糖氧化酶法检测各组小鼠
双目立体视觉在定位、导航、无人驾驶、三维重建等领域得到了广泛应用。双目立体匹配技术作为双目立体视觉的关键环节,一直都是研究热点,它利用双目相机在不同视点对同一场景
虫草素(Cordycepin),也称蛹虫草菌素,化学名3′-脱氧腺苷,是第一个从真菌中分离得到的核苷类抗生素,作为蛹虫草菌的主要活性成分,具有抑菌、抗肿瘤、抗病毒、抗炎等多种生物
在云环境中,虚拟化技术被广泛应用,服务于虚拟机的块存储系统成为了整个云存储的重要组成部分,但传统的机械硬盘和存储区域网络(SAN)、存储附加网络(NAS)等存储架构已经越来
随着市场经济的快速发展,企业使用商业信用来进行生产经营和投融资的行为越来越普遍,由此可见,商业信用已经成为了市场信用中的重要部分,并且它的效果也在逐渐得到发挥。我国
研究背景:近年来手机使用量迅速增长,人们使用手机的时间逐渐延长,对长期使用手机所带来的肌肉骨骼疼痛问题也越来越关注,医学专业学生学业压力较大,课余时间少,日常生活及信
在中国经济发展过程中,腐败一直是困扰执政者的重大难题,也是社会关注的热点。过去较长时间里中国腐败问题严重,但在这种情况下,中国经济却处于高速发展阶段,形成了高增长与