分布式文件系统客户端元数据交互性能的优化

来源 :第18届全国信息存储技术学术会议 | 被引量 : 0次 | 上传用户:wang1224
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  分布式海量存储系统已成为当今海量信息存储一个典型的解决方案,而客户端元数据交互性能很容易成为这一方案的瓶颈所在。本文关注提高分布式系统客户端元数据交互的性能,提出了衡量元数据交互性能的公式及影响性能的两个要素:缓存命中率以及带宽利用率。接着分别分析了现存分布式文件系统是怎样针对这两个要素做优化,以提高客户端元数据交互性能。本文进一步提出了三档缓存方案以及用户自定义预取集的策略,在保证一致性的同时,也提高了缓存命中率和带宽利用率。实验也表明,这一设计大大提高了客户端元数据交互性能。
其他文献
  随着海量数据的增加和云计算的出现,基于云计算模式下的数据挖掘技术研究具有重要意义。介绍了云计算和Hadoop平台,分析了Apriori算法,提出了基于云计算模式下的改进的Aprio
  随着云计算技术的发展和广泛应用,如何解决数据的高效存储成为业界的一个研究重点。本文通过对现有的Linux Ext3文件系统的扩展,设计实现了一种重复数据删除方案,通过该方案
重度硫酸二甲酯中毒死亡病例报告武汉市劳动卫生职业病防治院(武昌民主路,430071)黄萍萍,杨明茂1991年6月21日,某化学助剂厂硫酸二甲酯储罐突然爆炸,引起急性硫酸二甲酯重度中毒4人,中度中毒2人,轻度
随着加入世界贸易组织以及市场化进程的推进,我国的资本市场规模将日益扩大,今后很可能成为公司主要筹资渠道。然而目前,政府仍是许多公司的主要所有者。这类公司大多采用政
  对广域网上多个节点进行文件同步,因节点频繁的加入与离开使得直接的点对点同步不可行。对文件更新的发现,单一的采用基于状态比对和追踪文件变化过程都不可取,前者因频繁计
会议
  随着高性能计算机进入千万亿次时代,其存储系统所面临的扩展性难题更加突出,为了提高存储系统扩展性,一些高性能计算机使用了IO转发机制。该机制在全局存储和计算节点之
会议
  本文介绍了Lustre分布式文件系统的架构、主要组件以及LNET网络层,分析了客户端的初始化和连接建立,在此基础上,设计了Lustre分布式文件系统网络容错功能,提高了系统可用性,并
  Lustre是个分布式的并行文件系统,被广泛的应用在高性能计算领域,它使用元数据服务器MDS管理文件元数据和维护系统全局一致性视图,使用多个对象数据服务器OSS提供可扩展
会议
简介大学英语杂志编委,英语教授。1960年毕业于北京外国语学院。1989~1990年以高级访问学者身分在澳大利亚墨尔本维多利亚大学研究应用语言学和完形心理学。1992年起享受国务
  海量小文件的高效存储和访问是当前分布式文件系统面临的主要挑战之一。本文系统地总结了当前流行的分布式文件系统在小文件处理方面所做的优化工作,分析了它们的优缺点,得