分布式存储系统文件级连续数据保护技术研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:bengkuia521
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息时代数据规模的急剧增长和数据价值的不断提升,存储系统必须具有良好的可扩展性并采取有效的措施来保障用户数据的可靠性、安全性和存取的高性能。为了适应信息时代海量数据对存储系统各方面性能的需求,分布式存储系统成为了研究热点,它满足了海量数据对系统可扩展性的要求,同时又能利用体系结构优势增加系统的可靠性和性能。而另一方面由于计算机病毒、黑客攻击以及人为误操作等造成的数据失效,以及一些对数据历史要求严格,或对备份窗口敏感的应用,则需要存储系统尽可能减少数据恢复点时间间隔(RPO)。传统的数据备份技术已经不能很好的适应这些新出现的需求。连续数据保护技术(CDP)可以解决这样的问题,通过将数据保护扩展到实时,RPO缩小到了每次数据改写,连续数据保护技术能为关键应用提供充分技术支撑。面向分布式存储系统的连续数据保护技术将为存储系统提供连续时间上的数据保护,同时存储系统分布式体系结构的并行性又能优化连续数据保护带来的性能和容量开销,其可扩展性又可以解决备份数据不断增长的问题。融合了连续数据保护元数据管理的分布式文件系统将为分布式存储系统提供文件级的连续数据保护功能。在研究现有连续数据保护机制的基础上,面向分布式存储环境设计了一种的将分布式文件系统元数据管理机制以及连续数据保护元数据管理机制结合起来的文件系统。扩展了传统的元数据组织结构,由一维增加时间维度变为二维,从而很好的实现了连续数据保护元数据管理的融合,并且针对连续数据保护应用优化了元数据管理策略,使得在数据保护与数据恢复时的时间开销得以降低。同时得益于文件系统级的实现方式,通过历史元数据的运用使得文件的历史视图的实现变得简单,系统可以在极低开销的情况下提供指定文件任意时间点历史的查看。为了进一步减小应用连续数据保护功能而带来的时间开销,研究了在分布式环境下充分利用系统架构进行优化的方法。通过设计合适的数据分条分配及管理策略,可以在数据操作过程中充分利用分布式系统的并行度。通过设计针对连续数据保护的读预取及写合并等方法,使得在数据传输、备份、恢复时能充分利用分布式系统的并行度,进一步减少应用连续数据保护所带来的性能开销。针对文件内数据移动这种造成连续数据保护效率极大下降的情况,研究并扩展了标准的POSIX文件系统接口,提出了插入写及删除写语义。新的应用程序利用这两个语义可以直接提高连续数据保护的效率。对于传统应用程序,研究并设计了客户端针对数据改写行为的各种侦测方法,在用户程序透明的情况对插入写及删除写操作进行识别并提取插入数据、删除数据的详细信息,为元数据服务器进一步处理做准备。为了进一步减少备份数据量,研究了基于数据内容比较的方法,以消除重复数据备份以及精确的获取每次数据改变的字节级信息来实现差异数据备份。得益于基于对象的存储服务器实现,将基于数据分条内容的数据备份元数据封闭在存储服务器内部,做到对分布式文件系统元数据管理最小的影响。在不影响数据传输而又充分利用存储节点计算能力的前提下,研究并优化了差异数据备份的策略。
其他文献
根据摩尔定律,传统计算机中的晶体管电路逐渐接近性能极限,再加上电子计算机在计算能力等方面存在的局限性,科学家期待并开始在自然界寻找新的计算介质来代替传统的电子计算
资金管理在企业各项管理工作中占据着越来越重要的位置,特别是集团企业内部的资金管理。集团企业内部资金管理主要是企业内部资金结算的管理,本文通过对集团企业内部资金结算
目的研究四氯化碳(CCl4)诱导小鼠内质网应激(ERS)所致急性肝损伤的作用及机制。方法将50只昆明种小白鼠随机分为对照组10只和实验组40只。实验组按0.01 L·kg-1腹腔注射10%CCl4(豆
文言文阅读是语文中考的常规题目,其所占比重逐年增加,以2019年江苏省苏州市中考试题为例,分析考查的重点和难点,提出应对文言文知识考查的指导策略。
在液体推进剂动力系统质量模型的基础上,针对采用双组元推进剂和挤压式输送系统的小推力空间飞行器姿控发动机,在控制总冲量和总冲量矩相同的情况下,对动力系统总质量最轻的姿控
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
期刊
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
目的:观察健脾理气法联合化疗治疗中晚期非小细胞肺癌的临床疗效。方法:将60例符合纳入标准的中晚期非小细胞肺癌患者分为观察组与化疗组各30例,化疗组采用化疗方法进行治疗,
本文分析了高校图书馆图书破损及修补现状、修补意义、图书破损的主客观原因。提出上级职能部门应当重视高校图书馆图书文献保护工作,加强指导,促使保护工作向科学化、规范化、