基于轮转部署的RAID6存储系统扩容问题研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:gellycgy
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近些年来,随着云计算、大数据等技术与概念的广泛兴起与发展,用户数据和新型应用以爆炸式的速度增长。这就给作为其基础设施的存储系统提出了越来越高的要求,其中包括数据的可靠性、I/O性能以及存储能力等。为了应对存储系统内部单磁盘可能在性能上带来的瓶颈,RAID技术被广泛地应用到各种实际的存储系统中去。但是,随着需求的不断增加,一些存储系统将遇到存储空间不足的问题,这导致对原有系统的存储容量进行扩容。为了满足当前主流24小时无间断服务的需要,当今的系统扩容都要求在在线的场景下进行。在此前提下,传统的做法是基于轮叫调度的扩容方案。虽然该方案能够使得扩容后的系统访问性能达到最优,但是在扩容过程中几乎要迁移所有的数据。由此带来的大量数据迁移,将会对系统的访问性能带来影响并降低用户体验。所以为了减少扩容时迁移的数据量,人们提出了基于最小数据迁移量的新型扩容方案。本文聚焦的是RAID存储系统的扩容问题,现有的RAID6存储系统的新型扩容算法都是基于最小数据迁移量来设计的,并且假定校验块部署在特定的2块磁盘上。然而实际部署RAID6存储系统时,为了均衡校验盘负载,通常采用轮转的方式将所有的校验块均匀地部署在所有磁盘中。而原有的扩容方案只考虑了数据块的迁移而没有考虑校验块的迁移,这就会导致在扩容后的系统中校验块的负载不均衡。针对校验块为轮转部署的RAID6存储系统,本文就最常用的纠删码RDP编码与EVENODD编码,提出了一种新型的扩容方案RSR。 RSR在满足数据最小迁移量的基础上,通过多条带间逻辑拼接的方式,使得系统在扩容后数据块与校验块均衡地部署在所有磁盘上。RSR还通过引入Piggyback技术减少了扩容后更新校验块所带来的开销。本文采用广泛接受的磁盘模拟器DiskSim对RDP编码和EVENODD编码分别进行模拟实验。为了比较不同扩容方案的性能,本文选取RSR、 RS6、 RR4、RR5这4种扩容方案,并对其扩容时间和扩容后的访问性能进行对比模拟实验。对于RDP编码,实验从6个磁盘扩容到18个磁盘,分4次分别增加2、4、2、4个磁盘。模拟实验结果表明,RSR在总体扩容时间上对比RR4和RR5减少了53.45%~76.75%,对比RS6减少了-0.74%~6.89%。RSR在写主导的访问记录Finiciall下,在扩容后平均访问时间上对比RR5增加了0.76%~15.92%,而RR4、RS6由于校验块不均衡的原因无法得出有效的平均访问时间。对于EVENODD编码,RSR在对比模拟实验中有着相似的表现。所以RSR在多种算法中具有较低的扩容开销,并在扩容后的系统访问性能上接近最优。
其他文献
随着现代社会日益趋于信息化和网络化,网络信息系统在日常生活中扮演着举足轻重的作用。虽然传统的安全措施提高了网络信息系统的安全性,但各种入侵事件还是不断的发生,为此必须
网格计算是分布式高性能计算的发展产物。利用网格技术,人们可以将原本毫无关系的服务器、存储系统与网络联合在一起,组成一个超级计算系统,为用户提供高质量的计算与信息服务,但
随着软件工程领域的发展,软件维护问题已成为当前软件产业面临的重要课题。在软件维护过程中,程序理解是一项枯燥、费时且困难的任务,必须借助程序理解辅助系统进行辅助分析
随着Internet的发展,以及现代企业的跨地域发展,大部分企业的数据库应用系统都需要在Internet或企业广域网中运行。传统二层C/S应用程序结构是单一服务器且以局域网为中心的,
随着计算机和通信技术的发展,企业信息安全问题受到越来越多的关注。企业除了要抵御来自外界攻击和破坏,同时还要防止来自内部的有意或无意的泄密。仅依靠完善管理制度很难从根
随着语义网技术的不断发展,越来越多的本体知识库被建立起来实现知识共享。查询这些知识库需要用形式化的查询语言,但是对于普通用户来说,他们对最简单的布尔查询都难以接受,
演化算法作为一种具有群体搜索策略的启发式算法,被越来越多地应用到科学研究、工业制造中。近年来,被用来解决众目标优化问题(many-objective optimization problems)的有效
无线自组织网络是由一组同时具有收发功能的移动或者固定终端组成的多跳网络系统,其无需固定基础设施的支持,易于部署,且契合了用户对无线通信灵活和可移动的需求,因而得到了
时间可预测系统要求系统中的计算任务在有限的时间内必须完成,也就是说要求系统有可预测的硬件延迟、可预测的软件系统以及可预测的程序响应时间。Minicore是基于服务体执行
当今无线传感器网络技术正飞速地发展,越来越多的传感器应用被投入到生产和生活中。WSN其本质是基于Ad hoc技术的自组织网络。传统无线网络的首要目标是提供高的服务质量和高