基于网络编码的分布式数据存储与故障修复策略

来源 :浙江工业大学 | 被引量 : 0次 | 上传用户:markwolf
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
如今,人类社会已经步入了信息化高速发展的时期,信息在社会生活中起举足轻重的地位。与此同时,海量信息数据的存储也越来越被人们所重视。尤其是近几年高清视频的广泛应用,大数据时代的来临,传统的集中式数据存储系统呈现出越来越多的弊端,比如安全性不高,可靠性也没有保证,可扩展性不强等。分布式数据存储系统则弥补了这方面的缺陷,它使得海量数据能以分布的形式存储,满足了大规模存储的需求,而且具有更高的稳定性。但是分布式数据存储会面临存储节点故障的问题,因而如何修复故障节点保证系统的稳定运行成为分布式数据存储系统的重要课题。当前,修复故障节点的指标主要有节点存储容量,修复带宽,修复开销,重建时间等。如何在修复故障节点的同时使得相关指标尽可能地小成为了当前分布式数据存储的研究热点。本文研究了基于网络编码的分布式数据存储及故障修复策略,主要的工作和贡献如下:(1)本文将分布式数据存储系统的故障修复问题抽象化为基于网络编码的信息流图,以便于用图论的相关理论来简化分析数据传输过程。(2)针对目前的故障修复策略没有对重建时间进行优化,本文从理论上分析了重建时间的下界,然后提出了最小化重建时间故障修复策略MTR (Minimum-Time Repair),该修复策略达到了重建时间的下界值,而且,在此基础上将修复带宽降到了最低值。分析数据表明,与现有的节点修复策略相比,MTR修复策略能大大降低重建时间,使得故障节点快速修复,这对那些需要快速修复的分布式数据存储系统有着非常重要的意义。(3)考虑到实际应用中,重建时间受约束这个因素,本文提出了重建时间约束的带宽最优故障修复策略,建立了该策略的优化模型并显式给出最优解。该策略能在给定的重建时间阈内修复故障节点,且在该时间点上的修复带宽是最小的。同时,该策略具有较好的灵活性,在任何重建时间阈值(大于重建时间下界)内,都存在使修复带宽最小的故障修复策略。
其他文献
目前计算电磁学是电子工程科学中的一个重要研究领域。随着计算机硬件与相关算法的发展,电磁仿真科学在民用与军用方面都得到了广泛应用。本文使用计算机图形学的加速技术对
近年来,中国在国际舞台上开始扮演越来越重要的角色,然而与此不相映衬的却是中国的服装行业同国外服装行业相比,显得竞争力较为薄弱。对于这种境况,国内服装行业越来越意识到
图像配准是图像分析和理解的关键环节,是将不同时间、不同的传感器(成像设备)和(或)不同条件下(天候、照度、摄像位置和角度等)获取的同一场景的两幅(或多幅)图像进行匹配、叠加的处
作为能够快速、无痛苦、准确并且可以提前诊断的诊病方式,中医学的手掌诊病得到了普遍的认可。中医专家根据手掌不同位置、不同的纹理、色泽等信息就可以得出诊断,这样就可以
随着科学技术的发展,工业和生活的用水增加,排放的污水量增加,为了让人们能喝到干净的水,污水处理技术在人类生存的迫切需求之下快速的发展;污水处理过程不是一种简单的污水
图像分割是图像处理领域的关键环节,在医学图像处理、视频图像处理、遥感卫星图像处理等方面都有重要的应用。在对遥感图像进行预处理的基础上,采用图像分割方法能够有效提取
随着万维网的迅速发展,网络上的数据量越来越大,并且仍保持着高速的增长,网络中的海量数据正在成为一个最重要的信息源。在这些饱含数据信息的网络资源中,由于半结构化信息有很多
洪水是一种危害极大的自然灾害,给国家和人民带来了极大的生命财产损失。随着科学技术的进步,特别是水文学、计算机技术的发展,人类通过对洪水成因数学模型的逐步完善,以及先
当今信息社会中,数据爆炸式增长且数据的重要性也日益凸显,使得人们对于存储备份系统的数据可用性、系统扩展性和备份恢复速度等提出越来越高的要求。典型的云备份系统架构包括
无线mesh网络是一种新型的多跳无线网络,具有组网灵活、网络覆盖率高、非视距传输、健壮性高、前期投入少等优点,是一种具有光明前景的组网,为充分利用正交信道,提高网络吞吐量和