基于重复数据检测的网络差异备份系统研究

来源 :重庆大学 | 被引量 : 0次 | 上传用户:xiaxia904
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息化程度不断提高,数据对企业的重要性愈发凸显,将数据备份到网络能有效保护数据。由于企业数据量的快速增长,海量数据的备份给存储系统和网络带宽带来了很大压力,也造成存储系统中出现大量冗余。如何在保护数据的同时,消除数据冗余、节省存储空间和网络带宽成为亟待解决的问题。重复数据检测技术的出现成为解决这一问题的关键点。现有的各种重复数据检测算法,由于检测粒度不同,重复数据检测率和检测效率存在很大的差异。其中以数据块为粒度的重复数据检测,能较好的平衡重复检测率和检测效率,但在重复检测率上仍存在改进空间。论文在现有研究基础上,针对滑动块匹配算法的不足提出了改进方法,并进一步研究了结合重复数据检测进行网络差异备份。论文主要工作概括如下:①阐述了三种典型的数据块级重复数据检测算法的原理,包括固定长度分块匹配算法、可变长分块匹配算法和滑动块匹配算法;分析了这三种重复数据检测算法的优缺点。②针对传统滑动块匹配算法的匹配失败数据块,提出了带回溯子块的滑动块匹配算法。通过测试对比,该算法与传统的滑动块匹配和CDC匹配算法相比,重复检测率提高了约6.5%和16.5%。并结合实验分析了数据块划分对重复检测率和额外空间开销的影响。③针对网络备份的通信需求,设计了NBR(Network Backup Restore Protocol)网络备份通信协议,NBR协议建立在传输层之上,支持报文加密、文件压缩传输,可满足网络备份的通信和文件传输需求。④基于以上研究工作,本文设计了基于重复数据检测的网络差异备份系统。主要工作包括:设计与实现了基于重复数据检测的备份客户端;针对多用户并发备份需求,设计与实现了备份服务器的主要功能模块:中心控制模块和备份恢复响应模块;基于NBR协议实现了服务器和客户端共用的网络通信模块。系统测试结果表明,本文设计的系统与滑动块匹配算法作差异备份相比,可有效减少网络带宽、节省存储空间;且支持多用户并发备份,具有很强的实用价值。
其他文献
由于忆阻器的无源性、低耗能、记忆特性以及纳米尺度,忆阻器将会带来人工智能领域,尤其是人工神经网络的理论和应用研究的突破性进展。传统神经网络电路的设计局限在于权重的设
随着航空电子系统日益复杂,通信数据量的急剧增加,传统的ARINC-429和MIL-STD-1553B等数据总线已经无法满足新一代航空电子系统对通信系统的要求,新的数据总线不断涌现。其中航空
遗传算法是一种模仿生物自然进化过程的随机搜索和优化算法,其优势在于可以高效的处理传统搜索方法难以解决的非线性问题。遗传算法具有全局优化性和易操作性,由于其不受搜索空
复杂网络是复杂系统的表现形式,由于这样的网络其节点数量规模较大,而且节点与节点之间的联系较为复杂,所以这样的网络就被称为“复杂网络”。近年来,随着对复杂网络特性的分析不
现今,互联网在人类生活中发挥着重要的作用,人们通过网络寻找与各自生活、工作、学习密切相关的信息。然而,传统的搜索技术却存在着一些问题,如缺乏对语义的理解,以及不能进行知识
众所周知,人脸识别在执法、银行和海关的安全监控等方面具有广阔的应用前景。经过几十年的发展,现在已经出现了很多经典有效的人脸识别方法。但是在很多应用场景下,数据库对每个
入侵检测技术是信息安全领域的一项重要技术,对保障网络信息安全起着十分重要的作用。自入侵检测的概念提出以来,受到了研究人员的广泛关注,发展十分迅速,入侵检测理论得到了
随着大容量存储设备和数字化设备的出现和广泛使用,以及多媒体技术和网络技术的迅速普及,图像已经成为信息载体的主要形式之一,并且呈现指数级的增长趋势。图像检索技术被提出来
AVS作为我国自主创新的第二代信源编码标准,是我国自力更生的新一代视频标准,也是我国摆脱国外信源编码标准的一个里程碑。AVS视频部分于2006年3月1日起开始实施并正式成为国家
票据打印机是一种特殊的打印机,和喷墨、激光打印机都存在很大的差异,而票据打印机的这种差异是其它类型的打印机不能取代的,正是因为如此,票据打印机一直都有着自己的独特的市场