广域网存储加速系统的研究与实现

被引量 : 1次 | 上传用户:pizaiyang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网的发展,越来越多的应用需要通过网络在异地存储备份数据,但是,由于广域网具有高带宽高延迟的特性,而通用的传输协议没有针对该特性进行优化,无法完全适应广域网数据传输的需求。此外,备份数据相邻备份周期的版本通常具有高度相似性,如何高效检测出相同部分,仅传输差异部分,从而缩短备份窗口和节省网络流量,是一个重要问题。最后,企业应用中,需要将系统设置在网关节点中,如何对通用网络数据流进行传输优化,也是一个重要的问题。本毕设从七层网络模型角度入手,在表示层和传输层对以上三个问题进行了数据传输的加速。毕设自上而下分为三个改进部分,分别是表示层的重复数据删除模块,乱序流解压缩模块,和传输层的UDP传输优化模块。在重复数据删除模块中,系统借鉴了传统字节缓存算法中使用rabin滑动窗口算法对数据流进行不定长分块的方案,同时,系统基于网络异地备份应用中两个相邻备份窗口的相同文件通常只有细微改变的特征,提出将rabin指纹分块检测出的多个连续重复指纹块用一个二级指纹块代替的算法,进一步缩减网络流量。在乱序流解压缩模块,由于底层采用乱序提交数据包的方式,无法采用传统流压缩中对前向所有数据流建立数据字典的方式,毕设基于越早传输的数据越有可能已经收到的观测,采用对前向第m个数据包之前的连续n个数据包建立数据字典的方式,保证了解压缩的实时性,避免了该模块由于等待所有前向数据到来成为系统的瓶颈。在UDP传输优化模块,系统摒弃了传统的TCP传输协议,而采用了UDP协议,从而避免了高带宽高延迟广域网中使用TCP协议造成的过多延迟,同时,系统实现了简单的差错控制算法并设计了带宽检测算法,保证了传输数据的可靠性和高效性。综上,毕设对三个部分进行了优化,每个部分有机结合,最终提高了广域网存储加速系统的综合性能。最后,毕设搭建了一套验证系统,并进行了测试验证,从实验结果分析,该系统能够较大地提高异地存储数据的传输速度。
其他文献
高校排课是学校教学管理中十分重要、又相当复杂的工作。其实质就是为学校所设置的课程安排时间和地点,从而使整个教学能够有计划有秩序地进行。随着高等院校的招生规模逐步扩
随着我国金融体系改革的不断推进,我国的社会融资结构也发生了很大的变化,从单一的间接融资的社会融资体系转变为间接融资为主直接融资为辅的复合型社会融资体系,直接融资在
针对检测特定环境中甲烷气体浓度的需要,设计一种可实现甲烷气体浓度检测和报警的无线传感器网络节点.该节点采用多个MJC4/3.0L型甲烷传感器采集甲烷浓度信号,以MSP430超低功
为了使教育信息化的建设与应用更加完善,世界各国都在积极发展信息技术教育。信息技术首先带给教育的是使传统的教学模式、教学方法、教学手段等发生根本性变化,于此同时,信息
阿尔海默综合征(Alzheimer’s Disease,AD)是最常见的进行性遗忘和神经退行性病变,其主要特征为beta淀粉肽(Aβ)聚集增加,前脑胆碱能通路神经元退行性病变,以及学习记忆丧失。尽
射频识别技术(RFID)作为一种快速、实时、准确采集与处理信息的高新技术和信息标准化的基础,被列为二十一世纪十大重要技术之一。作为无线识别技术发展的最新成果,RFID技术的应用
[目的]1.通过前期对DVT大鼠静脉组织基因检测,筛选差异表达基因,利用Ncbi Gene生物信息平台,锁定与血小板聚集高度相关的上游基因COX-1。2.人血中PCR检测COX-1基因表达。3.应
基于穿青人传统体育文化内涵的视角,通过实地调查法、访谈法等研究方法对穿青人民俗文化艺术节进行考察,可以发现其发展过程中存在的最大问题是民族传统体育文化内涵的缺失。
文章结合我国产业集群内中小企业的发展状况,分析产业集群内企业融资的状况与逻辑,认为在集群紧密的供应链缓解资金需求压力的基础上,产业集群会因为社会资本网络的支持而部
酒店的CIS战略,是将酒店的经营理念、管理色彩、销售、标记设计等内容融为一体,通过整体性的传播手段,塑造成改善酒店形象。