混合架构云备份系统中数据可靠性管理机制设计与实现

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:rogy520111
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
数据可靠性作为备份系统中最重要的指标之一。传统的C/S架构中,主要通过备份数据的冗余存储保障高可靠性。在引入P2P网络的混合架构中,数据分布在P2P网络和中心存储服务器中,对数据可靠性管理提出了更高要求。现有备份系统一般通过发起备份操作的客户端或者P2P网络中的master对等点对其他存储对等点进行监控,在剩余数据量低于修复阈值时执行再复制操作。如何保障可靠性降低的备份数据得到快速修复,如何保障可靠性管理的通信开销最小化,成为混合架构云备份系统中可靠性管理研究的重要课题。提出了一种基于租约的数据可靠性管理机制,该机制适用于P2P网络和存储服务器结合的混合架构备份系统。本机制采用惰性修复策略,DIRD控制服务器对P2P网络中纠删码分片的元数据信息集中管理,并从存储有相同备份对象纠删码分片的多个对等点中随机选择一个作为租约节点,租约节点根据租约数据结构中的元数据信息,与租约内对等点依次建立TCP连接,并通过心跳消息进行监控。当租约节点探测到对等点失效导致剩余纠删码分片数目低于阈值时,向DIRD发送消息请求修复。租约节点的在线状态由DIRD通过租约进行监控,当DIRD接收到请求修复的消息后,首先按照负载平衡的原则选择目标对等点,再根据修复策略执行再复制操作。DIRD根据动态阈值计算策略配置租约的修复阈值,以实现数据可靠性管理开销在存储服务器和P2P网络之间的迁移。通过在10个对等点P2P网络环境下的测试,可靠性管理机制运行稳定,可靠性修复速度快;通过在5500个对等点P2P网络环境下的仿真测试,可靠性管理机制通信开销低,负载均衡效果明显优于未采用负载均衡情形。
其他文献
数字水印技术自提出以来一直受到人们的极大关注,可广泛应用于多媒体版权保护和信息认证等领域,而音频水印作为水印技术的一种,也逐渐成为研究的热点。大多数水印系统采用软件方
随着面向服务架构的发展与广泛应用,作为其重要实现的Web服务受到工业界与学术界的重点关注。Web服务组合作为面向服务架构的关键技术,一直是Web服务领域的研究重点与热点,然
随着电子地图等领域的飞速发展,地理信息和空间数据在人类生活中发挥的作用越来越大,空间数据在油田的信息化建设中的作用也越来越大,但是针对油田空间数据多分辨率特征的研究却
人类主要通过语言和图像这两种形式来传送相关信息。其中,通过图像所获得的视觉信息又占人类获得的各种信息中的80%,因此图像信息在信息传递媒体和方式中占据了重要的地位。图
随着科学计算的精细化,计算量日益增大,计算相关领域越来越重视并行计算的研究以获得更高的计算速度。随着多核处理器系统和GPU通用计算的广泛应用,当前并行计算领域存在着多
近年来,多投影显示技术日益成熟,在商业上的应用越来越多。然而,目前市场上的商用多投影显示系统软件有限,多投影显示系统的市场远未饱和。本文介绍了一种多投影显示系统的实
这些年,伴随着各种智能移动设备的出现,移动数据库技术得到了一定的发展与应用,但是同时也出现了很多的问题,例如移动复制过程中的数据如何保持一致以至于不发生冲突,解决这
随着无线通信网络的迅速发展,人们对其网络信息传输可靠性方面的要求也越发提高,特别是差错控制技术,是移动通信可靠性需求保证的关键,其在日益强调通信信息传输准确性、可靠
随着旅游行业在全球范围内的快速发展,人们越来越倾向于通过有效的搜索引擎寻找发现有趣的地方以及收集相关的信息。随着Web2.0的迅猛发展,越来越多的人会在一些旅游社区网站
基于双目视觉的实时三维重建是以双目相机拍摄的图像为数据输入,通过视觉算法恢复出三维模型的逆向工程。双目立体视觉系统设备价格低廉,重建速度快且精度高,因此在无人机电