分布式并行文件系统的副本管理策略

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:qishi008
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息社会的发展,越来越多的信息被数字化,尤其是伴随着Internet的发展,数字化的信息呈爆炸式增长。因而在未来几年里,如何存储和管理这些数据将成为人们关注的焦点。七、八十年代,这些数据都被存放在昂贵的中小型机中,由管理员定期维护其中的数据,但这需要较大的投资,且一旦机器出现故障,将会中断系统服务,给企业造成损失。因而人们一直在探索新的存储方法。其中一个重要的发展方向是将多台高性能的PC服务器通过高速局域网连接,在分布式并行操作系统的协调管理下构成分布式并行服务器来存储数据。 本文研究的分布式并行文件系统DPFS(Distributed Parallel File System)是基于Linux的、为分布式并行服务器而设计开发的数据存储系统,用于智能地管理分布式并行服务器中的文件资源。它既能保证系统的高度可靠,又能为提高系统的服务能力及并发度奠定基础。它是分布式并行操作系统的核心部件之一。 本文首先介绍了数据存储的发展概况与新的需求,分布式文件系统对其发展的重要影响以及设计分布式文件系统需要考虑的各种问题;然后分析了为满足分布式并行服务器的功能需求,DPFS应实现的目标;接着介绍了DPFS设计的总体逻辑结构,目录缓存管理模块的结构设计、刷新策略以及该模块在文件读写重定向中的作用,副本表的逻辑、物理结构、对其缓存的管理和同步算法的实现,以及副本智能管理的设计模型及其管理算法的设计与实现,还分析了DPFS对系统可靠性的影响以及在读写文件时与EXT2文件系统性能的比较。最后对分布式并行文件系统未来的发展作了简要的展望。 其中重点讨论了目录缓存中文件读写的重定向逻辑,提出了智能副本管理模型,包括记录副本信息的副本表的实现算法和副本智能动态增删的策略。并以宽带视频服务BOD(Broad-band-service on Demand)为例定量分析了智能副本管理算法的实现。
其他文献
空中交通指挥系统(ATM)是保证航空飞行安全、高效的关键系统,它由复杂的硬件系统和软件系统组成,如何有效的监视并控制这些硬件、软件系统的运行状态是现代空管技术中的重要
需求工程是近些年来兴起的软件工程研究的子领域,人们对软件工程中的需求分析及建模技术的认识越来越重视.需求分析与建模技术在现阶段的研究中虽然各自有所发展,但技术都是
互联网、集群和多媒体技术的发展,使多媒体数据日益成为下一代互联网信息数据的代表。多媒体信息压缩的技术是多媒体通信领域的关键技术,因此编码标准MPEG-4也成为了研究的焦
随着网络技术的飞速发展,网络安全问题日益突出,防火墙是目前广泛使用的一种网络安全技术.由于当前基于Windows的包过滤防火墙一般建立在网络层之上,不能拦截所有数据包.另外
自动控制作为计算机的重要应用领域之一,对国民经济的发展起了极大的促进作用。通过智能控制,不仅大量节省了人力物力和成本,提高了劳动生产率,同时还提高了产品质量。 本课题研
工作流管理系统WfMS(Workflow Management System)是近年来随着Internet和Intranet的急剧推广而快速发展的软件系统之一。该系统的主要目标是通过调用有关信息资源与人力资源来协调业务流程中的各个环节,使之按照一定的顺序依次进行,从而实现业务流程的自动化。 目前国内外虽然已经有了很多工作流管理系统的产品,但是它们大部分不能有效的处理工作流中的异常情况,极大的
随着现代社会信息化、智能化,网络化的发展,嵌入式系统作为后PC时代和网络时代的新秀,正在大放异彩.而智能语音技术的不断成熟和完善,也给嵌入式的发展带来无限的活力.由于语
视频中人的行为分析是当前计算机视觉的一个热点研究课题。近来,其应用于商业化的进程不断推进,该研究领域中所涉及的问题一定还将被不断深入。特别随着微软公司kinect的到来,视
随着医院向数字化方向迈进,用于存档和远程医疗的医疗影像的压缩问题成为研究的重点。高压缩率的有损压缩会引发许多法律问题,而无损压缩效率又太低,则在保证医疗图像质量并提高
随着面向对象技术的发展,软件开发对复用的利用是越来越充分。其中,软件模式便是一个很好的复用方式。软件模式对复用分析和设计的经验起到了相当大的作用。特别地,分析模式是分