一个分布式云存储系统的设计与实现

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:jay2048
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息技术的发展,人类社会产生的信息量越来越大,如何在高效、稳定、安全的情况下满足企业大容量文件的永久存储需求,为企业提供便利的管理方式和低成本的管理方案,是当前企业发展所面临的一个重要问题。基于云计算的云存储技术,整合物理存储、网络设备、软件服务等软硬件,对此提供了良好的解决方案。为此设计与实现了一个分布式云存储系统,系统架构设计为三层,基础管理层基于Ceph分布式存储技术搭建,有效降低了存储集群的硬件成本,同时具备高可用性和高扩展性,接口层封装了存储服务和集群监管服务,降低了系统内实现细节的耦合,访问层构建了用户使用系统的入口。系统实现时将系统服务拆分为云存储管理系统、云存储应用系统和接口层服务,和数据库分别运行在Docker容器上,Docker作为轻量级的虚拟化技术,相比于虚拟机技术,减少了应用上云的成本和要求,容器化部署的服务具有良好的隔离性,根据业务需求可以方便地迁移和扩展用户数据,由此打造出一个一次部署到处运行的云存储系统。另外,系统实现了统一的接口层来屏蔽底层逻辑,接口处采用RESTful设计规范,并对Spring MVC框架进行了优化,充分利用了HTTP协议的语义,实现了无状态的接口调用,提高了开发效率,有效保障子系统间的可见性并降低交互时延。经过部署测试环境并对系统进行功能测试和非功能性测试,云存储系统基本达到设计目标。运维人员通过该系统可以可视化地监控和扩展存储集群,相比于单节点的存储服务,Ceph存储后端能够提供扩充至PB级的存储容量。分层架构和经过优化的接口层,使应用子系统的主要功能在后端存储总容量10Ti B,访问层并发量大于300时的响应时间缩短30%以上,支持为企业的上万员工提供体验良好的大容量存储服务。
其他文献
气体的传感与监测广泛应用于工业检测、环境监测、矿井安全等多个重要领域,现阶段气体传感器受检测灵敏度低、寿命短、价格昂贵等因素限制了其在安全检测领域大规模使用。伴随着光纤和光通信技术日益成熟,光纤以及相关器件的成本不断降低,光纤传感器的研究逐渐被引进。由于光纤气体传感器相比传统气体传感器抗交叉干扰强、便于组成具有功能一体化的光纤传感网络系统、更加安全等优势,因此光纤气体传感器的研究有着十分重要的意义
随着5G时代的到来,越来越多的设备将接入互联网,这种趋势使得物联网系统复杂度越来越高。物联网系统涉及到数据的采集、传输、处理和存储,其中还包含一些敏感数据。如果这些数据泄露,不仅会给个人生活带来困扰,也会给企业带来难以估量的损失。因此,物联网时代对其背后的互联网管理平台提出了更高的要求。对物联网设备进行安全有效的管理,从而保障物联网设备正常运行,将对物联网的发展具有深刻意义。本文针对一种预付费除垢
作为一种新型的热固性树脂,聚苯并噁嗪具有高玻璃化转变温度、聚合时零体积收缩、产品尺寸稳定、吸水率低等特点,因此受到人们的广泛关注。但随着化石资源枯竭和环境问题的日益严重,苯并噁嗪树脂也面临着原料选择和可持续性的挑战。因此,以可再生原料制备生物基苯并噁嗪树脂成为本领域的研究前沿。本论文以可再生呋喃二胺、丁香酚、腰果酚、水杨醛为主要原料,制备了全生物基二胺型苯并噁嗪单体以及全生物基主链型苯并噁嗪前驱体
在过去的二十年里,关于圆柱形矢量光束的研究得到了飞速发展,特别是在径向偏振光方面。不同于更常见的线偏光和圆偏光,径向偏振光束的偏振态是非均一分布的:它的偏振方向关于光轴对称并且始终沿着径向方向;此外它还是一种空心光束。这种独特的偏振特性和光斑模式引起了国内外学者们广泛的关注,而相应的研究也证明径向偏振光在粒子操控、激光加工、光刻和光学存储等领域都可能具有明显的优势。本论文的主要研究内容就是径向偏振
大功率柴油发动机工作过程中产生的振动冲击大,除了通过发动机结构优化创新降低振源之外,如何优化设计和匹配发动机减振装置来吸收振动能量、降低振动传递,是制约我国国防装备发展的卡脖子问题之一。本文针对某型号柴油发动机振动过大的问题,提出新型变刚度大阻尼减振器新构型,开展减振器样机设计与试验测试验证研究,主要研究工作和创新如下:首先,考虑减振器三向变刚度和大阻尼特性,建立了发动机减振系统动力学模型,结合系
单晶纳米线是微纳机电系统(MEMS/NEMS)的重要基础组件,体心立方金属钨具有耐侵蚀、隔热佳等优点,是微纳机电系统元器件的理想材料。因此,为了更好地让钨单晶纳米线(STNW)应用于微纳机电系统,亟需我们开展STNW力学行为的研究。本文利用大规模分子动力学模拟对STNW进行了一系列拉伸试验研究,基于不同晶向研究了其力学行为的晶体取向依赖性,并研究了环境温度、纳米线截面形状、尺寸、加载速率对不同晶向
结构三维码是一种新型的防伪产品,可以做到信息与防伪的真正结合,有着广泛的应用前景。目前,结构三维码采用的加工方式是机械加工,加工精度和效率都有待提高。而激光加工相比于机械加工,速度更快精度更高,可以发展为结构三维码的主要加工方式。本文旨在研究一种结构三维码的激光加工方法,代替机械加工成为结构三维码新型加工方法,主要内容如下:(1)分析结构三维码的功能特点,并结合激光标刻加工的特点,设计结构三维码整
离子型和共价型半导体目前都是材料科学的重点研究对象,同时也在生产生活中有着广泛的应用,特别是在光电子领域占据着举足轻重的地位。Ferreira的LDA-1/2方法在实空间中进行空穴的自能修正,能快速准确地计算离子型半导体的能带,但应用于共价半导体时效果并不理想。基于此种缺陷,本人导师提出了一种基于LDA-1/2方法的改进算法shell-LDA-1/2(简称shLDA-1/2),引入球壳状的自能势截
蜡烛图模式能否有效预测市场走向至今没有一致的结论.本文讨论了8种常见的两天蜡烛图模式在中国股票市场做多的预测能力,并在此基础上引入了包括LR,KNN,RF,SVM,RBM等5种常见的机器学习方法和9种技术指标试图增强这些模式的预测能力.基于该方法进而构建了一种超短期的投资策略.实证结果表明,其中6种蜡烛图模式在中国股票市场具有较好的预测做多能力,在引入了机器学习方法后有5种模式的预测准确率得到不同