基于SDN的数据中心网络资源调度机制研究

来源 :中国科学院大学 | 被引量 : 0次 | 上传用户:pp084
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着大数据时代的来临,数据成为越来越重要的生产资料,而且数据的规模远远超过单台计算机可以处理的范围,因此近年来涌现出很多分布式计算框架。因为不同的计算场景在实时性、交互性、迭代性等方面各有差异,所以没有一种分布式计算框架适用于所有计算场景。为了节约成本,在很多数据中心中,管理员将多个分布式计算框架部署在同一个计算集群上,使其共享集群的计算、存储和网络资源,并由统一的集群资源管理器进行管理。目前的集群资源管理主要关注计算资源和存储资源,较少的涉及网络资源。但研究表明高效的网络资源管理对于优化作业性能、降低集群成本十分重要。  研究工作提出了一种基于SDN(Software Defined Network)的数据中心网络资源调度机制。该机制可以根据管理员预设的网络资源分配策略,加权的进行网络资源调度,为高优先级的作业分配更多网络资源以优化性能,同时限制低优先级作业的网络带宽占用,以实现不同作业之间的网络性能隔离。本研究的主要贡献:1)提出了一种数据中心网络资源调度机制。目前在数据中心中,可以为高优先级的作业分配更多的计算和存储资源,以加快作业完成时间。作为这类机制的补充,本文提出的方法可以为高优先级的作业分配更多的网络资源,加快作业网络传输,从而优化作业整体完成时间。2)基于SDN设计了框架,并实现了原型系统。基于该框架的灵活性,只需要在控制器端实现策略和算法,直接下发到SDN交换机即可使策略生效。相比于传统的逐个配置交换机和路由器,或者在终端机器上进行网络资源调控,框架具有更好的便捷性和易扩展性。3)对新型数据中心技术、新型网络技术、当前主流大数据处理框架、网络资源分配等相关领域进行了较全面的调研与分析研究,为后续研究工作提供了参考。  论文首先总结了数据中心网络资源管理的背景和重要性,并对相关研究和相关技术进行阐述。其次,基于对网络资源调度模型的需求分析,设计了网络资源调度模型NScheduler的总体架构,并基于开源控制器实现了原型系统。为了验证系统的有效性,基于Xenserver搭建了实验环境并完成系统测试。实验表明,NScheduler能有效地、加权地分配网络带宽资源,并同时保证不同作业之间的性能隔离。最后,论文总结了NScheduler的优势和不足,并对下一步工作提出了展望。
其他文献
高等级安全操作系统在信息安全领域中具有基础性地位,访问验证保护级安全操作系统是GB17859和GBT20272定义的最高等级的安全操作系统。微内核架构很好地满足了高等级安全操作
本文针对传统Web服务体系架构的缺陷,结合入侵容忍的思想,利用冗余与多样性等技术,设计了一个基于选举算法的多层次、多代理的入侵容忍Web服务体系架构,并在此架构的基础上提出了
本论文设计并实现了一个完整的角色访问控制模型,并在实际系统中应用。与传统的访问控制相比更简单、安全且与平台无关。 在ANSI的基于角色的访问控制模型的基础上,提出了角
软件功能规模度量(Functionalsizemeasurement,FSM)方法是从用户的角度按功能来表达开发的工作产品,它通过确定功能域的数量来导出软件的规模,它是独立于所采用的技术或工具的。
Web已经成为网络信息的主要交互平台,是人们获取知识的主要来源。但是,由于Web页面的无结构性、超链接的自由无序性、以及Web内容的海量性、多样性和动态变化性,使得人们从Web上
Internet目前面临严峻的安全威胁,网络入侵检测和关联分析技术能有效地发现并理解这些威胁,构成了动态网络安全模型的关键环节,也成为目前网络安全领域的热点研究问题。 本文
国家岩矿化石标本资源管理系统是科技部国家自然科技资源共享平台项目的子项目。该项目是将分散在全国相关单位和专业研究人员的具有重要科学价值的珍贵岩矿化石标本,以共享
曲面编辑一直是人们研究的热点问题,特别是在计算机图形学、虚拟仿真、可视化、三维动画等领域有广泛的应用背景。本文讨论了曲面的编辑和形变的理论与方法,包括曲面的表示方法
本文首先论述了生物在识别物体的过程中需要经过很多个阶段的信息编码和提取过程,并将高度冗余的象素数据转变为特征信息再进行识别的特征对结合生物视觉编码机制的图像模式识
支持向量机(SupportVectorMachine,SVM)是在统计学习理论的基础上发展起来的一种新的机器学习方法,它在小样本问题中表现出很多良好性能。但如果遇到问题规模较大时,如样本维数