网络化测试虚拟计算资源管理调度系统开发

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:foxi
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
利用智能仪器计算资源进行测试数据本地化处理的方法在网络化测试领域的应用越来越多,相较于集中式处理方法,该方法能极大地提高数据处理实时性、降低测试数据传输量,从而减小网络带宽压力,减轻测试主机工作负担。网络化测试系统具有分布性和异构性,要想在保证系统稳定可靠的前提下充分发挥智能仪器有限的本地计算能力,高效协同完成系统工作,必须合理组织、高效管理各仪器资源,根据资源状态和任务特点进行任务分配。基于上述需求,本文设计并开发了完整的计算资源管理调度系统。在广泛调研国内外网格计算和云计算领域著名资源管理调度方案的基础上,本文提出了网络化测试资源管理系统层次化的体系结构:按照功能和开发对象将其从上到下依次划分为用户层、资源管理调度层、虚拟资源层和物理层。其中资源管理调度层是系统核心,起到承上启下的作用,使得用户层和虚拟资源层相互透明。用户层具有资源查询和任务请求功能;资源管理调度层负责资源管理、任务调度,并提供任务分解归并功能;虚拟资源层主要完成智能仪器资源信息的提取、汇报及任务处理工作。各层节点之间通过开源的Zero MQ消息队列以统一的接口形式高效、可靠地进行信息传递。本文将网络化测试系统中所有智能仪器的计算资源抽象成一个虚拟资源池,进行统一管理。资源管理系统具有如下功能:对系统中各智能仪器的CPU、内存、网络带宽等资源进行统一描述,将资源信息存储于MySQL数据库中,并进行实时动态更新,能及时感知到智能仪器随机加入、主动或被动退出系统的动作并采取相应措施,且根据资源描述信息定位到实际的智能仪器节点,为用户提供较为灵活的资源查询功能。借助管理系统提供的全局资源状态信息,本文设计并开发了资源调度系统。该系统支持任务并发,可随时接收来自用户的任务请求,以统一的任务描述形式将其加入任务队列中。系统以先来先服务(FIFO,First In First Out)的规则从任务队列中选择任务,按照可行性和本地性原则将任务调度到待处理数据所在的可用资源节点上,并实时监测任务执行状态。此外,本文还设计了负载均衡及故障恢复机制,用以提高系统稳定性和可靠性。为解决测试数据在空间位置上分散,在处理逻辑上集中的矛盾,本文设计了任务分解归并系统。分解模块根据数据空间分布位置的不同将用户提交的数据综合处理任务分解成若干子任务,建立原任务与子任务的对应关系,并将子任务集提交给资源调度系统实现任务分配;归并模块定期查询子任务执行状态,当某个原始任务的最后一个子任务结果达到后即刻对该原始任务的所有子任务结果进行归并处理,得到最终计算结果。最后本文设计了实验平台,经验证,该资源管理调度系统功能完善、扩展性好、并发性强、稳定高效。相较于集中式处理模式,该系统能极大地提高测试数据处理实时性及智能仪器资源利用率,减少网络带宽压力,降低控制主机工作负载。
其他文献
高压和超高压架空输电线以钢芯铝绞线为主,在芯部的镀锌钢绞线的周围捻合铝绞线。电流主要分布在铝线上,抗拉力主要由钢绞线承担。覆冰跟断股是输电线两种最主要的损伤形式。若铝绞线断股,导致局部电阻增大,使导线局部温度升高,也加快了损伤部位的老化。而钢芯断股则削弱了导线的抗拉强度,会导致导线断裂。结构健康监测技术(SHM)是当前工程界与学术界研究的热点问题,它是一种在线、实时有效的获取结构状态信息的方法。本
本文通过对荣华二采区10
期刊
0Cr18Ni9不锈钢具有优良的力学性能以及耐蚀性、耐热性,广泛应用于石油化学工业、核反应堆等高温领域。目前国内对高温环境下0Cr18Ni9不锈钢疲劳、蠕变及蠕变-疲劳裂纹扩展等
下一代微电子制造、精密计量以及物理前沿探索等领域将要求提供亚纳米甚至皮米量级超精密位移测量技术设备作为基础支撑和关键手段。经典的外差激光干涉测量技术设备已被广泛
生物特征识别是未来最具潜力的身份认证技术。然而,当前大部分已知的生物识别方法都是基于二维或三维图像采集和处理,均存在种种不足,在采集成本、易用性、无创性和可靠性之间不
农谚说,“七九八九雨水节,种田老汉不能歇”.当前,“雨水”已过,全国春耕备耕和春季田管进入了关键时期.各地要在抓好新冠肺炎疫情防控的同时,坚持“因地因苗、分类管理,肥水
期刊
联合收割机是现代主要农业机械之一,已广泛地应用于我国农业生产中。传统的联合收割机在使用中大多靠操作者的感官和经验观察机器的工作情况,机手的工作强度高,对机手的技术
随着工艺水平的不断提高,超大规模集成电路(Very Large-scale Integration C ircuits,VLSI)的性能和集成度不断提升,但可靠性问题也日益突出。在众多可靠性因素中,负偏置稳定
本论文对预处理方法进行了研究,并在此基础上发展了一套具有一定通用性的适合于混合网格的流场求解器。为了验证算法的正确性,论文中对NACA0012翼型和CLARK Y小展弦比机翼的
随着科学技术的发展和工艺水平的提高,机械产品开始向高速、高精度、高加工性能及自动化方向发展。为解决大型复杂机械产品结构的强度、精度、可靠性等一系列基本问题,结构的分