基于Hadoop的虚拟筛选监控模块研究

来源 :兰州大学 | 被引量 : 0次 | 上传用户:chengm1
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
虚拟筛选是药物发现的重要手段之一。大规模虚拟筛选涉及海量数据的处理,传统的虚拟筛选过程需要准备大量的数据(如查询小分子化合物、上传数据、下载结果等),化学家的工作非常复杂和繁琐。实现虚拟筛选的自动化,不仅可以减轻化学家的工作负担,而且能够提高虚拟筛选的并行执行效率。由于Hadoop处理海量数据的优势和分布式编程框架MapReduce并行运行的特点,使其成为实现分布式环境下虚拟筛选自动化的十分有效的平台。扩展Hadoop平台的资源监控和作业调度方法,使其能够更好的符合虚拟筛选应用,是虚拟筛选自动化系统中十分重要的功能。本文借助监控模块对分布式节点和节点中的作业进行收集和监测来实现结果数据的自动化管理。本文主要工作分为以下两个方面:一,根据分子对接作业执行时间长,可并行执行且时间差异大的特点,扩展使用Hadoop提供的公平调度算法对作业队列进行调度,并将模N算法和Hash Partition算法相结合,使得作业能够更有效地分发到各个节点中运行,以此达到负载均衡的目的;二,利用Hadoop开放的接口,对节点配置信息和系统日志信息进行处理,从而获取资源负载信息和作业执行信息;同时为了便于用户了解系统环境的运行情况,提供实时的信息展示界面,以帮助用户了解平台的运行情况和作业的执行进度。
其他文献
为了解决毛巾织机织造过程中由毛经纱张力波动带来的毛经纱断经、毛圈退毛等技术难题,提高毛巾织物的质量,本文以国内一款毛巾织机为研究对象,研究毛巾织物毛圈成型过程中的毛经纱张力变化规律,获取毛经纱张力波动的影响因素;研究活动后梁的动态响应特性,获取缓解毛经纱张力波动的后梁系统结构参数,为后梁系统的结构设计和运行工艺参数设置提供依据。通过毛经纱在起毛过程中的路径变化规律的研究,定量地分析布动式毛巾织机布
电声器件主要包括扬声器、耳机、传声器、受话器等利用电和声进行转换的器件,主要应用于智能手机、平板电脑、智能电视等以智能化为特征的消费类电子产品中。本文以应用最为
近年来,随着我国医疗改革的持续深入、国内医药企业的技术进步与市场营销优化、体外诊断试剂产业的蓬勃发展,作为医药产业的一个细分领域,体外诊断试剂企业迎来了一个很好的发展契机。由于整体起步较晚,我国中小型体外诊断试剂企业普遍存在市场营销能力不足的现象,因此企业必须重视研究和优化营销策略。本文选取一家中小型体外诊断试剂生产企业YL公司开展营销策略研究。通过文献研究确定研究的理论框架和研究手段;通过搜集公
限制转售价格作为纵向垄断手段之一是上游企业通过各种手段限制下游企业销售产品的价格,以达到实施企业的目的,而其会导致损害下游企业的权益,也会损害消费者利益,甚至会破坏
风电功率预测对维护电力系统稳定及制定电力调度计划等有着重要的意义,然而风电所具有的波动性、间歇性及不确定性会严重影响其预测的精度,针对此问题,提出一种基于非参数区
电力作为当前社会发展必不可少的要素,对国民经济的健康有序运行起到至关重要的作用。作为我国目前主要的发电源,化石能源支撑着整个国民经济的正常发展。其中,煤炭作为主要
随着经济的快速发展,私募股权投资已经逐渐成为全球金融领域最受关注的投资力量之一,我国越来越多的企业也通过私募进行融资。因为只有良好的公司治理机制的企业才能长久的生
组蛋白去乙酰化酶抑制剂(HDAC i)通过影响组蛋白乙酰化水平,调节基因表达而产生抗肿瘤作用。本研究合成一种新型异羟肟酸类HDACi N-Hydroxy-4-phenylacetylamino-N-p-tolyl-b
随着科技水平的快速发展和导航技术的不断提高,人们的生活中以及相关的科学研究中越来越离不开导航技术。随着全球卫星导航系统的不断升级,其应用领域也在不断拓展,从海陆空定位到对农业生产的监控,从对渔业、林业的管理到防灾减灾,导航技术都起到了重要的作用。导航技术的提高为信息科学的发展拓展了空间,现在拥有先进的导航技术已经成为一个国家与民族科技进步的重要标识。近年来,随着各国导航系统的飞速发展,针对北斗卫星
全球范围内的气候变暖,自然灾害的频繁发生,引起人们对环境问题的反思,牺牲环境带来的经济增长,不是长久之计,低碳经济才是发展趋势,减少碳排放势在必行。为了人类社会的可持续发展,联合国大会通过的《联合国气候变化框架公约》对缔约国的温室气体排放做出了要求,世界各国都在积极采取措施来应对气候变化,我国也制定了温室气体减排的目标。重污染行业对环境的污染严重,该行业作为碳排放的首要责任主体,成为国家环保部门的