基于Storm的任务调度:现状与研究展望

来源 :计算机科学 | 被引量 : 0次 | 上传用户:bmw335
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
以ApacheStorm为代表的分布式流式数据处理系统能够在复杂大数据处理环境中提供低延迟的处理,因此受到了学术界和工业界的普遍关注。在分布式流式数据处理系统中,任务调度是决定系统性能的关键因素。一个优秀的任务调度器能够为系统带来更高的吞吐量、更低的处理延迟和更好的资源利用率。Storm原生的任务调度器需要用户手动设置并行度,并且使用简单的轮询方法进行任务分配,在实际应用中性能较差。针对这一问题,研究者提出了多种面向Storm任务调度机制的优化策略。文中综述了Storm任务调度机制的相关工作,首先介绍了S
其他文献
2012年3月6日,位于西部地标四川电视塔下的成都339项目召开了隆重的媒体见面会,深度解析川塔正在发生的巨大转变和即将呈现的美丽未来。
近日,外媒报道,美团点评已展开地图开发工作,于招聘网站拉勾网上发布了十余个相关职位,涉及路径算法、数据挖掘、机器学习等方面。  对此,美团回应去年组织机构升级中成立了LBS平台,含LBS服务、网约车、大交通、无人配送等部门,其中就包括地图业务,正式承认美团地图项目的存在。  艾媒咨询发表的《2019 Q1中国手机地图行业市场检测报告》显示,预计2019年手机地图用户将达到7.55亿人,高德地图与百
报纸
正长期以来,受应试教育的影响,有些数学教师重智育、轻德育,认为数学教学中不易渗透德育教育,从而放弃了数学教中进行德育教育的机会,淡化了数学教育的德育功能,影响了学生整
从循证医学的局限性入手,究其本质,阐述循证医学侧重于解决医学中自然科学属性问题,但在临床运用中循证医学往往患者因素考虑不足,即缺乏人文因素或人性化因素,进一步探讨了
在新闻传播中新闻信息除了具有客观真实性,同时还存在着无真实判断现象。所谓无真实判断现象,就是指新闻传播中记者和媒体在对一些新闻信息的客观真实性无法判断的情况下,就
在大数据背景下处理海量数据时,数据的获取和分析手段至关重要。本文运用网络平台的开放接口API,对特定的地理区域和特定的用户采集包含时空信息的数据,建立了一个通过模拟登
介绍了国内外水电站监控系统的发展情况和一种基于Profibus现场总线技术的无人值守监控系统。该系统以控制理念、拓扑结构、控制手段和硬件设备保证了系统的安全、可靠,实现
目的探讨延续护理对高危新生儿母乳喂养的影响。方法对高危住院新生儿,住院期间母乳喂养,出院7天进行电话随访,给予喂养、皮肤护理等指导,出院后每月到我科进行延续护理干预
中国传统音乐教学是传承与发展传统文化的重要途径之一,它肩负"人才培养"与"科学研究"的双重任务。根据辽宁省教育厅网站数据显示,2014年辽宁省高等教育的毛入学率已经达到了52%[
外科医疗水平日益提高不仅得益于新设备、新材料和新技术的开发利用,还在于对病人的整体评价和适当处理大大提高了外科治疗的安全性.反过来看,如果外科医生仅仅热衷于掌握硬