【摘 要】
：
为提高大数据背景下面向数据流的分布式top-k监测的实时性和可用性,对监测多个数据流的分布式系统处理数据的过程进行研究,提出一种低内存占用的分布式top-k监测算法。通过使
【机 构】
：
农业部农业信息获取技术重点实验室,中国农业大学烟台研究院
【基金项目】
：
国家科技支撑计划基金项目(2012BAK17B09、2012BAJ18B07)
论文部分内容阅读
为提高大数据背景下面向数据流的分布式top-k监测的实时性和可用性,对监测多个数据流的分布式系统处理数据的过程进行研究,提出一种低内存占用的分布式top-k监测算法。通过使用有限的内存空间对原本杂乱分布于各节点的关键数据进行重新调整,对数据处理过程中可能遇到的各种情形进行分类,依照调整结果和分类结果指定相应的处理流程,使很大一部分数据更新操作可以不依靠网络通信,或仅依靠少量网络通信来完成,有效减少监测过程中的网络通信量,在保证监测实时性的前提下提高系统的可用性。实验结果表明,该算法是有效可行的。
其他文献
以研究事物的复杂性特征为主,坚持事物非还原性的复杂性科学,在兴起的三十多年来在各学科领域得到广泛关注并引起了人们思维的转向和方法论的变革。随着我国的高等教育进入到
大学标志性建筑,是大学形象的缩影和大学精神的彰显;大学标志性建筑,是大学师生引以为豪的标识和教育意义的象征;大学标志性建筑,是大学的符号和大学理念的承载。大学标志性
高校作为培养知识精英和顶尖人才的重要基地,承担着为广大学生提供优质高等教育资源并营造和谐学习环境的重要责任。近年来,随着高校的不断发展,高校校园安全问题日益突出,其
老舍笔下诸多人物的命运起落寄寓着作家的死亡意识,这种死亡意识具体表现为个人人格的殉难、民族气节的保全和浓厚的宗教意识三个方面,其死亡意识的形成与作家末世人的生活境
城镇化的不断推进带来的是建筑行业的蓬勃发展,但随之而来的还有大量能源、资源的消耗和大量增长的建筑垃圾。一方面废弃物占用土地、污染环境,另一方面建筑施工中的扬尘也与
教育是构建和谐社会的基石,是人才培养的途径,是国家发展的基础。“百年大计,教育为本”是我国历代领导人的治国方略,只有坚持优先发展教育,才能更好为社会经济发展提供人才
随着信息技术和网络通信的发展，整个人类社会进入了信息化时代，需要面对一个很重要的问题——信息安全。身份鉴别是信息安全的重要部分，它影响着我们生活的各个领域。声纹和指纹
为了最小化云计算系统的任务调度长度,结合表启发式调度技术和任务复制的思想提出基于路径优先权的任务调度算法。采用一种新方法计算DAG图中任务节点及边的权值,从最高优先
本文主要介绍了语音识别的整体流程和主流算法,并且对语音识别系统进行分类和总结,通过对车载语音识别系统以及离线语音识别系统的技术创新,发现目前已有系统存在鲁棒性、交
本文根据水泵学的原理，结合变频调速设备的性能，论述了变频调速水泵在选型设计中应注意的问题，以便使调速供水的新技术得到广泛的应用，以利水泵机组的节能降耗。