基于Spark平台的NetFlow流量分析系统

来源 :电信科学 | 被引量 : 0次 | 上传用户:xxakk3321
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目前典型的NetFlow分析系统多为基于私有架构或平台的第三方系统,面临扩展性较低、开放性不足、扩容代价大、分析时延长等问题。大数据技术的快速发展尤其是内存式计算平台如Spark的出现为集中处理大规模NetFlow数据提供了可能,本文提出了基于Spark的NetFlow分析系统,验证了核心算法(如流量应用构成统计)在Spark平台的性能。实验表明,基于Spark的NetFlow分析系统具有很高的性能和很强的扩展能力,较之Hadoop MapReduce有显著的性能提升。
其他文献
现代热轧卷取机的发展主要着眼于提高产品的产量和质量。电液伺服系统在现代的热轧卷取机中的应用主要是实现带头的自动步进回避,这样就有效地消除冲击,同时也使卷取过程中各种
“依法治国,建设社会主义法治国家”作为我国的基本治国方略已经载入《宪法》,这标志着我国开始进入推行法治、树立法律权威的新时期。法律至上是法治社会的基本原则和根本特征
由于出版市场竞争的日趋激烈和数字出版对传统出版的冲击,我国广大出版社对教材出版的重视日甚一日。作为主要利润源,教材已经成为众多出版社追逐的出版对象。随着数字出版的
电力设备健康状态的全面在线评估是平衡经济性和可靠性的最佳策略。建立中压真空断路器的评估模型:通过分析断路器各主要组成部分的故障特征,构建健康性能评估指标集;定义完
<正>《要塞》是法国著名作家圣埃克苏佩里写的,作者认为这是他最为重要的作品。然而,由于这位战斗英雄在一次飞行任务中意外失踪,这部作品没有写完;相比于他风靡世界、被公众
期刊
钢纤维混凝土是一种新型建筑材料,以其突出的力学性能、简便的施工工艺、显著的经济效益日益受到工程各界的重视。本文围绕异型钢纤维增韧性能做了如下研究工作: ◆分析了钢
在我国城镇化快速发展时期,城乡一体化将是未来的发展方向。目前,国内经济较为发达地区都有城乡公交。客流OD矩阵是规划的基础资料,对站场布局设计,公交需求预测和公交线网布
鉴赏古诗文的音乐美、意境美、语言美始终是我们古诗文教学的目标,诵读应贯穿教学的始终。尤其在新的课程标准的要求下,更应该充分发挥学生的主动性和创造性,培养学生对古诗
<正>图案丰富多彩的侗族刺绣,是侗族女性用一针一线在侗布上刺出来的。侗族刺绣是侗族优秀文化遗产中的一个亮点。如今,湖南、广西、贵州的侗族刺绣不仅走向产业化,还对规范