基于MapReduce的无线网优平台数据分析方法

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:pjliuchuang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着时代的发展和人们需求的不断提高,通信行业在过去的几十年里发生了翻天覆地的变化,尤其是移动通信的迅速发展,使用户彻底摆脱终端设备的束缚,实现了完整的个人移动性。进入21世纪,移动通信已逐渐演变成社会发展和进步必不可少的工具。随着移动通信的发展,运营商的业务和用户在不断的增加,这导致移动通信网的规模不断的扩大,为了进一步提高移动通信网的质量和用户的体验,无线网络优化工作的重要性日益突显出来。在无线网络优化中数据分析是一个重要环节,因为所有的无线网络优化工作都是基于基础数据的分析结果去发现问题并解决问题,但随着移动通信网业务和规模的不断扩大,越来越多的无线网优数据产生并积累下来,这对传统的数据分析方法提出了严重的挑战。面对目前海量的无线网优数据,传统的数据分析方法基本会采用数据分割、建立索引、使用临时表和缓存等策略来处理但由于其单机运行、设计不合理等因素导致数据分析效率低下、性能上有瓶颈、可扩展性差等问题。因此设计一种高效的、性能和可扩展性都有保障的数据分析方法是十分必要的。为了解决上述问题,本论文研究了无线网优数据的特点、数据分析的需求以及当前大数据处理技术MapReduce等内容,基于MapReduce这个分布式处理模型提出了一种基于MapReduce的数据分析方法,并依据此方法在Hadoop平台下实现了一个分布式数据分析平台。通过对该平台进行测试实验,证明该数据分析平台能高效的完成目前海量无线网优数据的分析任务,满足无线网优平台数据分析的要求,所以本文提出的基于MapReduce的无线网优数据分析方法是合理有效的。
其他文献
摘 要本文首先针对校园网网络管理中故障管理的需要,对SNMP协议、WBM的实现技术和标准,及网络故障管理的方法进行了研究。然后利用分层树状体系结构的思想,设计并实现了基于W
无线传感器网络主要用途为采集环境数据,如无线石油勘测网络、火灾预警监测网络、战场环境探测网络等。然而,由于无线传感器内部器件易于损坏,且长期工作在不可预知的环境中,
本文在详细分析现有的矿井安全可视化研究现状的基础上,根据矿井的实际情况和需要,针对已有软件的不足,提出了开发矿井安全可视化交互系统的设想并加以实现。该系统采用组件化的