自上世纪八十年代以来,移动通信快速发展。移动通信网络的运行管理面临着更多、更复杂的挑战,对移动通信网络的数据采集、分析和优化处理技术提出了更高的要求。因此,由福建省电信发起开发了一套CDMA无线网集中分析管控平台(产品名称:CDMA网维宝),来辅助CMDA网络规划与优化的管理,改善网优人员花费大量时间采集数据、手工分析、邮件督办的现状,提升网优工作的效率,在强调网络建设和优化的同时,同步打造具有我省特色的网络优化支撑手段。在平台的建设过程中,作者的工作是完成各种服务器端数据采集,编写数据库存储过程和java后台程序对采集的数据进行分析,然后通过MVC模式把分析的数据输出到前端展示,与网络优化工程师测试和验证分析结果,制作系统输出文档等。系统总体上达到了设计要求,但系统中部分模块的功能也存在数据采集效率低,分析过程主观因素强,得不到理想的分析结果的问题。本文的目标是针对开发CDMA网管系统过程中数据采集、数据预处理和数据分析业务的不足之处,以数据挖掘理论和大数据分布式系统为依据,重新思考并改进了这些过程。主要完成的工作有:设计和编写数据抽取和预处理模块,使用设计模式封装数据源的抽取和完善数据预处理的过程,为后续算法提供纯净数据;针对项目中对栅格聚簇存在离散现象的不足,提出利用聚类方法对聚簇进行算法上的改进,使聚簇结果相对集中;针对项目中对CDT话单数据的抽取和分析过程中效率低的问题,提出使用hadoop集群对话单文件的存储和分析进行改进的方案;把项目中用户的业务数据和套餐数据结合,利用Apriori发现频繁集,得出应该向哪些用户推荐新业务的分析结果;利用BP人工神经网络算法对网络中的性能指标数据进行预测实现告警模块从被动告警到主动预警的改进。