【摘 要】
:
随着信息时代的飞速发展,各种数据正在迅猛增长。目前在传统的电信行业,日志系统和用户订单系统等海量数据的读取和查询,大部分还是依赖于传统的关系型数据库,存在高并发读写的性
论文部分内容阅读
随着信息时代的飞速发展,各种数据正在迅猛增长。目前在传统的电信行业,日志系统和用户订单系统等海量数据的读取和查询,大部分还是依赖于传统的关系型数据库,存在高并发读写的性能瓶颈,存储代价高昂(需要昂贵的专用磁盘阵列),数据架构的水平扩展困难,而且数据维护、转储和分析的代价较大。Hadoop分布式云计算平台的出现,完美的吻合了企业级的海量数据应用的要求,使得它成为当代企业解决海量数据困境的不二选择。论文首先对云计算的特点及其关键技术,以及电信的云计算平台,进行了初步探讨;分析了开源的分布式云计算平台hadoop的架构,重点分析了hadoop中的分布式文件系统、MapReduce并行编程模型以及非关系型数据库Hbase。接着结合电信目前的大数据状况,分析了系统的整体需求;对核心的HBase的通用数据接口进行了整体设计;对BOSS系统中的订单数据、积分账户信息和日志数据的处理进行了分析,并进行了存储设计和数据变更设计。然后根据具体设计方案,对HBase数据通用接口,订单数据,积分账户信息和日志数据的处理,给出了具体的设计,进行了编码实现。最后搭建了开发环境,进行了系统的实际运行,并对结果进行分析,充分验证了论文所提方案的优越性和技术可行性。
其他文献
<正> 钢制散热器问世以来,具有强大的生命力,在欧洲一些国家已取代或正在逐步取代铸铁散热器。例如,在瑞典、挪威、芬兰等北欧国家已完全停止了铸铁散热器的生产,在西德70%以
<正> 一、引言导弹的问世使武器系统乃至作战方式发生了质的变化。尽管最初它的命中精度还很低,但仍引起了世人的瞩目。随着导弹应运而生的制导技术不断创新,又推动导弹飞速
随着塑料工业的发展,塑件在精密仪器和电子仪表等行业中的应用愈来愈广泛,并且不断地替代许多传统的金属零部件。同时,对于它们的精度要求也越来越高,精密注射成型成为塑料成
近年来,随着人们对于钢琴教学的重视程度越来越高,在钢琴教学中,又衍生出一种新的教学模式,那就是双钢琴教学法。双钢琴教学,需要演奏者具有较高的协作意识,两台钢琴并排放置
本文主要从小学英语教师在英语课程资源的开发和利用中所要遵循的原则入手,提出四点:紧扣教学主题;服务教学目标;注重课堂实效;提倡反复利用。
This article mainly starts
<正>数学的学习离不开阅读。阅读是一种从印的或写的语言中取得意义的心理过程,作为一种基本的智力技能,是由一系列的过程和行为构成的总和。它是一种理解与解释行为,其过程
本试验旨在研究二维和三维培养模式下奶牛乳腺上皮细胞形态及酪蛋白表达的差异。利用组织块培养细胞来分离奶牛乳腺上皮细胞,利用有限稀释法克隆奶牛乳腺上皮细胞。通过显微
目的比较阿替普酶与尿激酶治疗急性脑梗死的效果。方法选取2017年1月至2018年12月偃师市人民医院收治的60例急性脑梗死患者,按照随机数表法分为对照组和观察组,各30例。给予
<正>小学生习作的重要性已毋庸置疑。目前,小学生从三年级就开始正式写作文,且每周还要写2~3篇读书笔记、日记,奇怪的是学生的习作兴趣及水平就是上不去。只要一提作文,只要一
随着高等教育体制改革的进行,高校逐渐由单校区从多校区转变。一方面,多校区满足学生数量的增长需求,另一方面,多校区高校也是高校发展的必然趋势。本文通过分析多校区高校的