大数据环境下基于Hbase的分布式查询优化研究

来源 :计算机光盘软件与应用 | 被引量 : 0次 | 上传用户:xiaomay2
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
大数据环境下数据库所存储的数据量呈爆炸式增长,如何保持高吞吐率并让客户得到满意的数据查询和处理结果,已经成为一个急需解决的问题。金融、电信以及互联网等行业要求企业的统计分析平台能支持分布式、高可用性和可扩展性的分布式查询环境,以便能及时高效的完成查询分析任务,做出更合理的业务决策。目前已经有很多公司在一定范围内将应用从关系数据库向Hbase进行迁移,但是大多数都是和Hadoop MapReduce或Hive结合使用,导致数据量增加后的分布式查询耗时过长,性能也随之下降。此外Hbase也有其自身的局限性,不能兼容传统数据库上的SQL应用。本文在分析了现有分布式数据库系统平台并深入研究Hbase的实现原理及高级特性的基础上,提出了基于Hbase的可扩展性查询优化方案(Hbase DSPE),即把Hbase的优点和SQL的易用性结合。这样做有助于对复杂SQL查询的优化,可以充分利用Hbase的诸多高级特性进行查询性能调优,对企业在大数据环境下从传统关系数据库向大数据平台的迁移具有现实的指导意义。
其他文献
目的:分析我国儿童、青少年20年间身高和体重的变化趋势及其特点。方法:选择1985、1995和2005年的全国学生体质与健康调研数据,以身高和体重为指标,应用LMS方法绘制我国7~18岁
对职务犯罪使用技术侦查,适应职务犯罪的特点,是在控制犯罪与保障人权冲突中取得平衡的最佳选择。为了防止技术侦查的过度使用和对公民权利的过度损害,我国在职务犯罪侦查中
数学方法是对研究对象所抽象出来的数学模型,从量和结构两方面进行分析的方法。物理学除了要求对物理现象进行解释之外,更是一种重视定量的科学,因此离不开数学方法的协助。
非物质文化遗产作为农业文明的产物,近年来境况不佳。现代影像媒介兼具艺术与传媒的双重身份,是保存和传播非物质文化遗产的有效方式。本文提出"非物质文化遗产的影像化生存"
<正>学龄前儿童正处于"读图"年龄段。图画书对孩子的视觉震撼比知识效果更为直接。图画书对儿童情感,想象力,灵敏度以及审美感的启迪,正是他们日后成功与快乐生活的源泉,正是
<正>据美国科技博客Re/code报道,上周苹果与三星的专利诉讼曝光了一份颇有意思的文件——谷歌有关Android的一份早期内部文件,从该文件可以看出Android在2006年也就是苹果iPh
探讨大容量快速检测仪(HVI)检验得出的棉花杂质指标和传统仪器检验得出的棉花含杂率之间的关系。通过整理甘肃省2007年度棉花检验的大量数据,分析了HVI杂质面积率、HVI杂质粒
2003年4月中华人民共和国教育部颁发了《普通高中课程方案(实验)》,同年又依据该方案颁布了《普通高中体育与健康课程标准(实验)》(以下简称《标准》)。2004年下半年,山东、
上世纪90年代末,随着期刊价格的不断上涨,引起了“学术期刊的危机”,由此兴起了开放存取运动,它倡导互联网环境下学术信息的免费自由共享。OA期刊是实现开放存取的两种主要途