基于Hadoop分布式文件系统的商业银行大数据分析

来源 :山东农业大学学报(自然科学版) | 被引量 : 0次 | 上传用户:wergsdf
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对当前Hadoop分布式文件系统数据分析时存在的数据读取时间长,数据本地化率低等问题,本文提出了一种基于Hadoop分布式文件系统的商业银行大数据分析方法。首先对Hadoop分布式文件系统的工作原理和流程进行分析,找到引起不足的原因,然后根据商业银行大数据的特点,对Hadoop分布式文件系统的数据副本数量和数据分布位置进行相应的改进,最后通过仿真模拟实验对数据读取速度、本地化率、磁盘负载等进行分析。结果表明,本方法可以有效减少数据读取时间、提升数据本地化率并均衡磁盘负载,整体性能要明显优于对比方法,具有更好的实际应用价值。
其他文献
<正> 密苏里植物园1 859年建成开放,是美国最古老的植物园之一。它也被称为萧园(Shaw’s Garden),以纪念它的创建人Henry Shaw,受他家乡英格兰当地花园和植物学家George Enge
运用身体美学的理论知识,作为为动画艺术构建一套"专属的美学标准"的第一步,同时试图阐明动画艺术所具有的多元而先锋的存在意义。动画艺术的身体本体论和身体创造论是所讨论
目前,在单层衬砌设计中应用较为广泛的是基于挪威法的Q系统支护设计法,但该方法涉及的参数有6个,在施工前及施工过程中测试这些参数经验性较强,准确性不高,而且费用较高;将Q
水中健身操是一项新兴的体育运动项目。本文运用文献资料法、逻辑分析法、访谈法和实地考察法,对参加近六届全国水中健身操比赛已有的录像资料,就其发展趋势以及比赛情况方面
在以病毒载体介导的基因治疗研究中,重组腺相关病毒(rAAV)因其疗效和安全性方面的优势,是最有临床应用前景的载体。但其转基因包装容量一般不能超过5.0kb,给需要转导大片段基
目的探讨儿童期与青少年期首发精神分裂症临床特征的差异。方法回顾有完整的临床资料的首发精神分裂症患者73例,按发病年龄分为儿童组和青少年组,对两组患者的临床特征进行对
目前国外传媒教育较为发达,各国培养体制也呈现出不同的特点,其中又以美国、英国、日本三国的传媒人才培养体制颇具特色,具有一定的典型性和代表性。本文通过对比这三国的传
目的:对比分析主动脉腔内修复术(EVAR)与传统外科开腹手术治疗腹主动脉瘤的临床效果。方法:回顾性分析行主动脉腔内修复术治疗的39例患者(EVAR组)、传统外科开放性手术的48例
首届“南新仓文化旅游产品创意设计大赛”颁奖典礼将于本月在600年历史的皇家粮仓南新仓隆重举行。相关领导将为获奖作者颁发奖杯、证书和奖金。$$    彰显“恒久魅力南
报纸
中国新闻教育在初创时期深受美国影响,1949年后,又开始全面借鉴苏联模式。目前中国的新闻教育和美国差异明显,这体现在人才培养目标、学分要求、课程设置、教师背景以及实践