融合大数据技术架构在大型商业银行海量数据分析的应用

来源 :计算机系统应用 | 被引量 : 0次 | 上传用户：hunterxjtu

【摘要】

：

相对于软硬件一体的企业级数据仓库解决方案,以X86开放式硬件平台为基础的并行处理数据库和Hadoop/Spark生态体系,在扩展性和低成本方面有明显的优势,随着其不断发展成熟,已

【作者】

：

金磐石朱志沈丽忠

【机构】

：

中国建设银行股份有限公司,中国建设银行股份有限公司厦门开发中心

【出处】

：

计算机系统应用

【发表日期】

：

2018年10期

【关键词】

：

大数据融合技术架构数据分析数据仓库商业银行 big data architecture data analysis data warehouse com

下载到本地 , 更方便阅读

下载此文赞助VIP

声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架

论文部分内容阅读

相对于软硬件一体的企业级数据仓库解决方案,以X86开放式硬件平台为基础的并行处理数据库和Hadoop/Spark生态体系,在扩展性和低成本方面有明显的优势,随着其不断发展成熟,已经成为企业级大数据平台不可或缺的一部分.本文从如何应对＂大数据＂所带来的挑战出发,提出一套适用于大型商业银行数据分析处理的融合大数据技术架构,并已取得应用实践的成功.

其他文献

基于不完备信息系统的灰度优势粗糙近似模型

为解决不完备信息的偏好决策问题,多种优势关系及其相应的粗糙集模型被提出并证实其实用性.然而在实际情况中,只要存在缺失值那么无论使用何种方法对比出来的优势关系都存在

期刊

不完备信息系统灰度优势关系粗糙集广义扩展优势关系incomplete information system grey dominance relati

云环境中Web应用的微服务架构评估

云计算为我们提供了一种全新、高效的方式来部署可扩展的Web应用,这种方式使企业的应用可以按需对计算资源进行分配.微服务架构用于将庞大复杂的应用系统拆分为一系列可独立

期刊

云平台微服务持续交付可扩展应用

Linux设备驱动程序自动更新及辅助工具

研究了Linux设备驱动程序的自动更新方法,建立了基于源码的Linux设备驱动辅助更新模型,设计并实现了一组相应的自动更新支撑工具,包括Linux设备驱动程序对内核依赖接口的分析

期刊

设备驱动自动更新内核依赖接口源码LINUXdevice driversautomatic updatingkemel-dependent inte

针对舆情数据的去重算法

针对在数据服务中舆情去重不可避免且缺乏理论指导的问题,通过研究Sim Hash、Min Hash、Jaccard、Cosine Similarty经典去重算法,以及常见的分词和特征选择算法,以寻求表现优

期刊

舆情数据去重算法相似度计算大数据服务public opinion data duplicate removal algorithm similari

Xen的I/O虚拟化性能分析与优化

在Credit算法应用中,由I/O事务唤醒的VCPU处于最高优先级BOOST状态,优先抢占PCPU资源,使I/O操作的响应速度提高,但多个虚拟机同时进行I/O操作时,会引起较长延时和公平性原则

期刊

I/O虚拟化CREDITSEDFCredit2L-CreditI/O virtualization Credit SEDF Credit2 L

旅游自动应答语义模型分析与实践

针对常见问答系统采用的以词法分析为基础的浅层语义模型难以有效挖掘用户问句深层语义的问题,本文立足于旅游问答应用领域,采用组合范畴语法对旅游问句进行句法分析,使用Lam

期刊

旅游问答系统组合范畴语法lambda演算语义模型监督学习tourism QA system combinatory categorial gramm

静态黑洞路由网络架构在校园网应用的配置方案

路由协议是TCP/IP协议族中重要成员之一,包含内部网络协议和外部网络协议,高校常见的网络协议是静态路由及OSPF路由.本文分析和总结OSPF协议及静态路由相关概念,针对高校网络

期刊

静态黑洞网络架构方案static black hole network architectures scheme

基于无迹卡尔曼滤波器的改进SLAM问题求解方法

目前在即时定位与地图构建(Simultaneous Localization And Mapping,SLAM)的研究中已经使用局部取样策略来降低无迹卡尔曼滤波(Unscented Kalman Filter,UKF)的计算复杂度至

期刊

SLAM无迹卡尔曼滤波(UKF)局部取样计算复杂度

L1范数约束正交子空间非负矩阵分解

针对非负矩阵分解（NMF）相对稀疏或局部化描述原数据时导致的稀疏能力和程度比较弱的问题,提出了L1范数约束正交子空间非负矩阵分解方法.通过将L1范数约束引入到正交子空间非负

期刊

非负矩阵分解正交性L1范数稀疏性Non-negative Matrix Factorization （NMF）orthogonalityL1 nor

基于Selenium的Web自动化测试解释器

Selenium自动化测试工具在测试领域已经被广泛应用.使用时它需要依赖其它编译器或解释器才能执行测试.一方面让测试人员需要熟练的编程技术才能使用,另一方面让测试开发难度

期刊

解释器SELENIUMWEB自动化测试interpreterSeleniumWebautomated testing

融合大数据技术架构在大型商业银行海量数据分析的应用

与本文相关的学术论文