基于多数据源的BI数据展示平台的设计与实现

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:kf_haiyang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在这个互联网飞速发展的时代,同时也是数据大爆炸的时代,互联网企业可以使用一些相关技术从各种途径去收集企业业务运营过程中的各种数据,通过对这些数据进行有效分析,一方面可以用来获取企业的业务运营状况;另一方面为企业下一步战略决策、业务调整提供指导意义。使企业做到更好的线上化运营,这些数据作为企业的核心资产,是提升企业核心竞争力的关键。但是如何对浩瀚如海的数据进行快速科学的处理,从海量的数据中获取对企业管理和企业决策有价值的信息是企业所面临的首要问题。BI(Business Intelligence)即商业智能技术的出现则为上述问题提供了新的理论基础和技术选择。商业智能是指利用数据仓库、线上分析处理等技术对客户数据进行系统的存储和管理,并通过各种数据统计分析工具对业务数据进行分析并进行可视化展示,从而实现企业对数据进行有效的管理和整合。实现数据的商业价值。本文是对基于多数据源的BI数据展示平台的设计与实现,在前期,完成了企业数据需求的调研工作,通过对企业实际数据需求进行分析,确定了企业中数据需求分为实时数据需求和离线数据需求两大部分。接着通过选取合适的大数据组件,实现了企业实时数据仓库和离线数据仓库的技术架构设计。本系统多数据源则指的是企业实时数仓和离线数仓。本文介绍的系统中离线数仓使用hive实现,实时数仓使用kudu+impala实现,实现了离线数据获取和实时数据的获取工作。同时,在数据仓库中完成数据的治理工作。BI数据展示平台通过接入企业数据仓库数据源实现一系列报表展示功能来支持用户特殊的数据分析需求。本系统采用B/S架构,通过Go语言进行开发,web框架选用的gin框架。具体实现的功能包括报表配置、数据模型配置、个人门户管理等功能,针对用户数据展示与数据分析需求,支持用户根据企业组织架构维度进行上卷和下钻操作,多维度展示数据,任意时间段筛选报表数据等,同时还支持用户导出页面展示数据为excel文件等功能,实现BI数据展示平台的数据可视化工作。最后,通过对系统功能进行测试并对展示数据进行分析,完成了系统的线上部署工作,在项目试运行阶段,该系统能够有效的支持企业相关人员的数据需求,极大的提高相关人员的工作效率,具有良好的用户体验和使用价值。
其他文献
随着我国改革事业的深入发展和社会生活的矛盾日益加剧,公民利益表达的意愿非常强烈,然而,利益表达的传统渠道,已经不能适应当下公民越来越多的利益表达需要,与此同时,网络平台发展越来越快,载体也更加多样,公民可以更直接的进行表达,网络平台正以其独特的优势成长为最受欢迎的表达途径,但是我们也可以发现,互联网是虚拟的公共领域,人们可以不用真实身份,就可以进行网络表达,这也为非理性利益表达行为滋生了温床,这不
近年来,越来越多的消费者变得习惯于使用在线点评类软件。他们在消费前进行全面的搜索与对比,消费时进行签到打卡,并在消费后发表自己的体验与感受。如何利用这些与商业活动密切相关的海量在线点评软件数据,预测城市商业活跃度和商业实体的变迁趋势,对于城市规划和投资价值分析具有重要的现实意义。然而一方面现有的城市商业活跃度预测方法存在着如何捕获非线性时空关系、如何提取局部空间关系以及如何建模近期与周期性时间关系
随着移动互联网技术的快速发展,在线学习成为获取学习资源的重要途径。一个良好的推荐机制能够有效的在在线学习中为用户推荐合适的学习资源。本文旨在研究一种新型OTS推荐机制,开发一个在线学习系统,并将OTS推荐机制应用于在线学习系统中以验证其效果。本文首先介绍了课题提出的背景与意义。从在线学习的发展及用户对推荐效果的需求出发,阐述了新的推荐机制出现的必要性。然后介绍目前的主流推荐算法并分析各自的优缺点。
唐传奇被称为“一代之奇”,这种“奇”不仅体现在情节曲折奇幻的故事中,也附着在众多个性鲜明奇特的女性形象上。本文试图从多维视角分析唐传奇的女性形象,继而窥探唐传奇作者的女性观以及女性观的矛盾性,据此分析唐传奇女性观的文化内涵。本文主要分为四个部分:第一章分析唐传奇中的女性形象,首先从女性少年时期、追求婚恋期、家庭主体期以及步入老年期四个不同人生阶段分析唐传奇的女性形象。有些类型女性的人生阶段性特征并
元语言意识对于英语词汇拼写和词汇阅读有着重要的作用。本研究考察了中国大学英语学习者的元语言意识三个不同维度,即语音意识,正字法意识,词素意识对英语词汇拼写和阅读的
全光输运带是一种利用激光产生的光力在空间形成特殊带状区域,在区域内能实现对微小物体局域限制与输运等光操控,该区域和现实中的物体输运带类似。这种全光输运带可以通过输运带将微纳物体输运到指定的位置,而且可以控制被输运物质的输运速度和时间。这种全光输运带的输运对象是微小物质,具有无接触、无损伤、易操控、易集成等优点。在操控微米小球、生物细胞、生物分子以及一些纳米物质等方面有很重要的应用。目前在此方面的研
随着铁路运输货运量不断增长,编组站的作业量也越来越大。驼峰的解编效率对编组站的运营有着重要的影响,而调速系统又是驼峰进行解编和溜放作业的核心,它的使用效果直接影响
随着经济社会的不断发展,企业社会责任活动越来越受到大众的关注,企业管理者也越来越重视企业社会责任的履行及披露。而在学术界,关于社会责任的研究逐渐丰富,不少学者对企业社会责任与融资成本、企业绩效等方面的关系进行深入研究。从目前研究现状来看,有部分学者把研究目光放在了企业社会责任及股价崩盘风险的关系上,但相关研究结论不一,也尚未出现考察其他因素的调节效应的研究。从现实来看,企业社会责任会对其股价崩盘风
全面深化改革的总目标就是要实现国家治理体系和治理能力的现代化。兵员动员是国家经常性的政治工作,这种基层政治工作所反映的行政方法和理念对于新时代中国实现治理体系和能力现代化具有的重要意义。探讨国民政府在四川的抗战兵员动员,分析其产生逆动员的表现及根源。能够吸取国民党开展基层工作的教训,并对今天兵员动员理论工作和实践工作以深刻的启示。界定和构建兵员动员与逆动员的相关理论,剖析抗战时期国民政府开展兵员动
蜀道是人类社会最早开通并保存至今的大型交通遗存之一,作为重要的线性文化遗产,已经被列入中国世界遗产预备名单,且成为四川省重点打造的文旅品牌之一。研究四川大蜀道旅游资源的空间分异与开发对于实现大蜀道差异化发展、蜀道遗产的保护、优化旅游空间布局和改善地区经济结构,制定针对性强、行之有效的优化策略具有较强的实践指导意义。本文以四川省大蜀道沿线22个区县的427个旅游资源点为研究对象,在运用旅游空间结构理