一种基于元数据管理的ETL框架

来源 :浙江大学 | 被引量 : 0次 | 上传用户:leighttt
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
过去二十年是计算机行业发展的黄金时期。互联网的发展以及计算机软硬件的成熟,导致了企业的业务数据呈现爆炸性地增长。如何有效地管理与集成这些大量的异构异质的数据,以及如何利用数据为企业管理人员产生决策,成为技术专家亟需解决的问题。数据仓库便是一种近年来兴起的用以解决上述问题的数据库应用。事实上,数据仓库是一种体系结构而不是一种技术。这其中最重要的组成部分之一就是元数据。因为元数据贯穿于数据仓库项目中,是数据仓库的基石。另一方面,构建数据仓库时采用的最重要的技术之一是ETL,一种改变数据状态的机制。由于数据仓库项目不同于别的软件项目,业务需求时常变化。这直接导致了元数据的变化以及ETL过程的变动。因此,采用高效的元数据管理模型,并将其与ETL开发有机地结合起来,在实际的数据仓库项目过程中将起到事半功倍的效果。这也便成为了本文所要论述的课题。本文首先探讨了课题所涉及的理论与方法,其中涉及了数据仓库的几个主要步骤和所使用的工具。深入研究了元数据的几种类型,它们的区别和具体的业务意义。然后对ETL技术进行简单回顾,分析了创建ETL程序的两种基本方法和各自的利弊。本文接着结合通用数据仓库元模型(CWM),采用了一种邦联式的元数据管理体系。并将其用于ETL过程开发中,设计了一种生成ETL过程的自动化框架。最后将该框架用于实际的项目开发中,能够缩减项目周期,提高工作效率,从而验证了此框架的可行性。
其他文献
英语课堂教学中,教师的非言语行为对传递信息,调动课堂气氛,鼓励学生参与,优化课堂教学具有重要意义。大学英语教师应运用积极的非语言行为,刻意避免消极的非言语行为,恰当掌
随着人们生活质量的提高,对高品质食用油的需求也在不断增加。感官特性是油脂品质的一项重要指标,而香气是构成其风味的重要因素之一。不同的油脂都有其特征气味,我们很容易
青年是家具消费者的主要群体之一。由于心理、文化程度、收入水平、生活环境、生活方式、个性特点等因素决定,青年人对家具具有特别的消费需求。因此我们的家具设计工作也应
文章首先介绍了国内工业控制系统的安全现状,接着通过工业控制系统和传统信息系统的对比,结合各类安全加固措施和工业控制系统自身的特点,提出了中国工业控制系统加强安全防
<正>核心知识梳理1.相似三角形的性质.(1)相似三角形的对应角相等,对应边成比例;(2)相似三角形的对应线段(对应高、对应中线、对应角平分线)成比例;(3)相似三角形的周长比等
本文选用了一些商务英语信函范本为语料,对其中模糊语言的定义和功能进行了描述和解释,以关联理论翻译观为切合点来分析译者如何恰当地把商务英文信函中的模糊语译成汉语,旨
认知图式作为主体对客体与事件的解释框架,对于人的社会认知有着重要作用。该文通过对现有社会认知图式理论进行考察,认为认知图式导致了社会认知的偏差与重构,并提出事先对
加强新社会组织党建工作是党的建设的重大课题。现阶段,新社会组织党的建设存在的问题主要有:一是对新社会组织党建工作的重要性和紧迫性认识不足,二是党组织职能定位不清,三
马克思的自然观蕴含着丰富的生态伦理思想,对解决当代生态环境问题具有重要现实价值。马克思的生态自然观确证了自然界永续存在的权利和价值,为当代生态伦理建设确立了基本价
为了分析动叶顶部间隙泄漏流的流场特征和涡量变化规律,以某汽轮机为研究对象,采用大涡模拟方法对无围带和有围带动叶顶部的间隙泄漏流动进行研究。结果表明:无围带时,在0.85