基于元数据的稽核系统中数据处理子系统设计与实现

来源 :北京邮电大学 | 被引量 : 3次 | 上传用户:liongliong522
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
稽核部门是商业银行中的一个重要部门,主要负责银行内部的审计工作。非现场稽核主要以业务源数据为基础,通过数据处理子系统得到稽核应用的衍生数据,利用这些衍生数据,对各种业务的合规性进行稽核审计。业务源数据是稽核系统的灵魂,业务源数据的准确与完整是成功完成稽核任务的基础。数据处理子系统根据业务源数据加工成稽核系统需要的各种指标值,在稽核系统中具有极端重要的作用。 数据处理子系统从企业数据仓库中获取业务源数据,通过ETL(Extract Transform Load)程序将数据传输到稽核系统,在传输过程中,ETL程序负责对源数据进行清洗和转换,以满足稽核系统后续指标计算的需要。数据进入稽核系统后,由数据处理子系统负责完成各种指标值的计算。 本文以某商业银行非现场稽核系统为平台,研究了基于元数据的数据处理子系统的设计与实现方法。系统充分利用了元数据的优势,在ETL过程中以元数据为基础,完成了数据导入脚本的自动生产、任务的自动调度等工作。基于性能的考虑,在设计系统架构时加入了ODS(operational data store)中间层,ETL模块首先将需要的数据由数据仓库传输到ODS,在ODS中对数据进行整理,然后将整理后的数据传输到稽核系统。根据稽核业务的需要,稽核系统中定义了许多指标项,这些指标项的计算方法以元数据的形式存储在表中,系统根据业务源数据计算出各种指标值,为系统的预警、监控、统计等功能提供了数据保证。 稽核系统是基于数据仓库的应用,涉及到的数据量十分庞大,大数据量对数据处理子系统的性能造成了不利影响,性能优化工作势在必行。本文从几个方面对性能优化工作进行了简单介绍,实践证明,这几种优化方法取得了较好的效果。
其他文献
十六世纪后半期,英国曾发生过一次令整个世界为之震惊的股票投机事件——"南海泡沫事件"。南海公司蓄意欺骗投资者,吹出了一个硕大的气泡,而当这个大气泡被刺破的时候,给英国人
用C5以上的醇(伯醇、仲醇)还原VOPO4.2H2O制备了VOHPO4.0.5H2O。用XRD、IR、TG、SEM对其进行了表征。
我国的人口老龄化已经发展成为了一个严峻的社会问题,在这种背景之下,如何应对老年人的养老问题已经成为被广泛重视的问题。目前,我国的养老模式以家庭养老和机构养老两种模
中海油某管道公司三个阀室应力应变监测系统自建成以来,与系统平台上的服务器通信频繁中断,无法实时监测管道的应力应变信息。经过多次实验分析,查找出引发通信中断的原因为
“预设式”教学模式特指在教师的主导下由学生自设排球技术学练目标的教学方法式样。“预设式”教学模式是以掌握性学习为理论基础,依据技术健身教学理论思想,提出以学生自设学
在天然气蒸气转化法制合成气生产工艺中,原料天然气中微量硫是蒸气转化催化剂失活(中毒)或使用寿命降低的主要原因之一.文章介绍了新型脱硫催化剂G1在扬子乙酰公司的应用情况
目前空间光学遥感载荷的相关设计工作仍依赖专家知识,对积累的历史数据挖掘不足。文章提出基于关联分析的空间光学遥感器指标自动推荐方法。以谱段设计为例,首先依据多维数据特征,整理遥感载荷应用方向与监测谱段数据,构建事务数据库;基于Apriori算法,设计有效规则筛选指标,提取遥感应用方向与监测谱段的关联规则,实现由具体应用自主推荐谱段指标的功能;最后,定量分析了大气、海洋、陆地等各类遥感应用方向与光谱中
以催化剂的评价和表征结果为依据,探讨了交换度,总碱度和总产率三者的关系,认为随着沸石中钾离子交换度的提高,分子筛表面总碱度急剧上升,甲苯,甲醇的侧链反应性能逐渐增强,但总收率
随着计算机技术的快速发展,大数据、信息化为企业的项目管理带来了新的挑战,同时也为企业的扩张带来了新的机遇。大数据时代下,目前的项目管理存在管理思维和管理理念未能与
共生理不仅揭示了事物发展的普遍联系和一般规律,而且它所建构的共生系统反映了事物发展变化的趋势和方向。基于共生理论,从共生单元、共生界面、共生环境、共生模式四个要素