基于ETL的省级等级公路路网数据仓库与可视化系统研究

来源 :长安大学 | 被引量 : 0次 | 上传用户:bidhq0716
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着社会经济和公路交通行业的快速发展,在省级等级公路领域逐渐面临更多更复杂的新问题。陕西省公路领域大多部门的现有存储设备较为老旧,性能不足以支撑百万级数据的并发。并且由于各个部门之间的数据信息结构不同,交互性差,甚至产生了信息孤岛。如何对海量公路数据高效处理,是公路信息化建设中亟需解决的重要问题。本文给出了一种基于ETL(Extract-Transform-Load)的省级等级公路路网数据仓库搭建与可视化的方法,并实现了数据的可视化,主要内容如下:(1)通过对省级等级公路数据的整理与分析,总结出多源异构的形成原因。针对数据多源异构的特点建立公路路网数据仓库模型,并对其中STG,ODS层的字段进行详细设计。(2)设计并实现了省级等级公路数据仓库数据抽取、清洗转换、存储、提供的处理全流程。利用建立临时表和发布者订阅者通信模型的方式,优化了数据仓库的抽取模块,并进行测试。结果表明优化之后的系统可以实现短时间内对海量省级等级路网数据的抽取,提高抽取效率。(3)以设计好的公路路网数据模型为核心,利用数据仓库的ETL技术对来自各省级等级公路部门的多源异构数据进行抽取与加载等处理,最后通过可视化方法对处理过后的数据进行展示,完成了数据的全流程处理。测试结果表明数据可视化环节能够进行报表查询,主题查询以及电子地图查询的功能。利用基于ETL的省级等级公路路网数据仓库与可视化技术,实现了对陕西省等级公路多源异构数据的整合。对缩小信息孤岛,减少数据整合周期,扩展省级等级公路信息可视化的应用层面,具有重要意义。
其他文献
腔光力系统中强光力耦合,基态冷却,光力诱导透明等微制造技术的快速发展促进了宏观机械振子的控制和测量技术的发展以及超高精度传感和量子信息处理的进一步应用。人们尤其感
脑卒中是排名第一的国民死亡原因。很多情况下,卒中症状严重可导致残疾。虽然,大多数卒中发生在65以上人群中,但是年轻人也是有可能发生卒中的。卒中发病不分年龄和性别,中国卒中的发病平均年龄是66岁,比美国白人早10年,其中1/5的患者小于45岁。脑卒中的病因复杂,常见有血管壁病变、血液流变学及血液成分异常、心脏病和血流动力学异常及其他等。疾病的发病机制具体未阐明清楚,常常涉及氧化应激反应、组织水肿、激
利率市场化改革是我国金融体制改革的重要一步。从党的十四届三中全会(1993年)提出利率市场化改革至今,我国利率市场化改革经历了近二十个年头。遵循“先外币、后本币;先贷款
表面活性剂在分离、结晶、纯化、去污、稳定、发泡和乳化等许多工业和研究领域中发挥着重要作用。特别是阴离子型表面活性剂,因其具有强大的去污能力以及较低的制造成本,比其
低风速下风力发电机可能会由于风速在切入风速附近波动而频繁切入,高风速下风力发电机组在承受高载荷的同时也可能因风速波动而反复切出停机,风机在短时间内多次改变运行状态
在中国经济新常态下,实体经济长期低迷,制造业产能严重过剩,市场竞争加剧。德国制造业所代表的高质量、高技术、高利润公司也面临新问题,尽管产品质量出色性能优异,但国内同
国际制度和参与国际政治活动的各个行为体的动机、行为有着密切的内在联系,甚至是复杂的相互依赖型关系。纵观国际政治经济学发展的历史,对国际制度内化的研究一直围绕着政府
会议
生成式对抗网络(Generative Adversarial Nets,GAN)是一种深度学习模型,通过生成模型(generative model)和鉴别模型(discriminative model)之间相互博弈学习产生输出。本文采用生成式对抗网络技术,研究服饰(以鞋类为例)产品自动设计的问题,分别设计了SFGAN(Style Fusion GAN)以及SCGAN(Style Transform
习近平总书记指出:“思想政治工作是学校各项工作的生命线。”大学生的思想政治状况关系到个人的成才发展和未来走向,同时关系到我国的发展前途。大学生的思想政治教育是一个
课题来源于十三五国家重点研发计划《超期服役承压设备寿命预测及延寿关键技术》(2016YFC0801905),针对裂纹尖端局部区域的弹塑性应力应变场及材料的抗断裂关键性能进行研究。断裂力学传统的研究方法有实验研究和理论分析两种,但都有其局限性。实验方法的研究很难触及到裂纹尖端的微观区域,而裂纹的尖端区域应力应变分布往往决定着裂纹是否扩展,进而决定试件是否安全可靠。本课题采用有限元数值分析的办法研究裂