海量遥感影像瓦片金字塔并行构建工具的设计与实现

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:liongliong472
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着遥感技术的发展,遥感影像已成为地理空间信息领域重要的数据来源。遥感影像的分辨率越来越高,数据量达到了PB级。如何高效地组织、存取海量遥感影像成为研究的热点问题,其中建立遥感影像瓦片金字塔模型是普遍采用的做法。传统的遥感影像瓦片金字塔构建方法不管是在效率还是适用性方面都无法满足海量遥感影像的处理需求。因此有必要研究一种更高吞吐率和计算效率的遥感影像瓦片金字塔构建方法。  通过对传统遥感影像瓦片金字塔构建方法的分析,给出了一种遥感影像瓦片金字塔并行构建方法,设计了海量遥感影像瓦片金字塔并行构建工具,包括海量遥感影像瓦片金字塔并行构建工具体系结构的设计、基于分布式实时流计算框架Storm的瓦片金字塔并行构建算法的设计和基于HBase的瓦片金字塔存储模型的设计。在具体实现上,包括原始影像加载模块、消息队列模块、并行构建模块和瓦片存储模块。原始影像加载模块实现了原始影像的加载和基本层瓦片的创建。消息队列模块是衔接原始影像加载模块与并行构建模块的桥梁,用于暂存基本层瓦片数据。并行构建模块由两部分组成,一是瓦片源读取分发模块,二是瓦片处理模块,前者用来从消息队列读取基本层瓦片并按照指定的分发策略将瓦片均匀地分发到第一级瓦片处理节点,后者负责创建其他层瓦片。瓦片存储模块用来将瓦片编码转换为HBase数据库表的行键,并将瓦片数据存储到HBase中。  最后对海量遥感影像瓦片金字塔并行构建工具进行测试,并对结果进行分析。测试结果表明,本工具能在集群上快速、有效地完成海量遥感影像瓦片金字塔的构建任务。
其他文献
随着以Web为中心的应用程序的发展,信息技术部门如何快速的构建大型的企业级分布式应用成为关键,EJB正是在此背景下出现的。但是EJB难于学习和使用已经成为EJB或J2EE发展壮大的
高校由人事管理到人力资源管理的转变是赢得竞争力的必然趋势。高校人事管理信息化积累了越来越多的历史数据,迫切需要一种技术来发现隐藏在数据背后的有价值的信息。数据挖掘
随着网络技术的不断发展和网络应用的逐步加深,网络安全问题也越来越多地引起人们的关注和重视。入侵检测技术是一种提高网络安全的重要手段,与信息加密技术、防火墙技术、病
网格是伴随着互联网技术迅速发展起来的,最初是专门针对复杂科学计算应用的一种新型计算模式,这种计算模式把整个网络整合成一台巨大的超级计算机。网格中的资源规模巨大,更新频
数据网格是一种网格计算系统,主要用来处理数据——有约束的共享和管理大量的分布式数据。数据网格技术是研究的热点,主要集中在元数据管理和复制管理两个方面。校园网络环境中
随着电子政务应用的不断深入,使得政府部门的工作方式发生了巨大的变化。电子政务给政府工作带来方便和高效率的同时,也带来许多安全问题。如何保障在信息安全的前提下提高政府
生物信息学是由生物学、应用数学和计算机科学相互交叉所形成的新型学科,是当今生命科学和自然科学的重大前沿领域之一。其中,生物序列比对是生物信息学中一个最基本的研究方
把Web服务与工作流相结合,允许工作流应用中的任意活动用Web服务的形式以及工作流子过程用Web服务组合的形式实现,甚至工作流本身也以Web服务的形式封装给外界使用,是集成企业应
监狱监管改造工作综合性强、工作繁重,而且这些工作与各项法律法规条例丝丝入扣,不得有半点疏忽。河北省保定监狱信息化集成系统的实施不仅可以将广大干警从繁杂的手工抄写、手
随着网络用户和网络应用的规模呈爆炸性增长,网络运营商不得不投入大量的成本升级、扩容现有网络,以满足用户日益增长的带宽需求。但是网络设备的升级改造却远远赶不上用户规模