基于计算存储一体化策略的遥感数据高性能计算研究及应用

被引量 : 0次 | 上传用户:cc_001111
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
高性能计算机的迅速发展为海量遥感数据处理提供了强大的计算资源,基于集群及计算存储一体化的高性能计算已成为目前最主要的计算平台。在集群环境下设计并实现海量遥感数据并行处理系统是提高遥感数据处理速度的必然选择。随着高分辨率及传感器类型的增加,遥感数据TB级的增长对高性能遥感数据处理平台的I/O要求造成非常大的压力,包括服务器磁盘的读写压力,服务器网段的传输压力等,为了最大化发挥分布式并行优势,在保证系统安全稳定的前提下,本文采用了计算存储一体化策略,以减少并行处理系统中的数据传输。本文在分析了网格、云计算及集群计算等几种高性能计算的优缺点基础上,提出并实现了一种基于计算存储一体化的高性能集群架构,以实现对海量遥感数据的高效处理,并在卫星遥感基础共性产品一体化处理系统中得以应用。本文的工作主要体现在以下几点:(1)基于已有集群系统,深入研究遥感数据高性能计算处理系统,针对海量遥感数据对处理平台I/O、服务器磁盘的读写及网络传输造成的压力等问题,采用把数据存储从原来集中到一个机器变成计算、存储一体化架构,最大限度降低系统架构的I/O传输,更充分利用了存储服务器的计算资源、计算服务器的存储资源,从而提高平台的整理处理时效。(2)采用了逻辑上静态、物理上可动态扩展的分布式存储模型来实现对海量遥感数据的存储及管理。引入虚拟磁盘空间(VDS)的概念来把切片分配到多个存储站点,并采用交叉备份方式确保系统的稳定性。(3)采用三级并行策略来最大化发挥高性能并行计算在大规模的遥感影像处理中发挥着的重要作用(4)实验验证。通过使用不同类型卫星的数据测试,从多个角度进行对比验证,证明本文提出的高性能集群架构并行处理能力和效率上均有提升。
其他文献
混凝土是目前最大宗的建筑材料,广泛应用于各种工业与民用建筑中,如超高层建筑、跨海大桥和核电站等。由于材料的各相成分在微细观尺度上的随机分布,混凝土材料具有非均匀性,宏观层面表现出非线性的力学行为。基于多尺度分析的观点,混凝土的宏观力学性能,可以从细观尺度上的结构特征得到解释和验证。为了对混凝土结构更好地展开结构分析和设计评估,本文对混凝土的细观力学特性进行系统的研究,利用细观有限元的模拟手段,探讨
患者男性,53岁,咳嗽、咳痰,发现锁骨上淋巴结肿大1个月,外院淋巴结活检:转移性印戒细胞癌,免疫组化:CK7(+),CK20(-),组织化学AB/PAS染色阳性;胃镜检查浅表性胃炎;肺CT:左肺癌;纤维支气管镜:左肺下
<正>如果不是三段视频,6月5日成都9路公交车上发生的悲剧,也许会让许多人感到遥远。若只有喧嚣的怀疑和问责声,只有忙不迭的表态、承诺和慰问,我们将无法感受一场灾祸最直接
<正>在美国联邦通讯委员会(FCC)1975年通过《报纸/广播电视跨媒体所有权禁令》之前,美国业已存在一些媒介集团同时拥有多种媒介的所有权。今天,这些合法的"多市场"产业成为媒
<正>做好学生和任课教师间的沟通是班主任工作的重要内容。与任课教师相比,班主任对学生的影响力更大。如果班主任难以管理好学生,任课教师就更难管理好学生。在任课教师与学
摘要:我国电解铝工业正面临日益严峻的能源和环境的压力,节能减排已经成为电解铝行业发展的主旋律。在当前国内铝电解产能严重过剩的情况下,利用已有生产设施,对现行工艺及控
摘要:21世纪以后,在中国经济快速发展,居民可支配收入不断提升,国内旅游产业蓬勃发展的大背景下,中国免税业作为旅游产业中的高速成长版块迎来了新的发展机遇。作为免税业的生
农业银行财务管理中存在的问题及其对策谢树方自农业银行恢复以来,随着经济体制改革和金融体制改革的深化,财务管理体制也经过几次改革,取得了明显成效。但是,在国家利率政策多次
福建是祖国大陆最早开展对台交流合作的省份,闽台两地在服务业领域的交流起步也较早。近年来,闽台服务业合作取得了诸多成效,但仍相对滞后于制造业领域,合作规模和结构上也落