大数据技术在卫星运控中应用探索

被引量 : 7次 | 上传用户:qq1094795388
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着我国空间探索任务和科学卫星事业的蓬勃发展,空间科学已从低空探测发展到深空探测,科学探测范围逐步扩大,探测器也日渐增多,卫星探测任务更加频繁,这些因素引发了数据规模的迅猛增长趋势。科学卫星从立项到在轨运行,产生的数据种类非常多,数据量庞大,存储特别分散,很难通过传统方式,将其综合起来,应用到卫星的在轨运行管理中。在卫星运控数据管理领域,传统面向关系数据库管理系统的方法正面临着海量结构化、半结构化甚至非结构化数据集存储管理瓶颈,高并发访问与高扩展性的挑战,需要采用新方法对其实施有效管理,更好地服务于卫星运控管理应用和其他应用。借鉴发展日益成熟当前大数据技术,将大数据技术引入到科学卫星运控系统中。探索性地将大数据存储管理方法应用到围绕科学卫星产生的数据中,将卫星运控数据存入No SQL非关系数据库中,服务于卫星的在轨运行管理,发挥其模式灵活、快速存取、容错容灾、高并发访问、横向可扩展伸缩等特性。将大数据存储与处理框架Hadoop探索性地应用到科学卫星运控系统,集中统一管理卫星生命周期中产生的海量非结构化数据,在有效控制系统维护成本的前提下,使系统获得海量存储能力、并行分布式处理能力、可扩展与可伸缩能力。论文的主要内容包括:1、分析卫星运控数据的特点,介绍卫星运控的相关知识背景。2、分析大数据技术的特点及对卫星运控数据管理的适用性。介绍分布式存储处理框架Hadoop以及No SQL数据库理论技术,分析探讨No SQL与传统关系型模型之间的差异,得出分布式处理框架和No SQL更适用于海量运控数据管理需求的结论。3、根据运控数据的特点,设计选择合适的大数据平台工具;4、基于hadoop分布式处理平台,将海量结构化半结构化卫星工程数据存储到HBase的数据模型设计及优化存储方案,以及将海量非结构化卫星生命周期数据以文件方式存储在HDFS分布式文件系统上,相应的元数据信息存储到HBase以获得快速查询响应特性和可扩展特性。5、通过部署配置及优化hadoop系统以及hbase存储实验验证大数据技术在卫星运控领域的可行性。本文使用大数据技术对卫星运控数据存储,具有一定的技术创新和实际应用价值的探索。
其他文献
交响曲是贝多芬创作中最重要的音乐体裁,本文通过对贝多芬九部交响曲的音乐分析,从中可看到贝多芬伴随着他所处的时代所赋予它的思想精神和追求目标,同时这九部交响曲也是他
管理科学是研究管理的理论、方法和指导管理活动的一门规律性的科学。目前,管理科学已经被广泛应用到各个领域,形成了门派众多的学科体系。"所谓管理科学是指,以科学方法应用
由于桥梁在整个施工、勘测、设计等过程中,都会受到很多潜在的因素的影响,再加上对于环境的适应能力以及施工技术方法等对于桥梁工程的不同程度的干扰,使得桥梁的质量问题面
<正> 18世纪来、19世纪初美国和拉丁美洲诸国经过艰苦卓绝的民族解放战争相继获得了独立,在美洲大陆上建立了众多新的民族国家。这是近代民族解放运动史上第一次伟大胜利。然
<正>记者:今年在《中华读书报》和《光明日报》上看到您的卢卡奇《审美特性》中文全译本首次发行的消息和您在《文艺报》上发表的《对当代文艺理论研究误区的反思》的文章。
会议
书院的学生管理,以行为管理为表,以心本管理为里。管理内容上既有关于知识掌握方面的要求,又有道德养成方面的要求。招生上承担着教化大众和培育精英的双重责任。学生自理自
目的:探讨慢性肾衰竭(CRF)尿毒症期透析患者中医证候的分布规律。方法:对155例CRF尿毒症期透析患者进行问卷式调查,建立患者症状数据库,运用聚类分析及主成分分析对其中医证
开展医学生诚信教育,是培养高素质医学人才的关键环节,是构建和谐医患关系的基础。在分析医学生诚信教育现状的基础上,探讨加强医学生诚信教育的路径,即构建医学生诚信教育的
<正>慢性肾脏病(CKD)的临床缓解期是指原发性或继发性CKD经治疗后部分缓解,仍留有轻度血压高和残留蛋白尿。高血压和蛋白尿是CKD进展的独立危险因素,血管紧张素转换酶抑制剂(
<正> 利用野猪与家猪的远缘杂交,其目的是为了探索瘦肉率的提高及猪肉品质的改善。我们于85年利用野猪公猪与本地冠朝母猪进行了杂交试验,并已经繁殖了野冠二元杂交的一代杂