地震数据存储系统研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:nash86
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,得益于人类社会对石油的需求,石油勘探技术也在飞速发展。地震勘探是进行石油勘探的主要的方法,随着地震勘探技术在地震数据采集、资料处理和资料解释方面不断创新,地震勘探所产生的数据也在海量增长。目前,人们针对这些海量的数据计算发展了高性能计算,使得地震数据处理速度越来越快,但是地震数据处理过程中数据读取的I0瓶颈严重阻碍了数据的处理速度。因此,如何提高地震数据的读取速度成了一个亟待解决的问题。目前针对地震数据10瓶颈的问题,做法多是采用分布式文件系统作为存储系统。每种分布式文件系统的存储特点是不一样的,如HDFS适合大文件的存储,并且对大文件读取进行了优化,又如Fast DFS适合小文件的存储。而地震数据的读取特点是块小量大,即读取的粒度小但读取量大。目前的分布式系统并没有与地震数据读取特点相吻合的读取模式,因而地震数据读取的10瓶颈问题仍存在。本文通过研究地震数据处理的主要数据格式SEGY的格式特点以及一般地震数据的处理流程,分析出目前地震数据处理遇到10瓶颈的原因,实现了一种基于Fast DFS的地震数据存储系统即SDFS(Seismic Data File System)系统。该系统实现了解决地震数据读取10瓶颈的方案。该方案为:首先,通过将地震数据文件以道为单位的分块存储,提高了数据的读取效率;其次,通过将文件宏块再分块,并使用并行磁盘读取技术来提高了地震数据的读取速度;最后还提出了针对系统数据储可靠性的研究,即通过完整备份的方式增加系统可靠性。为了证明该方案的有效性,本文实现了 SDFS系统并对系统的主要功能进行了设计,然后进行了两组地震数据读取的实验。实验一测试了并行磁盘读取技术的有效性,实验结果显示,当每个节点硬盘数据量增加时系统的读取性能增加,速度几乎与磁盘数量成正比;当数据块大小增加时,对顺序读有利而减小则对随机读有利。实验二则用对比实验的方式进行了系统的读取性能测试,对比的系统为Fast DFS,测试结果为SDFS系统的顺序读和随机读性能都要明显优于Fast DFS。综合两次实验结果可知,本文提出的SDFS系统能够帮助改善地震数据读取的10性能。
其他文献
1949年4月28日,距离新中国成立还有155天。解放半年的沈阳城,依然还有国民党军机的骚扰轰炸。这一天,刚刚赢得的一面"生产竞赛模范班"红旗,让39岁的马恒昌和工友们骄傲自豪。
音乐教学是中职教育过程中的一个重要内容,随着职业教育不断发展,职业教育目标也渐渐发生了改变,在中职教育过程中加强音乐教学,有助于培养学生的艺术修养,提高其综合能力素,
仔猪梭菌性肠炎又称仔猪传染性坏死性肠炎,俗称仔猪红痢,是由C型魏氏梭菌引起初生仔猪的一种急性传染病。主要发生于1周龄以内的仔猪,尤以1-3日龄仔猪多发,发病快,病程短,死亡率高,
时光如织,岁月如梭。伴随着急促的脚步声,2019年12月30日的北京迎来了一次属于中国班组的盛大聚会——"新中国70年最具影响力班组"发布仪式暨第一届新时代班组高峰论坛隆重举
2009年6月27日,山东省第二个国家级肉牛综合实验站——国家肉牛产业技术体系乐陵综合实验站揭牌。据了解.国家肉牛产业技术体系由国家肉牛产业技术研发中心和综合试验站两个层
据悉,2009年甘肃省加快推进畜产品加工龙头企业及畜牧专业合作社建设.认真落实各项扶持政策,强化畜产品加工企业对标准化养殖基地的带动作用,加快构筑特色畜产品优势区.目前共建成
2009年3月10日从湖北省武汉市牲畜屠宰经营管理工作会获悉,万吨级国家肉品冷藏储备库已确定落户武汉,这是商务部在全国布的5个点之一。为应对可能出现的猪肉涨价或短缺情况,
新建宅区在移交前,由施工方、客价方、物业方、保洁方组成人员,对楼栋层号的室内和公区及户外,按承接查验和开荒保洁的要求与标准或共性问题及细节上,进行各项工程的质检和房
推荐理由:2019年度"齐鲁大工匠"推荐人:刁维强山东省总工会宣传教育部部长热度:★★★★★2020年1月5日,2019年度"齐鲁大工匠"颁奖典礼在山东济南举行,10人被命名为"齐鲁大工
人口老龄化问题,是当今全世界面临的新问题,也是全社会普遍关注的问题。西北地区经济落岳,“未富先老”的问题比较突出.老龄化趋势严重.通过对甘肃省成县人口老龄化问题实地凋研取