一种面向海量高并发小文件数据的处理方法

来源 :信息通信 | 被引量 : 0次 | 上传用户:cpu1987
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
首先分析了当前海量高并发小文件数据处理的缺陷,文章阐述了通过在节点中设置临时虚拟空间的方式、改变文件系统锁机制、将多个节点中的多个并发操作合并为一次磁盘回写操作处理方法。提高了海量高并发小文件数据的并行处理效率,降低了海量高并发小文件数据磁盘的读写压力,减轻了底层存储的磁盘读写压力,有效延长了底层存储的使用寿命。该方法进行的海量高并发小文件处理相关研究工作,对于后期提升海量并发小文件的处理能力和效率提供了参考依据。
其他文献
随着计算机科学技术的发展,云计算产品和服务得到了广泛的应用。文章从云桌面概述出发,介绍了云桌面的两种主流技术,基于服务器计算模式的SBC(基于服务器计算)模式和虚拟桌面基
随着国家经济的发展,计算机网络技术在社会生活及工作当中有着广泛且深入的应用,在信息化时代,计算机网络技术已经成为人们工作生活的重要组成部分,文章就计算机网络技术在信
随着互联网高速发展进程的加快,网络虚拟化应用扮演着重要角色。通俗来讲,网络虚拟化实现了网络物理层与网络用户之间的抽象处理,可以将多个物理网络进行逻辑分割,以实现网络
四轴飞行器具有不稳定和强耦合等特点,除受自身机械结构和旋翼空气动力学影响外,也易受到外界的干扰。针对四轴飞行器自身的这种特性约束,文章在原有滑模控制的基础上,提出一
随着社会经济的不断发展,信息技术水平得到显著增强,企业的信息化成为大势所趋,电力行业的IT服务管理部分也得到了极大的发展和提高。但是,在"云计算"的时代背景下,电力行业IT
在坦克每次执行射击任务前都应当对火炮进行预先校正或校正状态检查,但是,目前坦克炮在进行预先校正时存在校正装置的照准过程要求高、环境依赖性大等问题。文章为解决上述问
道路交通事故现场路面三维点云的数据量庞大,后期处理涉及三维识别等运算,如何提高运算效率,课题组选用了大数据架构.大数据的出现对传统的简单的数据挖掘算法提出挑战,新型
电信运营商为盘活数据资产,创新数据经营,营造大数据生态圈,需要建设稳健可靠的大数据管理平台作为依托。文章将探讨电信运营商大数据管理平台的核心部分,大数据生产平台的功
随着时代与科技的发展,计算机网络开始在人们的生活中普及,使用计算机进行信息传输已经是一种非常普遍的行为,它突破了时间与空间的限制,为我国民众的工作与生活提供了众多的
微机在变电所保护和控制中的应用A.M.巴沙主题词:二次系统,微型机应用,计算机控制,主变压器,高压变电所电力系统的迅速发展和扩大,使变电所设备的控制和保护功能更复杂。为了解决这个问