基于Hadoop的小文件量化方法研究

来源 :微型机与应用 | 被引量 : 0次 | 上传用户:fstjqx
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对目前Hadoop平台不能高效处理海量小文件而出现的小文件问题,提出一种基于曲线拟合最小二乘法的确定Hadoop平台下何为小文件的方法。该方法首先确定小文件访问时间的量化方法,然后采用访问时间作为确立何为小文件的影响因子,通过对不同数据集大小的不同访问时间的实验,最终结合线性拟合的相关知识找到了小文件大小的量化方法。
其他文献
构建和谐社会是建设中国特色社会主义的重要措施,在构建和谐社会中,更要注意对和谐校园的构建,高校的工会组织在构建和谐校园中发挥着举足轻重的作用,要发挥好桥梁纽带作用、对队
综述了有关分子马达,主要是肌球蛋白马达和动蛋白马达的实验研究进展情况,并对理论模型,特别是近年来广为流行的布朗马达模型作了介绍和评论。最后展望了这一领域的发展前景及其
阐述了脉冲电晕放电成像的物理过程,根据气体放电的流光理论,采用纳秒脉冲放电技术,获得了清晰的电晕放电的硬币成像图像,并展望其应用前景。
对图像中常见的高斯噪声特性进行了分析,对含有较强高斯噪声的数字图像的边缘检测方法进行了研究。分析了边缘的方向性相关特征和连续性相关特征,设计了图像特征矢量图,检测图像特征矢量相关的相似度,提取出抗噪声的图像边缘检测方法。仿真验证表明,对于含有较强高斯噪声的图像,本方法能够有效抑制噪声,而且能够提取出准确清晰的边缘。本算法在噪声图像中能很好地克服普通算子的噪声问题,而且算法简单,计算量较少。
诚信是民事法律的一个原则,会计应当诚信.会计的诚信需要完善会计诚信机制,推行会计委派制和财务总监制,完善会计法,建立会计诚信激励机制和制约机制.
菊者,花之君子者也!菊之洁,菊之雅,菊之傲骨,菊之耐霜耐寒,菊之生命旺盛令多少文人墨客为之咏叹!赏菊,可以品花之精华,汲物之精髓以养己之德性,修己之品行,壮己之精气,广己之
为了满足VANET(Vehicular Ad-hoc Network)中对车辆位置信息的高精度要求,本文研究了一种基于全球定位系统(Global Positioning System,GPS)伪距双差和有高精度里程仪的惯性导航(I
对于弧齿锥齿轮的加工,与传统的固定安装法相比,利用TCA技术,在切齿之前可以模拟接触区在齿面上的形状和位置,从而达到预控接触区的目的.切齿试验结果表明,使用TCA可以有效地
基于两线圈无线电能传输结构,采用实验的方法,分析了磁共振耦合无线电能传输系统的谐振频率、传输距离以及传输效率三者之间的关系。验证了系统处于谐振状态时传输效率最高这一