基于MapReduce的大数据时代数据处理技术探究

来源 :计算机产品与流通 | 被引量 : 0次 | 上传用户:climb_climb
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着我国科学技术水平的不断提升,信息的传输效率显著加快,大部分信息都可以转换成数据进行实时传输,大数据时代已然来临。本文从数据划分和计算任务调度、出错检测和恢复、顺序处理数据几个方面,对基于MapReduce的大数据时代数据处理技术进行了分析,以期强化数据处理能力。
其他文献
目的:探讨弥散加权成像(diffusion weighted imaging,DWI)序列和液体衰减反转恢复技术(fluid attenuated inversion recovery,FLAIR)在不同时期脑梗死诊断中的应用价值。方法
依据泡沫的优点,提出在干旱缺水地区采用深 水井泡沫钻进技术的钻探新方法。给出了深水井各孔段的成孔工艺,重点阐述了深水井泡沫钻控灌注系统的主要设备和泡沫钻进工艺的规程
为探讨青少年过度使用性损伤的发生机制以及如何有效预防过度使用性损伤,通过对青少年过度使用性损伤的概念、不同项目间过度使用性损伤的差异、过度使用性损伤的致因以及过
畅销书通常在一段时间内销量大增,势头退去之后很少会持续热销。长销书是经过长时间考验,相当一部分已经成为经典流传下来,有比较稳定的销售量但是很难成为当下最畅销的书。
酒精性低血糖常有中枢神经系统葡萄糖缺乏的症状,不易与酒醉状态或脑血管病相鉴别,故易引起误诊误治。现将我科近几年治疗的16例酒精性低血糖病人的情况报告如下。
学校教育的对象既是具有不同个性心理的活生生的学生个体,又是由每个学生个体相结合而成的具有社会心理的学生群体.学生群体结构按群体内各成员相互作用的目的和性质主要归结
本文以电网拓扑结构变化对区域能源强度的影响为例,揭示区域基础设施连接紧密程度对空间相关性的影响和其变化的内在机理。根据1998-2014年中国30个省份高压电网建设的时序顺
妊娠期肝内胆汁淤积症(ICP)的主要临床表现为胆汁酸及肝脏酶上升,除影响孕妇的生活质量外,还可导致胎儿的不良妊娠结局,因此需及时的治疗。药物是治疗ICP的主要方式,大致可分为
随着医疗科技的发展,医疗器械在不断更新,一次性医疗器械有着减少感染率、使用方便、便于操作、省时省力等优点而广泛应用于临床。我院常用的有:各类注射器、输液器、采血针、采
分析国内外建筑工业化相关文献的研究热点与发展趋势,有利于更好地推动建筑工业化的发展。本文以SCI数据库和CNKI数据库为主要数据来源,搜集了2009—2018年国内外有关建筑工