大数据分析中基于MapReduce的空间权重创建方法研究

来源 :重庆邮电大学学报:自然科学版 | 被引量 : 0次 | 上传用户:zhaohongjie0908
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
大数据空间分析是Cyber-GIS的重要方面。如何利用现有的网络基础设施(比如大规模计算集群)对大数据进行并行分布式空间分析仍然是一大难题。为此,提出一种基于MapReduce的空间权重刨建方法。该方法依托Hadoop框架组织计算资源,基于MapReduce模式从大规模空间数据集中高效刨建出空间权重:大空间数据被分为多个数据块,将映射器分布给计算集群中的不同节点,以便在数据中寻找出空间对象的相邻对象,由约简器从不同节点处收集相关结果并生成权重文件。利用Amazon公司弹性MapReduce的Hadoop框
其他文献
以两自由度可控连杆机构系统为研究对象,在所建系统机电耦合动态模型的基础上,考虑了系统结构参数和控制电机的电磁参数对连杆中点的动态响应的影响。针对系统预定圆轨迹下的动
最小切削厚度是微切削中产生切屑必须超过的切削厚度的临界值。基于微切削中切屑形成机理提出了最小切削厚度的预测模型,并用正交微切削实验进行验证,采用非线性拟合方法处理切
提出一种适用于5G融合网络的接入选择算法:灰色层次分析法(grey analytic hierarchy process,GAHP)。该算法基于层次分析法的思想,结合网络性能和用户体验类指标选出Qo S参数,对
针对非局部均值(non local mean,NLM)相似性度量不够准确的问题,提出一种基于模糊度量的视觉特征相似度的改进非局部均值图像去噪算法。利用模糊度量理论构建视觉特征度量相似性函数作为衡量图像像素点相似性;将平滑核函数代替高斯加权核函数,提高运算速度和避免滤波参数的设置;利用构建视觉特征相似性度量生成的平滑核函数,对图像进行去噪。由于改进方法考虑图像视觉结构特征,更加完善了非局部均值结构相
当前律师业迅猛发展。律师业在反洗钱组织框架设立、客户身份识别、尽职调查和可疑交易资金监测等方面存在众多的缺陷,潜在的洗钱风险较高。因此,有必要对律师业的洗钱风险进
针对LDMOS功率放大器在S波段的设计难点,介绍了基于负载牵引测试技术的LDMOS功率放大器设计方法。阐述了负载牵引的测试系统和测试原理,并对LDMOS预匹配管进行了负载牵引测试
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
由于目前小水电的篷勃发展,在浅水、软淤泥基础上的施工围堰越来越被广泛应用,结合实际施工经验,就几种在软、淤泥土基础上的施工围堰做一些探讨。
新经济时代信息技术与金融服务的相互渗透,改变了金融服务方式和信息技术服务内涵。伴随着移动通讯技术的爆炸式成长,一个新生“婴儿”悄然出生,这就是移动银行。
肠源性肢端皮炎是一种婴幼儿时期少见的疾病,多见于出生后三周至一岁半的婴幼儿。其特点为肢端腔口周围皮炎,腹泻及脱发,常易继发细菌及真菌感染,如治疗及护理不当,可危及生命。我