【摘 要】
：
互联网的迅速发展产生了各种海量数据,快速有效处理海量数据是云计算的目标。Hadoop作为典型的云计算平台可高效处理海量数据。介绍了Hadoop相关概念,包括HDFS、MapReduce等
【机 构】
：
上海理工大学光电信息与计算机工程学院
【基金项目】
：
国家自然科学基金项目（61472256,61170277）, 上海市教委科研创新重点项目（12zz137）, 沪江基金项目（C14002）
论文部分内容阅读
互联网的迅速发展产生了各种海量数据,快速有效处理海量数据是云计算的目标。Hadoop作为典型的云计算平台可高效处理海量数据。介绍了Hadoop相关概念,包括HDFS、MapReduce等众多子项目;阐述了Hadoop完全分布式平台搭建,包括环境配置、搭建方法等;通过数据处理实验验证了Hadoop分布式平台的有效性。
其他文献
采用基于RFID和二维码技术的移动支付技术，开发了一套适合第三方运营的客户增值服务管理系统。通过整合线下服务商家，为保险、金融、电信等服务型企业提供一站式客户增值服务。
云南老王寨金矿区具有良好的开采条件与金矿品位,开发潜力较高,而矿产资源普查是矿产开发过程中十分重要的一环,因此提出云南老王寨金矿区矿产资源普查的方法研究。首先对云
地质勘查工作对于我国整体发展有着非常重要的影响,而且对地质矿产资源的开发也起到一定促进作用。就从目前情况看来,地质勘查工作过程当中都会应用到地质勘查技术,由于部分勘查部门没有对该技术予以足够重视,在实际应用过程当中就会受到很多因素影响而无法发挥出正常作用,这样就会导致地质勘查工作无法正常进行。所以,相关部门要对遥感地质勘查技术进行充分分析,根据实际情况来对其进行应用,这样才能够提高工作整体效率和质
贫困生是高校发展过程中的一个特殊群体,贫困生的就业之路指导已经成为了高校学生就业教育的重要环节。在新时期,要帮助贫困生树立正确的人生观、世界观与价值观,积极开展对
根据高密度电法成果基本查明矿区浅部不同地层、隐伏断裂以及富水区域的地电特征,评价出对矿坑充水有较大影响的破碎岩层及构造破碎带的位置、规模、性质、导水性。文章分析
针对长治市2013年2月3日大到暴雪天气过程,从500hPa环流形势、700hPa影响系统、地面气压场特征、物理量场的相对湿度垂直空间分布、fy-2c云图演变特征进行了综合分析,得出结
多标签防碰撞算法在射频识别系统应用中发挥着重要作用。目前比较有代表性的树形防碰撞算法都存在识别周期过长、空闲时隙、碰撞时隙过多的问题。针对上述问题,提出了一种根据碰撞位分布特征,调整碰撞节点分叉数的防碰撞算法。仿真及实验结果表明,该方法能减少空闲时隙和碰撞时隙数量,提高查询效率及时隙吞吐量,满足实际需求。
在劳动力成本不断上升的形势下，大批纺织服装出口企业纷纷西去。但是，目前中西部地区在承接产业转移上存在很大的问题，人才问题是首要问题。
大数据技术已经成为当下热点问题,Hadoop技术在煤矿领域运用也引起了广泛关注。针对传统监控模式下煤矿视频监控系统图像采集点多、历史留存数据量大、不利于后续查找特征图像等问题,提出一种Hadoop平台下PCA-SIFT算子的图像特征提取算法,研究并改进了MapReduce并行编程模型的任务设计,对传统尺度不变特征转换算法进行了并行化设计,在Hadoop集群下实现了海量煤矿图像的PCA-SIFT并行
9月20日下午,音乐舞蹈学院全体教研室主任和骨干教师在202会议室举行专业课程模块化教学改革研讨会。在讨论中,与会老师结合所承担的课程对模块化教学改革的理解、体会和初步