Hadoop大数据技术应用分析

来源 :现代电子技术 | 被引量 : 0次 | 上传用户:xy0382
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
Hadoop等一些大数据处理平台的出现在一定程度上为人们处理大数据提供了可能与方便,但也存在一些不足。文中利用个例应用和归纳总结相结合的方法,从底层应用入手对Hadoop的主要构件HDFS、MapReduce及其生态环境进行介绍,阐述了其运行机制及原理。对目前Hadoop的应用场景作了详细的论述,并对其在使用过程中存在的问题进行了总结,最后给出这些问题目前的研究状况及部分解决方案。后期的使用证明,该方案可在一定程度上解决使用Hadoop过程中所遇到的问题。
其他文献
智能变电站智能汇控小室温度控制是一个复杂的温控系统,其室内温度受各种干扰影响,传统的PID控制器无法适应智能汇控小室恶劣工作环境的要求,为解决汇控小室控制精确度较差、抗干扰能力较低、恢复能力较慢的问题,提出一种基于BP神经网络的BPNN-PID控制策略。通过分析智能汇控小室的物理特性,推导出汇控小室温度控制系统的传递函数,在此基础之上设计基于BPNN-PID的温度控制系统架构,并利用Matlab建立基于BPNN-PID的控制系统模型,与现场监测的实际控制器效果进行比较得出,该策略能够通过训练和计算完成对复
针对某型号泵车样机转塔在疲劳试验中出现开裂故障,使用有限元软件对立筒结构进行分析,发现立筒筋板应力过大是引起开裂的直接原因。通过优化设计和仿真分析,发现取消筋板后,立筒整体刚度协调,受力情况明显改善。优化后再次进行疲劳试验,结果表明初期疲劳开裂问题已得到解决,证明了优化方案的有效性。同时说明,治理应力集中不应简单地通过局部加厚补强来降低母材的应力,而应是协调结构刚度。