Hadoop架构相关论文
论文提出了一种基于关联数据的科技项目查重系统,通过整合与科技项目密切相关的项目任务书、科技论文、科技报告和科技成果等信息,建......
The Shift:Process-centric to an Insight-centric World On premise,Cloud,As a Service,Self-served,Mobile Built on Open Sys......
随着互联网的快速发展,更多的人加入到互联网中。作为当前最火的一种互联网应用,社交网站俘获了广大的用户。如新浪微博,其用户数量已......
中医药技术在中国历史上发挥了巨大作用,实践证明其是疾病诊疗上行之有效的重要手段。如何结合现代信息技术和传统中医药知识,加速中......
随着社会进入网络时代,各种各样的网络设备骤增,产生了大量的数据信息,而这些数据大部分是以文本的形式存在的,如何高效快速的处理......
随着信息技术和互联网的发展,人们逐渐从信息匮乏的时代进入了信息过载的时代。在这个时代,无论是信息的生产者还是信息的消费者都遇......
人类从当前“以设备为中心”的时代,已经进入了“以服务为中心的时代”。现在,“云”正成为IT业界关注的焦点。Hadoop是Apache开源......
推荐系统已被广泛使用在互联网的各个方面,其中电子商务的高速发展离不开个性化地推荐系统。尤其近年来,推荐系统越来越明显且有力......
粗糙集理论作为一种处理不确定、不精确或噪声数据的重要工具已经在多个领域,如数据挖掘、模式识别、人工智能、认知科学等得到广泛......
多地震属性综合分析技术在地质勘探中有着重要的作用。通常多地震属性综合分析计算具有计算复杂度高、计算量大的特点。使用单机进......
随着大数据时代和人工智能领域的发展,数据的存储和挖掘处理凸显的愈加重要,同时出现了数据质量降低的问题。数据清洗能够有效处理......
推荐系统是运营商平台通过智能化和个性化的方式提升用户体验的重要工具,其主要目的是建立个性化推荐模型,制定合理高效的推荐策略......
传统系统针对海量数据存储问题通过配置大量服务器提高存储与计算能力,但存在硬件成本较高的缺点。为此,设计基于Hadoop架构的高校......
随着信息技术产业和宽带网络的快速发展,云计算技术已经达到一个崭新的高度,加上用户对智能手机等移动终端设备的使用率不断上升,移动......
近红外光谱分析技术具有无损、检测速度快等特点,广泛地应用在过程分析领域。该技术检测产生的近红外光谱数据量大,但单个近红外光......
时代快速发展,无论在金融、医学以及科研上,大数据都占有绝对地位,面对大数据时代的到来,对大数据的存储及处理技术提出了更高的要......
针对当前海量的工程数据信息,如何对这些数据进行存储,是当前思考的重点.论文提出利用Hadoop在存储和计算方面的优势,构建一个可用......
企业要想经营成功,除了在某些方面必须具有专长之外,在每个重要的领域也必须拥有适当的知识。企业必须随时获得新的知识,并加以研......
针对海量的数据资源管理效率与质量问题,提出一种基于Hadoop的元数据管理模型。在该模型中,采用Hadoop对元模型进行搭建,从而完成......
针对传统MapReduce框架中任务节点和工作节点的失效问题,提出了在配置备份节点的分层主从式MapReduce框架中加入单元集群的处理方......
以 Hadoop 架构为核心, 设计了桑蚕饲养大数据平台, 平台包含桑蚕饲养大数据采集模块、 运算处理中心模块、 数据存储中心模块和智......
传统基于移动闭塞模式下的城轨列车运行路线追踪方法在面向海量人流和车流的情况下,存在延误扩散以及线路运行的恢复能力差等问题......
安全管理平台(SMP)是实现安全管理工作常态化运行的技术支撑平台,在实际应用中需要实时处理来自安全设备所产生的海量日志信息。为解......
传统分布式大型邮件系统对海量邮件的过滤存在编程难、效率低、前期训练耗用资源大等缺点,为此,对传统贝叶斯过滤算法进行并行化改进......
根据云计算环境中用户任务调度的不同需求,提出一种基于改进离散粒子群优化算法的任务调度策略,可实现在短时间内对云计算任务的相......
作为广受瞩目的开源项目,Hadoop提供了一种分布式系统开源架构,配合集群的强大功能,Hadoop架构便能够较好服务于计算和存储。基于......
针对国内电信运营商在CRM(客户关系管理)系统中对数据处理要求的日益提高及数据处理技术的重要性,分析数据仓库技术在通信领域的应用......
为解决电力危险点异构化检测问题,提高电网环境下动态节点的目的性调度分配,提出基于电力一体化调度的动态危险点检测方法。按照Ha......
随着我国信息化建设的不断发展,在扶贫开发领域已经积累了大量具有实际指导意义的扶贫数据,如何有效管理和利用这些日益增长的扶贫......
针对当前分布式计算集群的功耗高、体积大、携带不方便的问题,设计实现一种小型化、高性能的嵌入式并行计算系统。首先,以多台高性......
摘 要:将lucene索引架构应用到海量设计资源图像检索系统中,提出了基于hadoop和lucene的图像检索方法,分析了索引结构的建立、分布式......
针对当前电力数据海量异构和共享度不高的问题,结合Hadoop和电力企业数据共享的必要性,提出一种基于Hadoop的数据集成管理平台。为......
本文主要介绍了Hadoop架构的构成,用实例来对Had00p架构的MapReduce实现进行了详细的描述。并在这个基础上开发出一个在Hadoop架构......
大数据处理技术充分利用海量动态数据,能有效提升电力负荷预测精度及计算效率。采用Hadoop架构提出了一种基于模式匹配的短期电力......
整合科技项目所产出成果的信息能间接反映项目的研究内容,可以弥补项目查重过程中申报书难以获取的不足,具有重要的研究意义。本文......
随着社会的不断进步,计算机技术与互联网技术在很多行业中都得到了广泛的应用。而在当今社会中,很多行业的运行都离不开大量的数据......
视频转码是视频点播网站重要的技术环节之一。为解决单个节点视频转码开销大、耗时长的问题,在研究不同视频转码方案的基础上,提出......
遥感影像数据并行处理系统大多依赖于国外商用产品,而国内自主化并行计算处理系统的任务流程化支撑能力以及并行计算性能难以适应......
在大规模风电并网的前提下,风电容量可信度计算对电力系统可靠运行具有重要意义。论文基于电量不足期望(LOEE)可靠性指标,考虑风电......
军事领域一体化作战大趋势不可逆转,战场上大数据的处理对指挥信息系统越来越重要,因此,作战云的思想应运而生,旨在从应用的作战云......
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们......
为了应对大规模电动汽车充电站负荷的调度管理,提出一种基于Hadoop的模糊灰色GA-BP神经网络负荷预测模型。在云平台上,运用模糊聚......
针对当前海量的工程数据信息,如何对这些数据进行存储,是当前思考的重点。论文提出利用Hadoop在存储和计算方面的优势,构建一个可......
随着智能化产业的不断发展,视频监控以其直观、准确、及时和信息内容丰富而广泛应用于许多场合,尤其在安防系统中的重要性日益突出......
介绍了Hadoop架构的主要构成,通过一个实例详细阐述了Hadoop架构的MapReduce实现机制;开发了一个基于Hadoop架构职工工资统计应用......