Hadoop架构相关论文
论文提出了一种基于关联数据的科技项目查重系统，通过整合与科技项目密切相关的项目任务书、科技论文、科技报告和科技成果等信息，建......
随着互联网的快速发展，更多的人加入到互联网中。作为当前最火的一种互联网应用，社交网站俘获了广大的用户。如新浪微博，其用户数量已......
随着社会进入网络时代,各种各样的网络设备骤增,产生了大量的数据信息,而这些数据大部分是以文本的形式存在的,如何高效快速的处理......
随着信息技术和互联网的发展，人们逐渐从信息匮乏的时代进入了信息过载的时代。在这个时代，无论是信息的生产者还是信息的消费者都遇......
推荐系统已被广泛使用在互联网的各个方面,其中电子商务的高速发展离不开个性化地推荐系统。尤其近年来,推荐系统越来越明显且有力......
粗糙集理论作为一种处理不确定、不精确或噪声数据的重要工具已经在多个领域，如数据挖掘、模式识别、人工智能、认知科学等得到广泛......
随着互联网的飞速发展和互联网信息爆炸式的增长,海量数据处理越来越受到人们的关注。微博,作为今后互联网最重要的发展方向的一个......
多地震属性综合分析技术在地质勘探中有着重要的作用。通常多地震属性综合分析计算具有计算复杂度高、计算量大的特点。使用单机进......
随着大数据时代和人工智能领域的发展,数据的存储和挖掘处理凸显的愈加重要,同时出现了数据质量降低的问题。数据清洗能够有效处理......
推荐系统是运营商平台通过智能化和个性化的方式提升用户体验的重要工具,其主要目的是建立个性化推荐模型,制定合理高效的推荐策略......
云计算和云存储是近年来研究的热点。云计算是一种利用互联网的力量，使得单一机器难以完成的计算任务得以高效完成的技术。其最大的......
随着信息技术产业和宽带网络的快速发展，云计算技术已经达到一个崭新的高度，加上用户对智能手机等移动终端设备的使用率不断上升，移动......
近红外光谱分析技术具有无损、检测速度快等特点,广泛地应用在过程分析领域。该技术检测产生的近红外光谱数据量大,但单个近红外光......
时代快速发展,无论在金融、医学以及科研上,大数据都占有绝对地位,面对大数据时代的到来,对大数据的存储及处理技术提出了更高的要......
针对当前海量的工程数据信息,如何对这些数据进行存储,是当前思考的重点.论文提出利用Hadoop在存储和计算方面的优势,构建一个可用......
企业要想经营成功,除了在某些方面必须具有专长之外,在每个重要的领域也必须拥有适当的知识。企业必须随时获得新的知识,并加以研......
针对海量的数据资源管理效率与质量问题,提出一种基于Hadoop的元数据管理模型。在该模型中,采用Hadoop对元模型进行搭建,从而完成......
以 Hadoop 架构为核心, 设计了桑蚕饲养大数据平台, 平台包含桑蚕饲养大数据采集模块、 运算处理中心模块、 数据存储中心模块和智......
传统基于移动闭塞模式下的城轨列车运行路线追踪方法在面向海量人流和车流的情况下,存在延误扩散以及线路运行的恢复能力差等问题......
安全管理平台（SMP）是实现安全管理工作常态化运行的技术支撑平台,在实际应用中需要实时处理来自安全设备所产生的海量日志信息。为解......
传统分布式大型邮件系统对海量邮件的过滤存在编程难、效率低、前期训练耗用资源大等缺点，为此，对传统贝叶斯过滤算法进行并行化改进......
根据云计算环境中用户任务调度的不同需求,提出一种基于改进离散粒子群优化算法的任务调度策略,可实现在短时间内对云计算任务的相......
针对国内电信运营商在CRM（客户关系管理）系统中对数据处理要求的日益提高及数据处理技术的重要性，分析数据仓库技术在通信领域的应用......
为解决电力危险点异构化检测问题,提高电网环境下动态节点的目的性调度分配,提出基于电力一体化调度的动态危险点检测方法。按照Ha......
随着我国信息化建设的不断发展,在扶贫开发领域已经积累了大量具有实际指导意义的扶贫数据,如何有效管理和利用这些日益增长的扶贫......
摘 要：将lucene索引架构应用到海量设计资源图像检索系统中，提出了基于hadoop和lucene的图像检索方法，分析了索引结构的建立、分布式......
针对当前电力数据海量异构和共享度不高的问题,结合Hadoop和电力企业数据共享的必要性,提出一种基于Hadoop的数据集成管理平台。为......
随着智能电网、通信网络技术和传感器技术的发展,电力负荷数据规模呈现指数形式增长、且复杂程度增大,逐步构成了电力负荷大数据,......
本文主要介绍了Hadoop架构的构成，用实例来对Had00p架构的MapReduce实现进行了详细的描述。并在这个基础上开发出一个在Hadoop架构......
大数据处理技术充分利用海量动态数据,能有效提升电力负荷预测精度及计算效率。采用Hadoop架构提出了一种基于模式匹配的短期电力......
整合科技项目所产出成果的信息能间接反映项目的研究内容,可以弥补项目查重过程中申报书难以获取的不足,具有重要的研究意义。本文......
视频转码是视频点播网站重要的技术环节之一。为解决单个节点视频转码开销大、耗时长的问题,在研究不同视频转码方案的基础上,提出......
遥感影像数据并行处理系统大多依赖于国外商用产品,而国内自主化并行计算处理系统的任务流程化支撑能力以及并行计算性能难以适应......
军事领域一体化作战大趋势不可逆转,战场上大数据的处理对指挥信息系统越来越重要,因此,作战云的思想应运而生,旨在从应用的作战云......
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”＄ MN。W;- __._——————》 砧叫]们......
电力系统短期负荷预测作为能量管理系统的重要组成部分,对电网动态状态估计、负荷调度和减少发电成本等方面具有重要意义。随着电......
为了应对大规模电动汽车充电站负荷的调度管理,提出一种基于Hadoop的模糊灰色GA-BP神经网络负荷预测模型。在云平台上,运用模糊聚......
随着智能化产业的不断发展,视频监控以其直观、准确、及时和信息内容丰富而广泛应用于许多场合,尤其在安防系统中的重要性日益突出......
介绍了Hadoop架构的主要构成,通过一个实例详细阐述了Hadoop架构的MapReduce实现机制;开发了一个基于Hadoop架构职工工资统计应用......
基于Hadoop架构,提出一种并行的决策树挖掘算法实现大数据集间的知识挖掘。通过MapReduce并行编程模式实现Hadoop架构下SPRINT并行......
为解决传统数据仓库系统在数据存储、数据处理、数据展现能力等方面存在的问题,结合江苏中烟的实际应用情况,设计了烟草海量数据分......
基于单一节点的数据挖掘系统在挖掘Web海量数据源时存在计算瓶颈,针对该问题,利用云计算的分布式处理和虚拟化技术的优势,设计一种......
为满足信息化处理需求的增长，提出MPI在云计算领域的应用研究。文章在介绍了云计算的优势、MPI概念的基础上，将MPI并行程序与并行机......
根据消息传递接口(MPI)的特点,提出云计算在MPI领域的应用方法,包括MPI的云计算算法设计模型、云计算原理、核心计算模式、处理流......
云计算是分布式计算、网络存储、虚拟化、负载均衡等传统计算机技术发展融合的产物。从2007年的起步,发展到2010年已经成为国内外......
传统的关系型数据库架构在应对电信运营商海量的大数据处理时建设成本高昂,处理能力低下,已经无法满足在大数据场景模式下的新型业......
地理空间数据交换和共享是地理空间信息资源开发与利用的关键问题之一。针对湖南省海量多源异构地理空间数据管理及交换共享的应用......
为了提高综采各设备间协同工作的能力,提出了基于Hadoop架构的分布式综采系统的设计思路,详细介绍了该综采系统的系统架构和功能实......
