大数据处理相关论文
为对电力负荷进行准确地预测,采用Spark并行化大数据处理框架,对各子网分别进行预测,提出基于灰色投影改进随机森林算法,采用灰色关联......
世界主要国家高度重视大数据发展,我国也将发展大数据作为国家战略,发展大数据技术具有重要意义。大数据技术涉及从采集、传输、到管......
目的 探讨资源目录整合及科研应用,提高重点学科和疑难疾病的诊治水平,辅助医院提供优质高效的科研管理和医疗服务。方法 系统结合大......
网络爬虫行为目前已进入刑法视野,而爬虫技术的不当使用也会损害到公民的权利。公民个人信息具有其特殊性,在经过大数据处理后可用......
通过完成基于微服务的疫情可视化分析系统设计与实现,使用网络爬虫来获取大量的疫情相关数据。通过实时计算对疫情数据处理,并通过EC......
针对目前大部分农业种植信息系统指标单一的问题,文中利用J2EE架构、MVC设计模式结合Spring Tool SuiteTM(STS)软件进行开发,设计一种......
科学技术的蓬勃发展带来应用种类的百花齐放,却也导致数据规模的爆发式增长,如何处理大数据成为信息时代的一项亟需解决的关键问题......
随着社会的发展,人们的物质生活水平跟以前相比有了很大提高,看电影成为人们业余时间里追求精神世界享受的一种娱乐休闲方式。每年......
近些年,传统的B2B企业面对“互联网+”这一新形态时摩拳擦掌,但是企业与企业之间的数字化的程度却迥然不同。对于企业命脉生死攸关......
随着大数据时代的到来,也使得财政审计有了新的变化,主要表现为审计客体数据化、审计内涵丰富化和审计分析多样化这三个方面.一定......
面向服务的架构SOA提供了灵活的服务集成方法,在处理各类场景带来的问题中得到了越来越多的关注。服务集成框架是基于数据分发服务......
近年来,随着全球定位技术和无线通信网络的快速发展,轨迹数据更易于被采集与使用,为城市交通规划、出行规律挖掘、兴趣点推荐等应......
随着移动互联网的普及和5G的飞速发展,网络上数据规模呈指数增长,数据的价值也被不断挖掘利用。数据中心作为数据进行传递和存储的......
随着移动互联网、4G/5G、物联网等技术的快速发展,各类应用所积累的数据规模正在飞速增长,大数据时代已然到来,成为眼前的现实。在......
物流供应链系统建设需要数据的支持,通过大数据技术可以推动物流供应链的优化,完善物流供应链建设水平.本文分析物流供应链的创新......
互联网金融是基于互联网载体衍生的线上金融交易模式,是传统金融与互联网信息技术的有机结合,其既具备了传统金融的显性特征,同时......
为了在大数据处理下提高ETL开发效率、任务维护及监控能力、减少人工操作、在多种相似数据存储过程中共享ETL过程,文章提出一种基......
当前,智慧城市成为信息时代城市建设的一个基本目标,智能视频安防监控是其中重要一环。视频监控系统已广泛使用于各行各业,监控视......
基于大数据处理和分布式计算的需求,很多分布式计算框架应运而生,分布式计算框架中集群资源的合理配置对计算效率有着重要的影响,因为......
随着网络技术的飞速发展,信息感知和网络应用产生了巨大体量的数据,大数据时代已经来临。目前,网络大数据中绝大部分是无标签的数......
在网络数据量急速增长的现代社会,大数据存储处理技术正在蓬勃发展,其中HDFS(Hadoop Distributed File System)系统是大数据存储处......
最近几年,随着数据信息量的激增,大数据概念兴起。大数据的处理分析受到了国内外各个研究领域的广泛关注。由于谷歌的成功案例,使......
信息检索是获取互联网信息的重要方式,在这个阶段,人们能够检索到信息,但却需要自己去鉴别信息的有用性。个性化推荐系统是在大数......
学位
随着个人移动设备的普及和互联网、物联网等信息技术的快速发展,我们的生活已经进入了大数据时代。如何从海量数据中高效地获得有效......
近年来,信息社会的飞速发展引发了数据规模的爆炸式增长,大数据问题逐渐引起了研究者的广泛关注。然而,大数据问题表现出与传统科......
随着信息技术和互联网的发展,人们逐渐从信息匮乏的时代进入了信息过载的时代。在这个时代,无论是信息的生产者还是信息的消费者都遇......
随着互联网行业规模的大力发展,数据存储量已由原来的TB跃升到PB、EB乃至ZB,大量结构化、半结构化和非结构化的数据面临着统一处理和......
随着互联网技术的高速发展,网络上的资源逐渐由匮乏状态转变为现在的爆发式增长状态。在信息爆炸的时代,利用推荐系统处理过载信息,可......
近年来,诸多大数据环境下的应用呈现数据多源并发、数据聚合、在线实时处理的特征。原本承载着海量数据处理任务的Hadoop MapReduc......
随着互联网的飞速发展,近年来电子商务得到了迅猛发展,交易数据激剧增加,即使采用目前最有效的Hadoop、Spark等数据处理技术也仍然......
Hadoop是对大规模数据进行分布式处理的软件框架,是一种实现云计算和云存储的分布式计算平台。在不知晓分布式架构的具体细节状况下......
当今,Hadoop集群在大数据时代下已经广泛使用,互联网公司对数据的处理和分析广泛使用Hadoop集群。一旦Hadoop集群失效,会导致数据......
社会网络是现实中许多真实复杂网络的抽象,社会网络中蕴含着丰富的数据信息。现实世界中,社会网络随处可见,例如Blog、FaceBook和Twit......
在当下数据大爆炸的时代,如何有效的处理大规模数据一直是工业界和学术界研究的热点。本文针对大规模数据采用基于分而治之的思想......
随着教育信息化的不断发展和互联网技术在教育行业的深度应用,许多高校基于云计算和大数据技术,在智慧校园建设上取得了很大的进步......
摘要:文章求解最优信贷策略,可转化为建立层次分析模型求最优解问题,问题一,对数据处理后,将不合格企业剔除。据四个分类标准得出最佳的......
大规模分布式系统正在成为IT行业的核心组件,支持各种类型的日用软件,包括网上银行,电子商务和即时消息等。与传统的独立系统相比,......
近年来,移动数据业务和智能设备数量快速增长,移动设备的数据流量不断增加,这对数据传输速度和稳定性提出了更高的要求。LTE网络为......
随着城市道路车流量的迅速增长和某些交通规划与管理经验上的不足,交通拥堵、交通肇事、环境污染等问题日益严峻。因此,能够实时了......
近年来,随着城市工业和交通行业的不断发展,我国城市声环境质量受到了越来越严峻的挑战,由此产生的噪声污染问题不仅损害了居民的......
随着智慧城市、智慧交通的迅猛发展,产生了海量的交通视频数据。在复杂的交通环境中如何高效的跟踪车辆目标成为了当前亟需解决的......
由于其良好的泛化性能和快速的学习速度,极限学习机(Extreme Learning Machine)和在线顺序极限学习机(OS-ELM)被广泛应用在文本分......
随着城市人口和规模不断扩大,城市居民对交通服务和公共资源的需求日益增长,对城市内居民出行的时空特征研究变得尤为重要。近年来......
安全情报搜集工作是相关政府部门在国家安全领域开展社会治理,保障国家安全的一项重要职能之一。充分运用大数据处理能够帮助安全......
本文总结了多参量光纤传感网研究现状,针对多参量光纤传感网组网结构简单、数据并发采集和处理能力弱、波长解调精度低等不足和缺......