Flink相关论文
船舶消耗化石燃料较多,为了应对各项节能减排法规,航运领域不断推进新能源技术在船舶上的应用。其中,风力和光伏发电系统在船舶上......
容器化部署Flink时，存在上下游算子的容器内存分配不均衡问题。提出基于深度学习的容器化Flink上下游负载均衡框架，使用CEEMDAN分解......
针对K-Means聚类算法依赖于初始聚类中心选择的问题，利用鲸鱼优化算法易于获取全局最优解及快速收敛性的优势，结合分布式框架的并行......
在大数据环境背景下，传统的机器学习算法多采用单机离线训练的方式，显然已经无法适应持续增长的大规模流式数据的变化，所以针对上述问......
提出一种基于Flink的流关联挖掘算法FP-Flink。算法通过划分投影、字典序结构及序列化存储的方式，解决流关联挖掘过程中数据中间结......
电力系统在我国经济发展中发挥着极其关键的作用,配电网位于整个电力系统的末端位置,最终连接到数以亿计的用电客户,用户的一切生......
随着信息时代的发展，许多餐厅将美食上传到互联网平台供消费者选择，面对大量美食，消费者往往陷入选择困难的场景之中。针对上述问题，基......
为了解决单表数据记录条数在亿级以上的数据实时统计分析问题，针对聚合运算后的结果数据记录数量显著少于原始记录数量的一类特定场......
目前智能手机随处可见,各种年龄段的人群都可以在网络上随心所欲的购买商品。巨量电商数据的存储及分析成为了人们普遍关注的话题......
本文在对Flink和实时数仓进行研究的基础上，设计出一种基于Flink实时数仓系统设计框架、大数据处理实时化趋势和系统模块功能等内容......
随着互联网的发展,线上购物已经融入人们的日常生活,相比传统的购物模式,网络购物的规模逐步扩大,而且电商平台多样化的信息展示也......
随着移动互联网的成熟发展,我们也逐步迈入了大数据时代,“信息过载”问题则成了我们每天必须面对的问题。推荐系统在这样的背景下......
用户画像是真实用户的虚拟代表,是建立在一系列真实数据之上的目标模型,可以用来描述用户的需求、个性化偏好以及用户兴趣。随着近......
随着互联网的高速发展以及电商的普及,企业间的竞争愈加激烈,如何抓住老客户、吸引新客户、了解用户偏好和需求,是关乎企业发展乃......
分布式流处理引擎根据其算子特性可以分为有状态与无状态两种;在基于数据并行的有状态分布式流处理引擎中,如果数据发生较大倾斜,......
随着互联网技术及应用的不断发展,网络已经在商业、经济、军事等各个领域都发挥着巨大作用,而成为人类社会发展不可缺少的部分。然......
移动互联网技术的快速发展以及智能终端的普及,加快了大数据时代的到来,也给很多行业带来了机遇与挑战。每日有亿万级的用户使用着......
大数据时代的到来,为深度学习的发展迎来了新的契机,不断增加的样本量使深度学习模型预测的准确率不断提高。但问题也随之而来,随......
从分析宝日希勒露天煤矿智能运输安全生产监控系统数据存储及计算存在的主要问题入手,研究并确立了宝日希勒露天煤矿安全生产大数......
随着大数据时代的降临,信息技术发展上升到了一个新的历史阶段,影响着社会生产模式和人们生活的方方面面。智能移动设备、智能家居......
为了满足大数据监控告警系统具备灵活告警及实时动态更新各类配置的需求,在深入研究各大数据监控告警系统架构的基础上,提出一种基......
随着娱乐多样性对游戏玩家的分流与手机游戏行业竞争的愈演愈烈,玩家流失成为游戏业务层需要解决的难题,有效的留存手段与回流策略......
随着互联网爆发式的增长,网络安全问题也愈加严峻。与以往的网络攻击相比,现在的网络攻击形式更加复杂且隐蔽,这导致网络攻击的检......
随着列车舒适性以及安全性的不断提高,列车通信网络中传输的数据量也在不断增大,具有高带宽的以太网列车通信技术正在逐步替代传统......
对电力资产大数据进行了概述,基于Flink构建了电网资产全寿命周期管理平台,以查询、删除操作对系统性能进行了测试,对测试结果进行......
雷达回波信号常用来进行目标识别,但在实际环境中,接收到的往往是多种信号分量混杂在一起后的信号,并且其为非平稳信号。针对这种......
随着信息技术的发展,数据总量爆炸式地增长,互联网逐渐进入大数据时代。与此同时,如何在海量数据中快速有效地找到用户所需要的信......
面对互联网与日俱增的数据量,用户为了寻找某些信息而遍历整个互联网是不可能的。推荐系统是解决这种问题的方法之一,在新闻、音乐......
近年来随着配电网运维智能化程度越来越高,大量的运维数据通过互联网实时交互,如何利用好这些数据为客户服务,同时降低企业运营成......
数据量的不断增大,使信息筛选和处理的困扰与日俱增,用户画像项目以此背景成立,旨在“数据驱动业务与运营”。系统地介绍了用户画......
期刊
本文为了优化工业大数据存储分析过程,实现海量数据的实时统计分析,利用实时数据仓库、分布式存储、分布式消息队列、流处理计算引......
虽然互联网快速进步发展,但也带来了大量的网络数据流,随之而来的是数据的综合存储,数据的综合计算和数据分析等诸多问题,各种业务......
随着互联网技术的飞速发展,人类正在走向大数据时代与云计算时代。Flink作为最新一代的大数据计算引擎,具有低延迟、高吞吐等优势,......
运营商数字业务运营的新形态和新模式,对数据处理的实时性需求越来越多,搭建一种高效、低时延的实时数据仓库,满足实时推荐、实时......
近年来,随着基于位置服务的移动物体如共享单车,共享汽车的兴起,如何迅速查找附近物体,逐渐成为人们交通出行的迫切需求。当海量用......
随着通信技术、网络技术和移动互联网技术的不断发展,人们生活水平日益提高,休闲娱乐的方式也发生了翻天覆地的变化,不仅通过电视......
基于物联网的心脏健康预警系统是指结合以可穿戴设备为代表的物联网技术,通过采集心电、心率等心脏健康相关指标,实现对心脏健康状......
随着工控网络技术的发展,大量的通用软硬件应用到工控网络中,与此同时,工控网络也变得越来越开放。工控网络在提高生产力的同时,也......
随着我国物联网、传感器以及通信技术发展日趋加快,各个领域数据规模不断增加,数据成为一种在大数据时代新兴的资产。水文传感器在......
随着移动互联网的兴起,人们面对的数据信息开始呈几何趋势增长,许多企业发现了其中的商业价值,想从海量数据中挖掘有用的信息以支......
随着空天遥感大数据技术的飞速发展,多维、多尺度、高分辨率的遥感影像与无人机低空遥感图像数据呈现爆发式增长。传统分类软件在......
随着大数据应用场景的需求不断发展,流计算逐渐成为一种主流计算模式。流式应用通常需要持续地运行,在这个过程中难免要受到各类软......
