基于广告投放的运营数据实时分析系统的设计与实现

来源 :华东师范大学 | 被引量 : 0次 | 上传用户:zxyoci
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近几年,随着移动互联网的发展,广告业务迎来了新的变革。为了吸引更多用户,在提升项目运营收益的同时,减少广告投放的成本,广告主们希望能够实时的分析广告投放数据和项目运营数据。因此设计出一款能够结合广告投放数据和项目运营数据的实时分析系统,就是当下各大广告主不可或缺的需求。本文的基于广告投放的实时运营数据分析系统就是为了满足广告主的需求而设计开发的。系统采用埋点自动化实时数仓的解决方案,保证数据能够被实时的分析处理,并快速查出结果。同时,系统仍然要保留离线分析的能力,保证部分指标结果的准确性。此外,系统还要支持多维度,多模型的数据分析,并且还要尽量降低数据开发的成本。本文从系统的需求着手,主要讲述了系统架构和功能的设计、系统的实现和系统的测试。根据需求分析,可以将系统划分为两个部分,八个模块。两个部分分别是数据中台和系统服务端。数据中台负责处理数据,系统服务端负责查询分析和展示。以下为系统的八个模块。(1)运营数据采集模块:主要负责收集APP产生的运营数据,将其存放到消息队列中,以供后面的模块分析处理。(2)埋点自动化实时数仓模块:此模块为系统核心模块,提出了埋点自动化实时数仓的解决方案。主要是负责将埋点数据自动化的接入到实时数仓当中,降低数据开发人员的工作量。(3)广告投放分析模块:主要是实时处理广告相关数据,计算指标,对广告数据进行可视化分析。(4)行为分析模块:主要是支持分析师以高度自由化的方式,从多维度多模型的角度,对数据进行实时分析。(5)用户画像分析模块:主要是负责给用户打标签,分析同类用户的使用习惯,进一步辅助广告主做出合理的决策。(6)数据风控模块:主要是负责监控指标数据的异常变化,和排查IOS异常充值的用户。(7)数据管理模块:主要是负责管理系统查询的数据源,系统的埋点事件和事件属性,方便数据中台处理数据。(8)权限管理模块:主要是负责管理系统用户、系统角色和系统权限的,使系统能够做到合理管控。以上就是系统的开发背景和论文的主要内容。
其他文献
随着摩尔定律的不断发展和先进制程的进步,异质型FPGA电路的集成度越来越高,性能逐渐提升,在得到广泛应用的同时也带来了新的挑战。例如,相应的EDA工具需要同时考虑优化线长目标,满足密度、时钟约束,提升可布线性等多方面的要求。布局是FPGA后端物理设计中最重要的环节之一,由于传统的布局算法主要考虑线长优化,且在布局阶段无法快速获取布线拥塞评估,容易产生可布线性差的布局结果从而导致后续布线失败。另一方
学位
玉米作为全球三大谷物之一,不仅富含充足的膳食纤维、黄体素等营养物质,更是具备清湿热、延缓衰老、利肝胆等功效,对我国农业发展十分重要。但是在玉米种植业领域,大规模种植玉米需要及时把控玉米的生长状态,因此及时有效地监测玉米生长状态是十分重要的一环。传统的监测玉米生长状态主要依靠两种方法,一种是人工监测,但是这种方法属于经验性判定,不仅繁琐复杂、易出错、受主观影响大且效率低下,无法满足大规模培育玉米时精
学位
疫情的爆发,给国内很多行业带来巨大挑战,可以说危险和机会并存,例如电子商务行业。算法和大数据的运用,让整个行业运营效率得到有效提高,加上国家财政政策的支持,企业移动端的布局,网购市场规模持续扩大,推动了生鲜电商整体市场增长,但是行业面临的风险也是不容忽视,每日优鲜已宣布破产重组,钱大妈从北方市场悄然撤离,均诉说着企业面临的风险和承受的压力。A电子商务公司是为品牌方提供完整的产品开发,品牌营销,视觉
学位
根据2022年世界银行组织对全球金融市场规模最新统计数据显示,中国以超过12万亿(美元)的规模成为世界仅次于美国的第二大金融市场。中国金融市场的繁荣发展,吸引越来越多的投资者希望通过量化交易的投资的方式获取收益。然而,通过量化交易进行投资对于普通投资者来说存在三个困难:首先,面对众多不同的投资理论,量化交易模型复杂,投资者难以采用有效的方法获得收益;然后,数据采集和预处理容易出错,同时模型建立、开
学位
随着我国近代化进程的不断加快,汽车的数量大量增加,这也间接导致了交通事故的发生频率大大增加,因此自动驾驶技术引起了各大汽车厂商的愈发关注。基于深度学习的目标检测技术在自动驾驶的感知模块发挥着很重要的功能,但是随着目标检测技术的精度的提升,其网络模型也会愈发的复杂,庞大的训练参数则需要较高的硬件配置。由于汽车的车载系统性能有限,因此如何让目标检测算法在保持精度的同时,更加的轻量化则是本文的主要研究方
学位
目前国内工业品电子商务的发展还在刚起步的阶段,供工业品电商使用的高质量搜索引擎目前国内还有待研发,本系统的目的就是给工业品电商平台提供一个快速搜索工业品的系统,在满足工业品电商的业务需求后优化用户的购买体验。工业品垂直搜索引擎系统是出自上海鑫谊麟禾科技有限公司垂直搜索产品线的实际项目,属于中国传统搜索引擎行业。工业品垂直搜索引擎系统是以产品信息为基准,明确电子商务产品和其客户要求,进行针对产品的垂
学位
工业互联网时代,制造业企业对于效能提升的需求与日俱增。在面向市场的竞争中,快速响应生产需求变更的企业往往具备更强的灵活性。车间如何在各种约束条件下,针对不断变化的生产需求快速而弹性的制定生产计划,降低库存的堆积并节省运维的各项成本实现降本增效,是一个值得研究的问题。当下,大多数企业在车间生产的过程中缺乏科学的统筹规划,未形成具备体系的排程方案。车间作业调度问题(JSSP)作为车间排程系统的核心,也
学位
随着世界经济的蓬勃发展和我国改革开放的逐步深化,信用卡支付已成为现代社会最常用的支付方式之一。作为一种不断增长的服务,如何评估其申请人是否能偿还贷款对于正确的支持金融机构去定义其政策与策略起着关键性的作用。在过去的几十年里,人们提出了许多方法来评估个人信用风险,但是要准确地评估信用风险还存在很多待解决的问题。其中一个问题是如何充分利用现有的无标签数据,从而减少标注成本,解决这一问题的关键技术是半监
学位
地铁隧道交通运输是现代城市轨道交通系统的重要组成部分,随着我国城市化进程的不断推进,大量的地铁隧道由建设期转为养护期,受设备使用时间,材料性能劣化、周边工程活动、气候条件等多重内外因素的影响,导致隧道衬砌结构出现大量病害,其中,衬砌裂缝是最常见最严重的一类病害,及时高效地检测出这些裂缝对于后期的维护工作意义重大。为解决传统人工检测效率低,成本高的问题,本文提出了基于深度学习的地铁隧道裂缝目标检测方
学位
无人艇(Unmanned Surface Vehicle,USV)是一种可在复杂水面环境中自动巡航、自主执行多种任务的新型载体。随着航海领域内的国际形势变化以及大众对于民用智能化无人艇的强烈需求,如何保障无人艇在水面运动轨迹的准确性和可靠性逐渐成为研究关键技术之一。由于无人艇在自主运动中,容易受到风、浪、流等外界因素干扰,加之具有非线性运动的特点,因此研究无人艇的航迹跟踪对拓展海洋开发潜力,保障作
学位