中大型互联网网站用户行为分析数据平台

被引量 : 0次 | 上传用户:msdn_sdk
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机和网络技术的飞速发展,互联网应用得到了极大的普及。对于中大型互联网网站,在拥有大量的用户数据的基础上,如何对这些用户数据进行及时有效的数据分析与挖掘,找到真正有商业价值的用户行为信息,从而为用户提供更优质的服务,对企业具有重要的应用价值和现实意义。论文在深入分析了处理大中型网站的海量用户行为数据时的数据平台特点的基础上,设计了具有针对性的用户行为数据的分析与信息挖掘系统,并对数据平台的系统架构设计和数据挖掘模型进行分析与设计。针对网站运营过程中所需要的数据支持特点,论文搭建了实时的数据传输平台和数据分析平台,以满足网站中各类实时应用的需求。为了满足实时流数据的请求需求,实时数据采集系统采用nginx+resin的方式进行数据接收后,将数据发送消息管理中间件,解耦实时数据采集系统和实时数据分析系统。论文采用了RabbitMQ和高性能的mina框架以满足系统的数据交互需求,并将数据分析得到的结果存储到MongoDB集群中,以供前端业务查询功能使用。由于对用户行为的日志数据按照产品需求进行深度分析并不需要很强的实时性,从而论文构建了非实时的数据分析系统进行离线的数据计算。该平台需要解决的是大数据容量的处理效率和数据存储效率之间取得平衡。论文在系统架构设计中采用了中间件技术,提高了系统架构设计的合理性和灵活性,同时保证了系统运行的高效率。论文深入讨论并设计了中间件的缓存管理策略,以及相应的缓存失效管理技术。
其他文献
<正> 柴油机的热效率高,运转中不用电,排气特性好,经济效益显著,但其起动性能比较差,特别是在低温环境中更为突出。对我国引进的大量设备,人们普遍认为其起动和动力性能都较
膜材料一般由织物构成,是一种继钢材、混凝土、木材、玻璃之后新兴的第五种建筑材料。膜材料的发展为探索柔性材料在当代建筑中的表现力提供了新的机会,而这些机会源自膜材本身
阴阳的正常关系是阴阳和,而和的内涵是从属者与主导者相应,阴阳和是指阴与阳相应,所以阴阳和的实质是阳主阴从;阴阳平衡是指阴阳势均力敌的状态,阴阳平衡多易造成阴阳不和,所
钢管混凝土柱与其优越的力学性能被广泛运用于多高层建筑,目前钢管混凝土构件承载力的计算采用了“钢管混凝土统一理论”中的统一设计公式.统一理论把钢管混凝土构件看作是一
现阶段工程造价管理体系形成了基本构架,在规范行业发展中起到了积极的作用,但应对建筑市场环境变化和具体实施方面还需补充内容、调整手段或完善制度。本文通过对现有造价管
<正> 九届全国人大常委会第十四次会议通过了《全国人大常委会关于加强经济工作监督的决定》(以下简称《经济监督决定》),这是继去年12月九届全国人大常委会第十三次会议通过
商业活动的繁荣发展带来了现代企业所有权与控制权分离的典型特征,作为公司投资人的股东与公司董事之间的利益平衡成为公司治理的焦点和难点。从“股东大会中心主义”向“董
目的探讨磁共振扩散加权成像(DWI)和表观弥散系数(ADC)在后颅窝实质型血管母细胞瘤诊断与鉴别诊断中的价值。方法回顾性分析经手术病理证实的15例后颅窝实质型血管母细胞瘤和
证券投资基金在国外已有一百多年的发展历史,证券投资基金已成为西方发达国家金融投资业的三大支柱之一。我国资本市场起步于二十世纪八十年代,经过十几年的发展,我国证券投资基
本研究旨在对法国思想家乔治·索雷尔的政治理论、现实背景及思想渊源进行梳理和阐释,并试图对索雷尔的政治理论做出整体性评价。从现实背景上看,虽然索雷尔从未参与工团主义