基于Spark框架的实时推荐系统关键技术研究

来源 :武汉邮电科学研究院 | 被引量 : 0次 | 上传用户:l13633332021
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着移动互联网的飞速发展,用户在上网时需要面对的信息也呈几何级的增长,这些信息远远超过了普通用户承受范围,造成了不可避免的信息过载。针对大数据时代信息过载这一普遍问题,本文深入研究了能很好解决信息过载的技术:推荐系统。而在数据爆炸式增长的当下,推荐系统也面临着各种新的挑战。数据稀疏、冷启动、大数据场景下的可扩展性、推荐结果的准确性和实时性,每一个都是大数据场景下推荐系统正在面临的问题。本论文通过详细的探讨推荐系统的算法原理和系统实现的关键技术,详细分析了各种推荐系统的优势以及弊端,以及目前主流的两种大数据框架Hadoop和Spark。通过对已知推荐算法面临的问题逐个进行分析,并给出可行的优化方案:通过实时流处理技术提高系统实时推荐速度,通过基于情境感知的推荐提高准确率,等等。最终将各个优化过的方案结合起来设计出了基于Spark的实时情境推荐系统。本论文中设计的推荐系统性能在实时响应速度、推荐准确率、推荐召回率等多个方面优于普通推荐算法,对推荐系统的研究具有一定的启发作用。
其他文献
词典是汉语自动分词的基础,分词词典机制的优劣直接影响到汉语自动分词的速度和效率。本文简要分析了汉语自动分词的三种主要算法,指明了分词词典机制在自动分词中的重要性,
本文从产业链视角着手,从四个维度出发,阐述农业产业链发展的主要影响因素,探讨我国农业产业链的成长机制,并提出我国农业发展路径,旨在优化农产品结构,推动现代化农业发展步
本文通过概括国内外相关的SBS改性沥青紫外线老化研究现状,阐述了SBS改性沥青紫外线老化机理,综述了紫外线老化方程,并对影响紫外线老化的因素进行了概括。针对目前我国现有
纳米铝粉具有燃烧速率快、燃烧效率高,燃烧完全和燃烧过程无团聚、集块等优点,作为固体推进剂的金属添加剂时,可显著提高其比冲、降低压强指数和特征信号。然而纳米铝粉由于
以青岛海尔全球创新模式研究中心二期工程为例,针对造型复杂、斜板标高和坡度各异的多V面异形屋面,通过利用BIM技术建模形成直观的三维空间,从而制订了相对应的施工技术措施,
本文在分析J.D.Denton格式的基础上,采用了R.W.MacCormack时间分裂有限体积法来计算跨音速叶栅流场,使计算与实验结果更加吻合.介绍了使用当地容许时间步长和加密网格法来加
PPP模式通过引入社会资本实现了政府、企业和社会多赢的局面。自2014年以来,PPP项目呈现出“井喷”的发展态势,但发展迅速的同时,也有不少失败和被清理的PPP项目在警示我们,PPP模式实际操作和管理的过程中还存在很多盲点,特别是对项目财务风险的管理上还存在很大漏洞。本文采用文献研究法和案例研究法,对PPP模式的相关概念和财务风险管理理论、动态集成化风险管理理论进行了研究总结,以G县XW河工程PP
5G(The Fifth Generation,第五代)移动网络有望在若干关键性能指标方面取得显著的提升,其中低时延是被众多新兴的物联网业务(例如远程手术、增强现实、触觉互联网和车联网)所
以硅粉为原料,通过添加成孔剂球形颗粒,以聚乙烯醇作粘结剂,采用包覆工艺、干压成型,反应烧结制备了多孔氮化硅陶瓷,对比了包覆工艺对实验结果的影响。结果表明,采用包覆工艺
装修设计是一种对室内的结构进行优化处理的重要方法,可以增强室内的视觉感受。社会在不断地进步、发展,人们的需求逐渐发展,对室内装修的期待越来越高,因此室内装修设计的形