基于Spark优化的协同过滤推荐算法研究

来源 :长春理工大学学报(自然科学版) | 被引量 : 0次 | 上传用户:JoQn
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
推荐算法是数据挖掘中较为重要的算法之一,在如今的互联网发展中被广泛使用。而基于SparkMllib平台上使用的ALS协同过滤算法在个性化推荐系统中发挥着重要作用,但由于Spark复杂的内核架构与其基于内存计算的特点,想通过Spark实现高性能的推荐系统,还存在着诸多问题需要研究。针对基于ALS模型的协同过滤算法及用来实现该算法的Spark计算技术进行分析与优化,经过资源优化后,缩短了推荐所用的时间,其性能提升了33.3%;在资源优化的基础上再经过SparkShuffle优化,优化后的性能与无优化时相比,其
其他文献
我国建筑行业的高速发展,为施工项目带来了严峻的考验,模板工程占混凝土结构施工造价的20%~30%,占工程用工量的30%~40%,占工期的50%,传统的木模板施工不仅浪费施工材料,还对
背景及目的:结直肠癌的发生、发展涉及多种基因的异常改变。已有研究表明,慢性肠道炎症增加了结直肠癌发生进展的危险性,Toll样受体4(toll-like receptor4,TLR4)在肠道慢性炎
香港《逃犯条例》修订风波发生以来,香港社会不断被撕裂,非法暴力不断升级,有组织的颠覆行为逐渐常态化,抗争正脱去“反修例、争普选”的“民主”外衣,暴露出反“一国两制”,
基于元认知的高中数学理解性教学,能够积极帮助学生数学知识的学习,有助于学生未来的学习与发展。针对于此,探讨了高中数学学习中理解能力重要性的基础上,分析了影响学生数学
分析2000—2010年中国与韩国双边服务贸易G L指数和MIIT指数,结果表明:中韩两国在运输服务、旅游服务和通讯服务等部门呈现出较高的产业内贸易水平,但在其他商业服务和政府服
新媒体与日常生活的深度勾连推动"娱乐"日益成为形塑互联网公共实践的重要力量。"礼物"作为传统人情社会的交往符号,亦伴随线上娱乐消费植入更为广泛的公共生活领域。透过对
对橡胶促进剂生产废水进行分类收集,确定了采用蒸发脱盐-Fe-C微电解-生化法联合的方法处理。试验结果表明,在蒸发脱盐阶段,蒸发量为80%时,出水COD仅为3 112 mg/L,蒸出来的盐
目的了解岑溪市吸毒人群的艾滋病感染状况,为吸毒人群艾滋病、性病防治提供科学依据。方法按《全国艾滋病哨点监测实施方案操作手册(2012)》方案,采用统一的问卷调查表,调查201
植物花色苷是一种广泛存在且可赋予植物组织和器官五彩缤纷色彩的植物色素,具有多种生物活性,在食品、医疗及保健品行业拥有广阔的应用前景。文章结合国内外研究情况综述了花
<正> 桐城派是清代乾隆以来,在中国文坛上出现的一个散文流派。它的形成,曾国藩的《欧阳生文集序》中,曾有所论述.文中说:乾隆之末,桐城姚姬传先生鼐,善为古文辞,慕效其乡先