基于Hadoop及深度学习的电商个性化推荐平台的设计与实现

来源 :北京交通大学 | 被引量 : 4次 | 上传用户:shanlin_shanlin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着科技的高速发展,现在已经步入了”互联网+”时代。越来越多的电商平台走入了人们的生活当中。如何给用户带来更稳定的访问、更好的商品推荐浏览。也成为了目前电商平台急需解决的首要问题。“电能E购”电商平台是国家电力投资集团在《物资装备分公司(成套公司)”十三五”发展规划》的发展思路中明确提出的综合型能源产业电子商务系统。在平台中引进了 Hadoop大数据平台技术为平台的服务的稳定性提供了支撑、研究了协同过滤、KNN、深度学习等多种推荐算法为平台服务的友好性提供了支撑。在本项目中,分别从页面推荐位置分析、推荐模块数据表设计、不同推荐算法的执行流程设计、训练所需数据集的整理及清晰、深度学习的神经网络的建立与训练、Hadoop平台的搭建与推荐算法在Hadoop平台的应用、Hadoop平台的性能测试及可用性测试、传统推荐算法与深度学习推荐算法在不同维度的测试评估等方面进行了设计与实现。对于平台页面,分别分析了平台主页面、详情页面、搜索页面的不同栏位可以进行哪些推荐;对于基于算法的推荐设计并实现了 LSTM+GAN的深度学习神经网络;对于数据的存储、实时数据流的传递、数据的快速分析运算搭建了 Hadoop平台应用了 HDFS、Hive、Kafka、Spark等相应组件;对于Hadoop集群测试,通过了中国通信信息研究院对大数据平台功能及性能的测试;对于算法的测试分别从算法准确度、效率、所需训练数据集三个方面进行了测试及评估。通过对这个项目的研究与实现,使得“电能E购”电商平台有了更快的响应速度、更好的用户体验。推荐算法及大数据平台对电商平台的效益有了极大的提升,此项目的研究与实施对社会发展及学术研究也具有重要意义。
其他文献
矿业权的法律属性一直以来都是法律界探讨的话题之一,形成了几种有代表性的观点。通过几种代表性观点进行介绍,并对矿业权应属准用益物权的法律属性进行详细阐述,引申出我国
汽车制动器罩壳设计状态的模态往往要求第一阶高于60HZ,否则容易与系统及外界激励发生共振现象。现以某车型后制动器罩壳模型为例,进行拓扑优化和形貌优化技术研究[1]-[2],提
膜分离技术是近30多年来发展非常迅猛的一种技术,与常规方法相比具有能耗低、单级分离效率高、装置简单、没有相变等优点。采用超滤(UF)设备代替传统的砂滤、活性炭、微滤.作为反
野外工作发现,北峪奥长花岗岩侵入于绛县群变富钾流纹岩之中,结合其2107±59Ma的全岩Rb-Sr等时线年龄,应为早元古代岩浆侵入的产物。北峪岩体具高的Al2O3含量和高的δ^18OSMOW(‰)比值,表明为铝过饱和的S型