基于强化学习的用户关系组的缓存分配优化

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:hunterfall_horse
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息技术和移动设备的发展,特别是4G的普及以及5G的商用,视频等网络资源呈现爆发式增长。大规模的网络流量存在于网络中尤其在高峰期会造成网络回程拥挤,使得用户的请求延迟增大,降低量用户的上网体验。如何解决网络拥挤的问题是当下网络结构优化的重点。为了缓解网络拥塞和降低请求延迟,D2D缓存技术成为了一个现代通信网络重要的组成部分。人们总是在网上浏览他们感兴趣的内容。D2D缓存技术可以缓存人们比较感兴趣的内容,使得人们在请求内容时可以直接通过D2D通信得到而不需要向基站请求。由于不同的人有不同的兴趣点,并且人们的兴趣点会随着时间和社会热点的出现发生变化,缓存设备的选取以及如何有效决定缓存内容成为了亟待解决的问题。现阶段的研究主要根据用户的设备能力和历史通信记录来决定缓存设备的选择。实际上缓存节点周围用户的请求分布是在不断变化的而且历史记录的数据量不是足够的,这使得缓存节点的选择和缓存的内容并不是固定不变的。本文提出了一种基于虚拟时延的最优缓存节点选择算法,该算法以多臂赌博机模型为基础,根据用户的兴趣差异获得最优的缓存决策。每个候选用户均有机会成为一个缓存节点,该算法选择系统延迟最小的候选用户作为缓存节点。但是实际情况下,在一定的区域内,会同时存在多个缓存节点。在缓存节点空间有限的条件下,如何提高一定区域内请求者的请求缓存命中率是一个重要问题。现阶段的研究主要集中在多缓存节点之间进行协作的方式。由于每个缓存节点的缓存能力和周边用户的请求分布不同,导致每个缓存节点的服务能力有所差异,所以有必要对各个缓存节点的服务能力进行有效区分,进而充分利用各个缓存节点的服务能力,使得整体收益达到最大。因此本文提出了一种主从节点协作缓存算法。该算法以缓存节点选择算法为基础,充分利用服务能力较强的缓存节点之间的协作,调整各个缓存节点的缓存决策,使得整体请求延迟达最小。另外,考虑到实际情况下用户多具有移动性,本文在移动场景下测试了提出的基于虚拟时延的最优缓存节点选择算法来证明所提算法的实际适用性。最后仿真实验结果验证了本文提出的最优缓存节点选择算法和主从节点协作缓存算法的有效性。
其他文献
色觉测试图是筛查异常色觉、评估个体色觉情况的主要工具,由于其相比于其他色觉诊断手段的便捷性,长期被应用于临床实践当中。目前临床一线所配备的色觉测试方法,多采用预先绘制的色觉检查图绘本,对于色觉定性评估有着重要意义。但随着人类医疗健康水平的不断提高和“精准医疗”驱动下的相关临床需求的不断发展,对人类色觉进行更加精确的、细致化的评估将是实现医疗升级的重要支撑,这就依赖于色觉测试工具的进一步深化。本文正
绝缘子是输电线路中的重要装置,由于绝缘子长期工作在室外,环境复杂,很容易出现破损,缺片等故障。如果不及时检测并更换,很有可能会造成安全事故。因此对绝缘子及时进行安全巡检十分必要。传统人工巡检浪费人力又受个人主观意识影响,往往检测效率不高,容易漏检。本文利用图像处理相关算法与深度学习网络相结合针对包含复杂背景的绝缘子图像进行处理,最终将绝缘子的状态分为完好以及故障两大类别,实现对绝缘子故障的智能化识
高等院校承担着为全国培养新时代中国特色社会主义人才的重任,是深入贯彻落实新时代中国特色社会主义思想铸魂育人,贯彻党的教育方针落实立德树人根本任务的重要力量。当今中国社会,随着改革开放的进一步深化,经济全球化、政治多极化、文化多元化进一步的发展,带来的不仅仅是社会经济的大发展,同时也伴有多种多样的社会思潮、文化思想的传播,而且由于网络信息的快速发展,这些文化思想的传播渠道和速度也更多更快了。这些文化
设施农业由于其重茬、连作、病虫害高发等因素,致使农药高频、大量使用,又因其环境相对封闭,使得土壤中农药残留污染问题严重,土壤微生物活性及其多样性受到不利影响。本文选
比特币具有匿名交易、手续费低廉、跨国转账便捷等诸多优点,逐渐在全球范围内广泛流行,并在投资管理方面取得了巨大的发展空间。然而,黑客攻击,系统故障或人为过失等问题所导致的比特币丢失,也给个人或企业造成了严重的经济损失。比特币的安全性问题已然成为比特币用户关注的重点。传统对比特币密钥进行单一位置存储的方法,容易使黑客匿名、不可逆转地盗空用户的所有资金。对比特币进行联合控制可有效解决这一问题,攻击者若想
近年来,职业倦怠作为职业领域越来越凸显的职业病,受到了广泛重视。福利院保育员担当照顾儿童、保障儿童顺利成长、健康生活的重要角色。工作任务量大、要求高、弹性时间少、
析氧反应(Oxygen evolution reaction,OER)涉及到许多重要的能源转化系统,例如:可充电金属空气电池,电催化二氧化碳还原,电催化氮气固定以及水分解。由于析氧反应涉及到多质子耦合电子的转移导致其缓慢的动力学过程,因而需要高效的催化剂降低反应势能,提高催化效率。然而铱、钌等具有催化高活性的贵金属催化剂由于其昂贵的成本极大限制了它们的使用。因此开发廉价高效的析氧反应催化剂是降低可
随着无线通信技术的快速发展,用户需求的不断提高,通信系统各项指标的要求越来越高。天线具有收发信号的功能,可实现信号在电信号和电磁波信号之间的转换,是通信系统极其重要的组成部分。现代通信系统要求天线具有小型化、强抗干扰能力、低功耗等特点。为满足现代通信系统的需求,基于MEMS技术的方向图可重构天线阵列成为研究的热点。基于MEMS技术的方向图可重构天线阵列可实现辐射波束的重构,从而可以用一副天线代替多
当前,我国食品加工业的快速发展带来数量众多的食品生产企业,但同时为分布于各地乡镇农村的生产条件较差的食品小作坊带来了发展机遇。发展过程中,政府监管部门在加大对食品小作坊监管力度上做出了应尽的努力,然而处于现阶段“小、散、低”食品小作坊为主的格局还没有根本改观,食品“从农田到餐桌”链条长、体量大、风险触点多。与此同时,面对监管对象数量多、监管面广、中心监管任务重、监管人员少等问题导致监管人员的时间、
本论文研究的C公司是一家致力于手机等移动信息终端产品的研发、设计、制造、销售和服务的现代化高科技企业,在过去的三年里,C公司整合了旗下数十家子公司的系统,由原来的多套不同的ERP系统整合成一套集中的SAP系统,由集团信息科技部统一管理。由于系统的集中管理,IT人员每天疲于处理来自IT用户的散状问题,但仍受到业务部门的各种抱怨和压力,IT管理层充分意识到存在的IT服务管理问题已经制约了IT的继续转型