面向边缘雾计算的联邦学习性能分析与优化方法研究

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:ltzmh
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
联邦学习是通过用户节点之间的协作训练,从而得到全局模型的一种新型人工智能技术。在联邦学习中,用户无需上传本地数据,可大大减少了通信成本,并保护用户的隐私。随着边缘设备计算和存储能力的不断提升,大量功能下沉至网络边缘,催生了边缘雾计算。在边缘雾计算中,可以在更接近于数据生成的地方进行模型训练,降低了时延,减少了网络流量并提升了应用效率。将联邦学习部署在边缘雾计算系统中,既可以利用边缘设备的计算和存储能力,同时也可以利用人工智能技术对一些数据驱动型和计算密集型的服务提供支持。由于边缘雾计算系统中,现有的网络部署策略对于联邦学习的模型性能和训练效率都难以保证。因此,本论文对边缘雾计算系统中的联邦学习性能分析和优化方法展开了具体地研究,主要研究工作和创新点可总结如下:第一,本论文提出了面向边缘雾计算系统的联邦学习性能分析和优化方法。由于在边缘雾计算系统中,其计算和通信能力是有限的,因此,为了保证边缘雾计算系统中的联邦学习性能,首先,面向边缘雾计算场景,部署了联邦学习的系统框架,通过本地模型训练和全局联邦聚合,可以在边缘雾计算系统中协作地生成全局模型。其次,基于统计理论,对联邦学习模型精度损失上界进行了理论分析,并推导出了具体的上界表达式。最后,为了能够更好的平衡边缘雾计算系统中的模型精度性能和训练过程中所产生的计算与通信资源消耗,提出了 一个联合优化问题;并设计出了 一个可以平衡模型精度性能和资源消耗的联合优化算法。通过仿真,验证了所提出优化算法相较于未优化的联邦学习模式,能够取得显著的性能增益并减少资源消耗。第二,本论文提出了一种联合机会式集中学习的联邦学习模式,并研究了该学习模式下的性能分析和优化方法。由于传统联邦学习模式下边缘计算服务器存在大量空闲计算资源,为了能够更好地利用用户节点处收集到的数据以及边缘计算服务器中大量的计算资源,首先,本文提出了一种联合机会式集中学习的联邦学习模式,在联邦学习进行本地模型训练时上传数据进行集中学习,将集中学习与联邦学习巧妙地进行了结合。其次,针对所提出的新的学习模式,本论文对其理论性能进行了具体地分析,推导出了一个显式的理论精度上界表达式。最后,为了平衡该学习模式下所产生的计算和通信资源开销和模型的精度性能,建立了模型精度、时延和能耗的联合优化问题,并相对应地设计了求解该问题的联合优化算法。仿真结果表明了对于联合机会式集中学习的联邦学习,所提算法相较于单一学习模式可以有效地提升其模型精度性能,并节省计算和通信资源。
其他文献
随着移动互联网的普及,无线视频直播业务发展迅速。与点播业务不同,直播内容是实时生成的,且对时延有更高的要求。作为应对无线信道时变特性的有效途径,自适应流媒体技术支持直播用户动态调整视频码率,受到广泛关注。考虑到直播场景中常会有大量用户同时观看相同内容,适合采用无线多播技术共享传输资源,研究如何将其与自适应流媒体技术有效结合以提升系统性能具有重要意义。与此同时,若不同用户请求内容各不相同,则难以满足
视觉目标跟踪一直是计算机视觉领域最基础的任务之一,在智慧城市、智能安防、人机交互等领域都有很广泛的应用场景。随着深度学习技术的引入,目标跟踪算法的性能得到了巨大的提升。目前的主流目标跟踪算法都是以孪生网络为基础进行改进的,在孪生网络中,可以实现准确,快速的跟踪。但是在一些复杂场景中,比如前景与背景相似,遮挡,快速运动等场景,基于孪生网络的跟踪器表现得不够鲁棒。此外,目标检测领域中锚框的引入给跟踪算
随着第五代通信技术的普及和互联网业务不断增多,网络虚拟化将在最新的互联网体系架构构建中起着更加重要的作用。网络虚拟化技术的作用是可以在同一个物理网络中承载多个虚拟网络架构或者应用,从而将多种定制化的端到端服务提供给网络用户。实现网络虚拟化的主要途径是虚拟网络映射技术,它借助虚拟网络映射算法在物理网络中根据虚拟网络的节点和链路各自资源需求进行合理的资源分配。随着人工智能的不断发展,越来越多的虚拟网络
与传统网络不同,软件定义网络将控制与转发功能分离。控制器是控制平面的核心设备,主要负责路由的决策。交换机是数据平面的重要组成部分,主要负责数据的转发。目前控制平面的体系架构分为单控制器架构和分布式多控制器架构。与单控制器架构相比,分布式多控制器架构有效地提升了网络的服务质量,但也带来了一些问题。例如,在分布式多控制器架构中,控制器的数量和放置位置会影响整个网络的性能,因此如何合理地放置控制器成为了
互联网技术在不断更新迭代,中心化系统已不满足当前日益增长的数据需求,因此分布式存储网络系统应运而生,然而关于分布式存储网络系统的实现还存在着诸多问题,如数据存储备份多,数据信息传输安全性低,数据传输记录易被篡改,缺乏数据细粒度访问控制。其中安全性问题是阻碍系统被大规模应用的主要原因之一。针对以上问题,本文从安全性、可靠性、实用性三个方面着手,基于Ethereum和IPFS加密算法,对分布式存储网络
网络在当今高度连接的世界中发挥着重要作用,Internet接入网及骨干网容量的提升,带来了传统广域网市场的变革,对云服务的巨大需求意味着对广域网连接、安全性和带宽的巨大需求。传统的网络体系结构不适合满足现代数据中心和运营商基于云的服务要求。作为一种新兴的网络架构范例,软件定义网络(Software Defined Network,SDN)正在改善网络的可扩展性和灵活性。软件定义广域网是将软件定义网
近年来,时间敏感网络(TSN)技术作为新一代以太网技术,因其符合标准的以太网架构,拥有精准的流量调度能力,兼具技术及成本优势,可以保证多种业务流量的共网高质量传输。其在音视频传输、移动承载、车载网络等多个领域受到关注,并且成为下一代工业网络的演进方向。但是针对时间敏感网络的测试问题,国内外缺乏深入有效的方案研究,给这项技术的进一步研究开发和落地实用带来了一些障碍。开展时间敏感网络相关测试工作,可以
在未来的空地融合网络中,具有充足计算和通信能力的非地面设备将作为基站直接为用户提供服务,这在很大程度上改变了传统卫星网络的架构和运行机制,使其更具灵活性。然而,对于此类功能强大的非地面网络节点,拒绝服务(DoS)攻击将可能成为其潜在的安全威胁,需要在接入弱认证环节加以防御。现有防御机制主要针对的是传统地面节点的DoS攻击,并未考虑对非地面网络节点进行攻击的特殊性。此外,在受到不同强度的DoS攻击时
当今社会正处在信息急速发展的时代,随着5G的正式商用,互联网产业得到进一步发展。光通信传输网络作为信息时代的基础传输建设,为新技术的发展奠定了基础,同时急剧增长的流量及带宽需求也给通信网络造成巨大的挑战。面对海量数据的传输需求,提高光通信传输网络的性能是通信领域研究者的研究重点。四维调制是在光载波的两个正交偏振上的同相和正交分量构成的四维空间进行调制的方式,增加了星座点之间的最小欧氏距离,解决谱效
随着物联网的不断广泛应用,窄带物联网以其低功耗、覆盖广、低成本的优势日益受到关注。随着物联网中节点数目不断增加,物联网传输系统面对的并发压力愈加严峻,为解决上述问题,本文研究了面向窄带物联网的并发技术,主要工作如下:首先,本文分析了 CoAP协议的传输机制,针对并发请求不断增长引起的网络拥塞问题,研究了物联网的业务数据增长对服务器造成的并发压力。总结了窄带物联网技术、拥塞控制方法和负载均衡方法,为