基于分布式异构内存池的虚拟内存换页机制

来源 :王涛 | 被引量 : 0次 | 上传用户:caozhi7963
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
云环境下,分离式内存通过访问远程内存来解耦集群的计算资源和内存资源,提高内存利用率的同时提升了任务吞吐量。但在分离式内存系统当中,访问远端内存受到关键路径上传输开销的影响,延迟普遍较高,且基于分页的数据访问方法往往带来读写放大的问题,进一步增加了远端内存访问的延迟。研究新的分离式内存访问机制对降低数据远端访问延迟、提升大数据应用性能具有重要意义。针对分离式内存延迟高的问题,提出了基于分布式异构内存池的虚拟内存换页机制VANDI(Vast and Infinite),并从缓存和预取两个方面对分离式内存管理进行了优化设计。在缓存机制方面,首先,通过多个缓冲队列将写操作进行异步化处理,降低了关键路径上的访问延迟;其次,在单层缓存当中构造了容量一大一小的两个逻辑缓存队列,根据数据访问的时间间隔和空间间隔更新数据状态,同时在逻辑队列中进行迁移,可以有效保留热数据,提升缓存命中率。在数据预取方面,首先,根据交换分区的读访问历史记录判断地址是否连续,以及非严格连续的情况下是否呈现出聚集性,以此预测可能的顺序访问趋势,对远端内存池中的数据进行同步预取;其次,根据缓存命中率和预取覆盖率变化情况动态更改预取触发条件,同时结合数据命中情况自适应改变预取粒度,并将预取数据和访问数据进行分级管理,采用不同的缓存替换策略,在提高缓存命中率的同时减少预取带来的缓存污染问题。实验在真实的物理机上进行,包括系统总体性能和核心策略的有效性测试。微基准测试实验结果表明,相较于单纯的远程内存换页系统Infiniswap,VANDI在顺序访问模式下带来了6.8倍的性能提升,随机访问性能提升15倍。对比带有缓存的远程内存系统Valet,VANDI仍然有1.2倍~1.5倍的性能提升。在对真实应用的测试中,VANDI相比Valet性能提升比例达到20%~80%。有效性测试也验证了缓存和预取机制对缓存命中率的提升,在zipfian参数为1.2时缓存命中率便达到95%。
其他文献
儒家论学,以“修身”为本,其精神旨归在于提升自我人格。孔子言“修己以敬”,孟子与荀子均对此有所推进。然同为“修身”,与孟子侧重内在“仁义”的扩充不同,荀子强调的乃是外在的“礼乐”规范。“气—心—性—形”虽是两人修身路径的共同预设,但具体到荀子则有其独特的一面:以“礼”为圭表,以“心”为其内在的价值依据。是以,荀子之“身”具体为何?“修身”的理论依据何在?“修身”所达致的境界以何种程度朗现?皆须逐一
学位
相变存储器(Phase Change Memory,PCM)因其具备读写速度快、存储密度高、非易失性、抗辐射以及与CMOS工艺兼容等特点,被认为是最有潜力的下一代存储器之一。然而随着PCM尺寸的不断微缩,器件制备过程中相变材料因刻蚀工艺带来的损伤问题越来越难以忽略。但目前关于相变材料刻蚀损伤问题的研究非常匮乏,这会导致器件的可靠性和一致性急剧恶化。为此,本文针对最典型的相变材料Ge2Sb2Te5(
学位
近年来,涂装设备市场规模持续增大,高压无气喷涂机也渗透到各大制造业领域,市场需求增长迅速。然而我国自上世纪引进高压无气喷涂机设备以来自主研发的部分产品,在压力控制方面存在不小缺陷,国内中高端喷涂机市场大多被进口产品占据,喷涂机压力控制技术亟待国产化。国内产品采用传统的双闭环电机控制策略,难以应对喷涂机固有机械特性引起的周期变化的负载特性,导致输出压力脉动大,喷涂效果不理想。设计高压无气喷涂机控制系
学位
数字化时代的来临,使得人类社会产生的数据与日俱增。磁盘作为当前主流存储载体,其可靠性备受关注。磁盘故障通常会导致数据缺损或丢失,进而给企业或个人带来巨大损失。为避免故障造成的损失,传统方法通过监控磁盘的S.M.A.R.T数据实现磁盘的故障预测。目前,基于S.M.A.R.T数据的机器学习及深度学习方法已成为磁盘故障预测的主流手段,并获得了较好的预测效果。近些年研究发现,磁盘位置信息(逻辑位置与物理位
学位
信息物理系统的开发涵盖了机械、电气、网络等多个领域,要求在各种问题域中通过协调对应领域内的不同开发工具来共同完成开发工作。混合领域之间的复杂信息交换与互动过程给系统的整体开发带来了巨大挑战,如何完成异构工程工具之间的便捷数据交换是未来工业物联网发展的重点内容。针对以上问题,本文以专用于跨领域数据传输的数据交换格式AML为研究对象,设计了基于AML的Web 3D HMI原型系统开发框架并完成系统的开
学位
在互联网技术发展迅速并且在世界范围内快速普及的今天,其已经推动人类社会快速发展的重要动力。然而,高级持续性威胁(Advanced Persistent Threat,APT)这一新型攻击手段正在不断破坏着网络空间,已经成为企业组织网络安全的严重威胁,并且以其为主要手段的网络空间破坏活动在未来会更加频繁。目前对APT攻击的检测防御存在两大难点,一是对检测方法的特征覆盖度要求高,二是报警数据的挖掘分析
学位
当前,传统互补金属氧化物半导体的尺寸缩减速度受限于逻辑器件的能耗、制备工艺以及原子尺度的物理极限等问题已经远远追赶不上当前的集成度发展速度。相较于传统的半导体器件,基于电子自旋的逻辑器件不论是在读写速度、读写功耗、稳定性还是非易失性等方面上都具有更大的应用前景。磁隧道结(Magnetic Tunnel Junction,MTJ)作为自旋逻辑器件的核心单位,通过注入电流产生的自旋转移力矩(Spin
学位
忆阻器作为存储和计算于一体的下一代非易失存储器,具有高速、低功耗、高密度集成等优势,被视为实现人工突触的理想硬件。Bi Fe O3(BFO)作为典型ABO3型钙钛矿结构材料,施加电场诱导其内部氧空位有序迁移可以产生阻变现象,适合用作忆阻材料。BFO忆阻器性能不仅受元素掺杂、制备工艺的影响,还受器件结构,特别是下电极材料的调控。本文采用磁控溅射、光刻、电子束蒸发等工艺,在三种不同下电极(Ti N、S
学位
2020年新冠疫情的到来对传统的教学方式提出了挑战,很多传统线下教学都需要转向线上的方式进行,使得在线教育成为了教育领域最热门的话题之一。在传统工科专业的实验教学中,实验课程的开展往往受时间与空间因素的影响。为了改进电子电路实验的传统教学方法,适应后疫情时代的在线教学模式,本文设计并实现了一套电子电路在线实境实验系统。区别于虚拟仿真实验,旨在为《电子线路设计、测试与实验》课程提供一个能够获得真实数
学位
云计算作为一种服务,有效解决了人们对于互联网的需求,目前已被广泛应用于教育、医疗、交通、政务、媒资、物流等行业。但是由于用户提交的任务具有不确定性和多样性的特点,以及网络环境的复杂多变,云计算也面临着众多挑战。目前,为了提高云计算的性能,许多学者侧重于研究云计算下的任务调度优化问题。因为用于处理任务调度问题的大多都是启发式算法,但是该类算法具有稳定性差、寻优性能取决于问题和经验等缺点,所以研究一种
学位