基于开放通道固态盘的键值存储系统写放大优化研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:yjichao
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着基于日志结构合并树(Log-structured merge tree,LSM-tree)的键值存储技术的兴起和闪存存储技术的发展,以固态盘为后端存储设备的键值存储系统在产业界得到了广泛应用。然而固态盘与键值存储系统之间的信息隔离,使得闪存设备无法充分发挥其潜在的性能;同时LSM-tree的合并压缩过程带来的写放大问题,对系统性能和固态盘寿命都有不利影响。新型开放通道固态盘(Open-channel solid state drive,OCSSD)为解决这些问题提供了新的途径。针对LSM-tree的写放大问题,结合OCSSD的特性,提出了一种基于数据块重映射的合并压缩方法,并设计了相应的键值存储系统OCKV。首先,为了减小写放大并提高合并压缩过程的执行效率,系统将键范围不重叠的数据块直接重映射到新文件中,避免了不必要的数据拷贝;同时精确预读合并压缩过程所需的数据块以加快其速度。其次,为了简化I/O栈并提高I/O性能,系统在用户空间实现了与LSM-tree紧耦合的闪存转换层,绕过文件系统直接与OCSSD进行数据传输,并且在分配物理空间时将文件数据块均匀分布在OCSSD的所有通道中,充分利用多通道的并行性。最后,为了减小OCSSD的垃圾回收带来的写放大,系统根据LSM-tree从上层到下层文件热度递减的特性进行物理冷热数据分离,同时为了修复数据块重映射对物理冷热数据分离的破坏,在垃圾回收过程中将属于LSM-tree不同层的有效闪存页分别迁移到不同的存储区域,保持系统数据冷热分层的特性。测试结果表明,相比于传统的基于LSM-tree的键值存储系统,OCKV系统可以减小1.28倍的写放大,轻度写负载下吞吐率提高2.47倍到2.86倍,重度写负载下吞吐率提高3.1倍到3.4倍。在根据LSM-tree的特性进行物理冷热数据分离后,系统能够使OCSSD的垃圾回收操作转移的有效数据量减少11.8%,提高了垃圾回收的效率。
其他文献
幼儿园课程体系正在随着社会的改革发展不断地进步。如今,人们开始特别关注幼儿的全方位发展,现有的基础教育课程已经不能满足孩子兴趣和成长的需要。顺应时代的需要,园本课程的开发在幼儿园开始产生。本园地处榆林市南区,阳光雨露、空气沙土、苍天大树都是大自然给予我们的宝贵财富。依据地貌特征,幼儿园基于“亲近自然”园本课程开展了园本沙艺活动。为了给幼儿提供良好的创作环境和丰富的材料,幼儿园开拓了玩沙基地,增加了
当前大数据产业发展迅速,人才缺口大,许多高校开设大数据专业。在大数据人才培养中,上机实验是必不可少的环节。但是传统的实验存在资源利用率低、不易维护的局限性。基于上述原因引入云计算方案来建设大数据实验室。以Docker容器引擎和Kubernetes容器管理技术为主要技术支撑,设计和实现了大数据实训平台。整体采用B/S架构,允许用户通过浏览器一键部署一套完整的大数据实验环境。用户在运行实验项目的时候,
随着我国经济的高速发展,居民收入大幅度增加,居民手中财富也已积累到一定水平,居民对投资的需求日益增长,如何进行有效的投资管理逐渐成为大多数家庭、居民所面临的共同问题。基金产品越发受到投资者的青睐。历经二十余年的淬炼,国内基金市场初有小成,截止至2020年12月31日,境内基金市场中共有7,403只基金产品,资产净值达到201,538.91亿元人民币,基金产品也变得愈加丰富。面对着日趋多样化的基金产
物联网是继计算机和互联网之后,世界信息产业的第三次浪潮。在物联网技术日益发展的今天,我国各行各业都有了物联网技术的广泛应用,尤其是一些互联网企业,通过云计算、大数据、物联网等技术提升企业的工作效率。2018年,我国的互联网大会就物联网的技术发展提出一些新的需求,“十三五”规划也要求我国开始大力推广基层物联网建设及发展。随着物联网市场的发展成熟,我国三大运营商在物联网技术的推广以及市场营销方面逐步占
岩藻黄素(fucoxanthin)又名岩藻黄质,作为一种丙二烯类胡萝卜素具有极强的抗氧化性,在抗炎症、抗癌、抗糖尿病、抗肥胖、护肝等方面具有独特的生理活性。目前商业化岩藻黄素主要从大型褐藻中获得,但存在岩藻黄素含量低、细胞壁厚及藻胶过多等问题,使提取和纯化成本过高、产品纯度低。三角褐指藻(Phaeodactylum tricornutum)作为一种海洋硅藻,具有生长快、岩藻黄素含量高、可人工规模化
随着中国经济的不断改革与发展,我国资本市场结构逐渐完善,债券市场现在已经成为我国金融市场中最重要的市场之一,而其中企业债券的表现尤为突出。我国企业债券市场成立于1984年,经过三十多年的发展,市场发行规模和成交规模不断扩大,企业债券市场在中国金融市场中越来越不可替代,也有越来越多的投资者和研究人员将目光聚焦于此。然而,我国债券市场在不断发展不断进步的同时也衍生了一些不可回避且对市场至关重要的问题。
近年来光催化制氢和催化燃烧技术引起了广泛的关注,而催化反应的核心问题是开发高效稳定的催化剂。贵金属催化剂在多种催化反应中都具有很好的活性,但成本较高。单原子催化剂(SACs)能够通过提高原子利用率、形成均一的活性位点达到极高的活性,从而降低贵金属催化剂的成本。火焰喷雾热解方法(FSP)在合成纳米颗粒的众多方法中具有很多优点,但缺少合成单原子催化剂方面的研究报道。本文采用火焰喷雾热解法合成了表面负载
研究背景与目的:芳香基硫酸酯酶K(Arylsulfatase K,ARSK)是新发现的一种溶酶体酶,具有葡萄糖醛酸-2-硫酸酯酶活性,在HS等糖胺聚糖的去硫酸化修饰反应中发挥重要作用。最新研究揭示,HS硫化修饰降低增强巨噬细胞炎性活化,从而加剧肥胖的发生发展。但催化HS去硫酸化的ARSK是否影响巨噬细胞功能,能否作为控制肥胖慢性炎症状态的一个靶点尚有待考究。因此,我们展开此研究以揭示ARSK对巨噬
2014年中国证券监督管理委员会提出《上市公司收购管理办法》,鼓励企业积极参与并购重组活动,希望通过企业间的并购达到活跃资本市场、促进资源配置优化的目的。随着并购交易数量增多,具备“高估值、高溢价、高商誉”特征的并购交易案例也屡见不鲜。高溢价并购交易的不断涌现使得在财务报表中列报商誉资产的企业数量也在不断上涨,商誉规模成倍扩大。截止2018年,我国上市公司总商誉净值高达1.316万亿元,体量可怕的
自改革开放以来,我国经济进入飞速发展时期,国民消费水平持续上升。汽车作为衡量家庭收入及消费水平的一项重要资产,其产销量在过去十几年中也呈现爆发增长态势。2019年我国新增民用汽车注册量达到了2545万辆,已超越美国成为全球最大的汽车市场。在经历了十余年的快速增长后,汽车金融服务业务的利润贡献占汽车产销利润总额的比重逐年攀升,尤其是近年来国内汽车销售市场进入存量阶段,无论是个人汽车消费贷款还是批售库