【摘 要】
:
内存数据库将数据常驻在主存中,以优越的性能,在实时数据库领域应用广泛。Redis是一个开源、支持网络、高性能、可基于内存亦可持久化的键值(Key-Value,K-V)数据库。当前使用Redis往往要进行RDB(Redis DataBase)或AOF(AppendOnly-File)持久化以保证数据可靠地存储在外存设备中,而持久化过程又会反作用数据库,影响数据库的性能。其中,AOF的读写性能和保存频
论文部分内容阅读
内存数据库将数据常驻在主存中,以优越的性能,在实时数据库领域应用广泛。Redis是一个开源、支持网络、高性能、可基于内存亦可持久化的键值(Key-Value,K-V)数据库。当前使用Redis往往要进行RDB(Redis DataBase)或AOF(AppendOnly-File)持久化以保证数据可靠地存储在外存设备中,而持久化过程又会反作用数据库,影响数据库的性能。其中,AOF的读写性能和保存频率更会直接影响Redis的实时响应速度。针对Redis数据库的性能和数据持久化开销的矛盾,提出基于开放通道固态硬盘(Open-channel SSD,OC-SSD)的Redis高效可靠的持久化方案(OC-Redis)。应用程序直接读写开放通道固态盘,绕过文件系统和通用块层,以缩短数据库持久化和加载的I/O路径,提高读写性能。同时,设计了数据地址映射,并实现开放通道固态盘的空间管理和垃圾回收。为均衡RDB和AOF两种持久化模式对硬件不同的损耗速率,实现了块级别的磨损均衡方法。针对AOF的高频率数据保存操作对数据库性能的影响问题,提出链式存储AOF数据块的策略,合并元数据和数据存储。该策略每次持久化可以减少1次写操作,总体上可以减少近一半的写操作。并且,每次AOF的小写保持固定的写回长度和严格的物理地址对齐,结合开放通道固态盘的短路径I/O方案,以提高小写性能。小写性能的提升,可以减少每次持久化花费时间占两次AOF间隔时间的比率,降低数据丢失概率。经过实验测试表明,基于开放通道固态硬盘的OC-Redis方案,不仅比传统的Redis持久化方案的性能优秀,而且与基于开放通道固态硬盘的经过通用块层的I/O方法的Redis持久化方案对比,也提高了持久化性能、降低数据丢失概率。RDB持久化性能在不同场景下比传统Redis提高40%~60%。AOF的每次小写时延大约缩短为传统Redis的8.8%。
其他文献
随着5G技术和移动互联网的不断发展和成熟,物联网将有更大的发展空间。无线传感器网络(Wireless Sensor Network,WSN)作为物联网的一个重要组成部分,其应用场景不断增多,需求
近年来,纠删码技术因存储开销小、容错能力强的优点而被分布式存储系统广泛应用。纠删码的高修复开销不仅降低了数据恢复效率,还影响了系统的整体性能。局部性修复编码(Locally Repairable Codes,LRC码)使用额外的存储开销来提升单节点修复效率,但因为采用水平结构,仍消耗了大量稀缺的机架间修复带宽,对修复性能的优化效果有限。针对存储集群的层次架构对LRC码进行改进,本项研究做了以下工作
随着金融市场的不断发展,金融创新也是层出不穷,互联网金融成为时下金融界最炙手可热的话题,P2P借贷平台就是互联网金融大趋势下的一种产物,它是随着互联网的发展和民间借贷的兴起而发展起来的一种新的金融模式,避开银行贷款这一传统的间接融资模式设置的较高门槛,为小微企业融资以及个人信用卡还款提供了便利,同时又利用蓬勃发展的互联网技术,将原有的民间借贷网络平台化,个人信息公开化,使得借贷双方在一个相对透明的
单元制造中,具有相似工艺的零件聚成零件族,在单个制造单元中完成加工。然而实际加工过程中,由于产品更新换代加快,异常件不能在单个制造单元完成所有工序加工,必须采用跨单元加工方式完成异常工序加工,异常件需要在不同制造单元之间转移,由此产生跨单元调度优化问题。现实中由于运输车辆数量有限,即跨单元调度过程中运输能力受到限制,为最优化单元制造系统生产效率与降低成本,需要协调单元间机器的加工以及车辆的运输过程
图像转换技术在生活中有重要的应用价值,若能在移动应用中使用面部表情转换功能,将为用户提供更加便捷的体验。随着深度学习的发展,生成对抗网络广泛应用于图像处理领域。但是传统的生成对抗网络在图像转换的研究中仍然存在训练过程不稳定和训练集图像不成对等问题,这在一定程度上限制了图像转换技术的发展。针对这些问题,本文设计了一种基于循环生成对抗网络的图像转换机制,并在移动设备中实现,主要工作概括如下:1.针对面
高速公路作为公路交通的主要组成部分,其车流密度正逐年增大,加之车辆行驶速度普遍较快,公路沿线气候环境复杂多变,整体运行状况瞬息变化,运营管理机构对监控系统的实时性提
全点对的最短路径问题在社交网络,生物网络,网络路由处理中有着重要的应用,多数文献提出的方法是针对静态图的。然而在边及权值频繁变化的应用场景中,大量的重复计算会带来不
互联网时代的到来带来日新月异的变化,各类软件应运而生,微信的出现得到了大多数用户的广泛认可,随即成为即时性通讯软件的领军者,同时也成为影响力最大的应用软件之一。在此基础上,自党校的教学、科研、人才管理事业和数字整合以来,台州市委党校图书馆于2014年6月开设了第一个党校图书馆微信公众号-台州市委党校图书馆,其他党校也纷纷开始使用微信公众平台在新媒体时代开展服务工作。互联网+技术融入传统图书馆服务中
各国法律或判例都有确认外观设计专利的美感要求,由于工业品设计产品的两个性质:一是工业品外观设计的本身性质;二是知识产品的属性,使美感要素成为保护外观设计产品的必然要
立体匹配作为计算机视觉中的基本挑战,其任务是获得左右图片中像素的对应关系,计算出视差图。在过去的很长一段时间,科研人员都在提高立体匹配算法的精度和速度上不断探索。