面向异构类型数据的多层级存储系统优化研究

来源 :任津廷 | 被引量 : 0次 | 上传用户:hanbing81868164
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着边缘计算与云计算技术的迅速发展,应用程序产生的数据种类不断增加。相关报告指出,2022年公有云服务将增长22%并带来更多异构类型的数据。异构类型数据对存储系统性能提出了更高要求的同时,需要存储系统提供差异化服务。因此,相关研究提出了综合利用不同存储介质特性的分层式存储系统,以处理异构类型数据在访问模式、大小、生命周期等特性方面的差异。然而,在应用负载差异化更加明显的今天,即使是分层式存储中的单一层级,也需要处理不同类型的数据。同时,分层式存储系统自身的复杂性更加剧了存储系统优化问题的难度。本文专注于面向异构类型数据的多层级存储系统优化相关研究。面对多层级存储系统在异构类型数据下的优化问题,需要明确每个单独的存储层级所处理数据的特点,并针对各层级硬件软件特点进行专门的存储系统优化。根据多层级存储系统软硬件特点与异构类型数据需求,本工作将整体系统的优化问题切分成应用层、外存层、片上存储层三个方面的问题并开展了相关研究,具体工作如下:(1)应用层访存行为预测方法研究。目前针对应用数据热度的分析与利用,旨在基于历史访问记录对应用数据进行分类。然而,此类方法不适应访问模式快速变化的应用。针对该问题,本工作提出基于机器学习技术的应用访存行为预测方法。本工作分析传统机器学习方法特性,并比对各机器学习方法在访问模式识别上的准确率与开销。在选择模型的基础上,本工作通过基于应用特性的进一步模型调整,设计高准确率的应用访存行为预测方法。(2)外存层混合存储数据分配策略研究。现有针对外存层混合存储的相关研究,主要集中在统一地址管理、数据一致性、软件栈优化等方面,不能充分适应多样的应用数据需求,造成显著的存储访问性能下降。针对该问题,本工作提出面向混合存储的自适应数据分配策略。此策略在应用数据访问模式的预测结果的基础上,结合外存层各存储介质特性差异,进行访问模式变化自适应的数据分配,以提高混合存储系统数据访问性能。通过自适应数据分配策略,本工作在访问延迟与能耗两方面提高混合存储系统访问性能。(3)片上存储层多位翻转错误下的敏感度分析框架研究。面对片上存储可靠性问题,敏感度分析方法定位程序数据中的脆弱部分,以减少可靠性保障策略的开销。然而,传统敏感度分析方法不能适应多位翻转错误的特性,分析多位翻转错误的效率较低。针对此问题,本工作提出了针对多位翻转错误的敏感度分析框架,其挖掘了多位翻转错误下,程序数据在片上存储层的敏感度特点。同时,本工作设计了代替传统指令粒度的基本块粒度敏感度分析方法。最后,本工作使用机器学习方法代替部分错误模拟实验,以在牺牲少量准确率的前提下,显著提升敏感度分析方法效率。最后,基于真实的应用数据访问记录与执行记录,本文在服务器平台上进行相关实验验证。实验结果表明本文提出的访存行为预测方法可以取得较高准确率;提出的混合存储数据分配策略可以很好地利用混合存储介质性能差异,并显著提高存储系统访问性能;提出的片上存储多位翻转错误敏感度分析框架可以显著提高分析效率。
其他文献
近年来,国内外对于无线通信技术的研究有了长足的进展,第五代移动通信系统(5G)已进入商用部署阶段,建立适用于5G通信系统不同频段和场景的高性能路径损耗模型,可以提高接收信号强度的准确度,更好地服务于5G及未来无线通信系统的网络规划与性能优化。与此同时,机器学习算法拥有突出的学习能力和非线性建模能力,已越来越多地应用在路径损耗建模中。本文的主要研究内容如下:第一,将自适应粒子群优化(adaptive
学位
<正>2021年桂林市农业科学研究中心在本部基地利用10鱼塘和建设好的6个陆基圆池设备开展陆基圆池循环水养殖试验,经过一年的养殖试验取得了一些成效。现将陆基圆池循环水养殖技术总结如下。
期刊
国土空间作为自然和社会经济两个系统的重要载体,国土空间格局优化是我国实现区域社会经济和生态建设事业的重要举措,对人与自然实现可持续发展有着重大的实际意义。目前,随着城镇化与工业化建设进程的不断加快,农村人口向城市流动较大,出现了农村空心化、生态环境被破坏等不利于可持续发展的问题,对区域社会经济发展和生态保护问题构成了重大的挑战。因此,在生态文明建设不断推进与国土空间规划体制改革不断深化的背景下,协
学位
在企业的各项经营活动中,投资活动尤为重要,直接关乎企业的价值和未来发展,企业科学、合理的投资策略对经济持续增长起着关键的作用。低效率的投资行为会导致资金的浪费和不当使用,将直接损害经营绩效,阻碍企业的持续发展。提高企业投资效率将有助于加快经济发展由高速和规模扩张向质量和效益提升转变。董事会作为经营决策机构,在公司治理中发挥着不可替代的作用。不同于传统董事会研究仅关注董事的局部特征,董事会人力资本和
学位
近年来,在中国科技飞速发展的背景下,通过高科技检测设备搭载高分辨率相机对桥梁表观核心部位进行拍摄,并运用深度学习算法从图像中自动定位识别病害类型,是顺应当前桥梁检测方法发展趋势。针对在桥梁表观病害图像中,病害部位占比少,背景信息复杂、干扰因素多,同时以实现实时自主高准确率的检测识别桥梁表观病害为目的,本文提出一种基于深度学习的RC桥梁表观病害检测识别方法,并自主研发制作一款搭载高清相机的六足爬壁机
学位
融资成本较高、债务规模庞大以及债务集中到期付款等问题,往往导致企业陷入财务危机。面对行业整体环境下行、新冠肺炎疫情等多重因素的影响,企业更应关注债务融资成本,减少财务风险,避免使企业陷入流动性危机。经理人是企业经营管理的实际决策者,他们有着自身独立的思考和行为方式。管理防御假说认为,由于离职后工作转换成本等因素的影响,企业经营管理者具有较强的追求自身利益最大化和固守职位的行为动机。理论分析表明,经
学位
5G移动网络的迅速发展在诸多领域带来了颠覆性的创新,也为移动互联网带来了更深层次的变革,作为“万物互联”的支持技术,移动边缘计算(Mobile Edge Computing,MEC)正逐渐演变成5G网络的核心基础架构,任务卸载是移动边缘计算的重要环节。优秀的计算卸载策略可以减少系统计算成本,提高用户服务体验,近年来受到越来越多学者专家的重视。本文的主要工作有:第一,介绍了移动边缘计算技术的理论知识
学位
进入“十四五”发展新阶段,我国经济社会发展环境发生深刻变化,改革发展也面临新任务,同时随着知识经济深入发展,创新活动与经济发展联系更加紧密。在此背景下,如何推动我国高新技术产业创新发展,按照加快形成新发展格局要求,解决“高质量发展需要与科技创新能力不足的矛盾”是我国创新发展面临的主要问题之一。目前我国高新技术产业虽已大规模发展,却表现不佳,主要是受到创新效率低下、发展不平衡等问题制约。所以针对科技
学位
随着经济快速发展,第三产业在国民经济中的占比增大,旅游业的地位越来越重要。A级景区是开展旅游活动的物质载体和条件,其空间分布直接影响旅游者的空间行为及旅游发展战略。研究其空间分布特征及可达性,有利于优化旅游产业布局、提升旅游资源配置、完善配套基础设施、加强区域旅游竞争力。重庆市作为最具吸引力旅游城市之一,旅游资源相对丰富。基于重庆市2001—2020年景区数据,运用Arc GIS空间分析工具,采用
学位
非洲猪瘟是一种烈性的动物传染病,家猪感染之后病死率最高可达到100%。非洲猪瘟是由非洲猪瘟病毒引发的,目前还没有特效的治疗药物和有效的商品化疫苗,所以做好对非洲猪瘟的防控依然是生猪养殖行业最重要的工作之一。非洲猪瘟自2018年首次传入我国后在多地暴发,随着我国农业部门出台一系列防控举措,已将该病造成的损失降到最低。本文借鉴了国外防控经验,并结合国内非洲猪瘟疫情形势,总结了国内外一些防控非洲猪瘟的举
期刊