异构云存储服务协同的数据传输优化研究

来源 :清华大学 | 被引量 : 0次 | 上传用户:yiwangcom
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着云计算的兴起和快速发展,各种类型的云存储服务也相继出现。而这些云存储服务的异构性不仅使用户面临选择困难和平台锁定问题,也限制了不同云服务商连通和共享各种资源以提供普适计算。为了应对这些问题,基于接口标准化和中间件的多种云存储服务协同模式被提出,可以为各云平台带来服务质量、可靠性和可扩展性等多方面提升。然而,这些协同模式还主要处于概念设计阶段,在实际中各云公共接口普遍存在访问性能差且高度不稳定的情况,给跨个人云文件协作、基于混合类型公有云的文件托管、多云存储节点数据传输调度等实时性协同场景带来很大的挑战。本文针对以上机遇和挑战,围绕如何使异构云存储服务高效协同工作以优化数据传输展开研究,主要包括以下创新点:(1)针对不同个人云用户间进行文件协作的需求,通过克服云公共访问接口API低效问题实现频繁编辑文件的实时协作。其中首先根据对低效API实际测量的关键结论,提出邻近性云代理部署策略和云代理间高级传输协议,在此基础上还设计了冗余更新消除和文件冲突处理等控制机制。基于这些解决方案实现的系统支持多种流行个人云之间的文件协作,具有接近甚至超过云内部文件协作的端到端跨云同步性能。(2)针对用户希望同时低成本存储和高效操作文件的需求,通过结合两种不同类型的云存储服务并仔细调整使用方式实现低成本高效文件托管。其中首先设计了按文件大小混合两种云存储的方案,并针对大文件下载性能瓶颈问题提出包括基于中继下载和缓存策略以及各种文件传输操作优化策略的高级传输方案,还设计了冗余操作请求消除和文件系统一致性维护等控制机制。基于这些解决方案实现的系统在Amazon S3和EFS之上提供低成本高效文件托管服务,具有非常接近S3的低成本和接近甚至优于EFS的良好文件系统操作性能。(3)针对典型云存储服务节点访问时延高度不稳定的问题,通过一组算法对多云存储节点的数据传输进行优化调度。其中首先提出两种传输优化算法分别解决跨多节点云和用户与分布式多云节点间数据传输用时最小化问题,还进一步设计了可扩展性数据流在线调度算法以平衡传输及时性和系统开销。基于这些算法实现的调度系统具有明显优于对比算法的性能,同时低开销还保证了其良好的可扩展性。
其他文献
本论文是关于“2018年马尔代夫旅游管理人才研修班”交替传译的实践报告。作者以释意理论为基础,总结并分析了此次交替传译过程。释意理论认为,口译不是一个单向的解码过程,
《互动多媒体制作及演播平台》是一款相对简单、集成、高效、高度互动的多媒体制作与演播软件系统,其集成化的多媒体演播控制中心为用户提供灵活多样、方便快捷的翻页工具和徒
"动宾式动词+宾语"句式日趋流行,引起了语言学界的广泛关注.这种句式的产生, 是历史地继承和发展古代汉语"动宾式动词+宾语"句式,吸收英语"动宾式动词+宾语"句式,即"古为今用
该翻译音频来自于笔者在海口观澜湖巴萨足球训练营的实践项目,该足球训练营实践项目时间为2017年7月至8月,为期一个月,形式为英译中交替传译。该报告选用变译理论为指导,因为
当前,在社会信息化、经济全球化日益发展的前提下,我国的公安工作遇到了一些前所未有的挑战,社会的稳定性和国家的安全性遇到了一些不稳定的因素,风险性和挑战性日益加大,公
检察官“不起诉决定”自由裁量权是能够平衡法律的权威性与灵活性的重要权力,这不仅关系到刑事诉讼程序能否继续进行,更关乎犯罪嫌疑人和刑事被害人的切身利益。本文以检察官
2017年“广西-东盟创新合作交流会”是为期15天的“中国—东盟技术经理人国际培训班”的一个子会议,旨在贯彻和落实国家“一带一路”倡议和习近平主席2017年4月20日视察南宁
雇主责任保险作为社会保障机制的一项创新和补充,在劳动者损害赔偿领域发挥着重要作用,随着市场经济以及我国商业保险行业的蓬勃发展,越来越多从事高风险职业的企事业单位、个体工商户等经营者为了分散风险,改善经营管理,会选择投保雇主责任险作为一项基本的损失管控手段。在A电子经营部诉B保险公司雇主责任险保险责任纠纷一案中,双方当事人围绕案件事实主要针对两个争议焦点进行辩论:第一,保险公司是否应对被保险人的雇员
地震引起的大部分水文现象,包括地下水位、水温、水化学成分和河流流量等变化,往往归因于地壳介质渗透性的变化,因此前人围绕地震引起的静应力和地震波(动应力)对介质渗透性
作为一名俄罗斯留学生,笔者在这片黑土地学习和生活的几年间,对汉俄禁忌语在人际交往中引发的思考和研究产生了浓厚的兴趣。禁忌语在古今中外的文化中广泛存在,时代不同,禁忌