一跳查询P2P高效内容分布网络研究

来源 :中国科学院计算技术研究所 | 被引量 : 0次 | 上传用户:haisheng1984
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
不断发展的互联网需要有良好的内容分布技术,来应对互联网上大容量数据内容的广泛传输。集中控制式CDN技术和自由共享式的P2P内容分布技术,在应用中不断暴露出种种缺陷,已不能满足当前网络数据内容分布传输的需求。 针对两种截然不同技术中存在的弊端,结合分析大容量数据内容分布传输请求的分布规律,本文以实现高效的内容查询、分布传输为核心问题,围绕内容分布网络的网络拓扑结构设计、数字内容资源的准确描述和快速查询算法、网络结点管理、内容主动复制、高效可靠内容分布传输算法和内容真实性验证等方面问题,进行深入分析和研究,提出相应的设计及改进机制。本文主要的贡献和创造性工作包括以下几个方面: 第一,针对内容分布网络对于资源描述和寻址技术在资源描述的灵活性、安全性、准确性、访问控制的多样性等方面的需求,在前人已有研究基础上,本论文研究提出适应一跳查询P2P内容分布网络拓扑结构的数字内容资源描述机制DCR-DS,实现对于数字内容资源的准确描述、快速查询。 第二,本文结合P2P和传统集中控制式CDN两种不同内容分布网络拓扑结构的优点,研究设计了新的内容分布网络拓扑结构,并且设计了在新的网络拓扑结构中网络结点加入、退出、状态维护以及路由选择的算法。新的拓扑结构实现了在不稳定的互联网上构建可靠的内容分布网络,即保留了传统CDN网络具有良好控制管理机制,能够提供稳定可靠的服务质量的特性,又增加了P2P网络所具备的良好可扩展性,以及内容流量负载在广域网络中自动均衡的特性。同时,本文引入一套结点综合评价管理机制,增强了内容分布网络的可运营性。 第三,数字内容查询请求分布具有不遵从于齐夫(Zipf)分布的特性,本文通过从实际应用中DNS、关键词服务和数字内容查询请求日志,统计分析DNS、关键词服务和数字内容请求各自分布特征,比较异同。并结合分析请求访问过程中用户行为特性不同、访问对象自身特性不同,深入研究内容请求分布不遵从标准Zipf分布的原因。通过线性适配的方法,抽象出数字内容请求分布分析模型,同时也验证了前人在此方面所得研究结论的不正确性。 第四,结合新的网络拓扑结构,借鉴CoDoNS系统中对于遵从标准Zipf分布的DNS的主动复制方法,针对内容分布网络自身特性,改进主动复制机制的实施框架,提高内容主动复制过程中的传输效率。并结合内容请求分布分析模型,重新设计为得到预期的内容查询延迟,内容主动复制机制的计算模型,以实现用最小的存储、带宽和计算资源代价,获得预期的内容查询和传输性能。 第五,针对实现数字内容资源在广域网上的高效分布,本文通过引入无比率纠错编码技术,针对于一跳查询P2P内容分布网络拓扑结构及网络管理,改进并设计了新的内容传输协议,解决了传统CDN网络中大容量数字内容低分布效率的问题,特别是针对大容量数字内容资源的分布传输。基于无比率纠错编码的内容传输协议,可以实现在广域网上内容传输负载的自动均衡,具有良好的可扩展性,充分合理的利用可用有效带宽。第六,构造特定的同态哈希函数,使用批量验证和概率随机验证方法,改善内容传输真实性的验证效率。 第七,基于以上关键问题的研究,构建一跳查询P2P内容分布网络原型系统HE CDN1.0,分析比较与传统内容分布网络的性能改进。
其他文献
目前,国内外很多的入侵检测系统都是基于误用的,主要采用模式匹配技术,在协议分析方面,主要针对TCP/IP的较底层的协议进行分析,对于应用层协议则没有进行分析,导致所捕获的每
农作物产量预报是重要的农业气象业务服务内容。但目前在农业气象服务和产量预测中所使用产量预测模式与方法,很难满足当前农业气象业务服务需求,迫切需要更新、完善和新方法的
现场总线是近20年来发展起来的一门新技术,是当今自动化和控制领域发展的热点之一。作为众多现场总线中的一种——控制器局域网CAN(Controller Area Network)是一种有效支持分
随着千兆网络的建设和升级,传统防火墙在硬件和结构上已不能满足同益增长的性能方面的要求。针对当前防火墙的不足,以互联网交换架构(IXA,InternetExchangeArchitecture)为基础,
虚拟化在云计算这一新兴基础设施建设中起着至关重要的作用。具有多种工作负载的虚拟机同时运行在云平台上的物理机上,虚拟机管理器的CPU调度通过异步方式调度虚拟机的各个虚
操作系统的安全性是保障整个信息系统安全性的根本所在,近年来关于安全操作系统的研究也正逐步升温,而安全审计是安全操作系统的一个重要组成部分,对于保障安全策略的正确实施、
随着无线网络的普及,无线网络服务日益丰富,网络能量消耗越来越严重,如何合理安排网络路由、减少不必要的传输能耗成为亟待解决的问题。与此同时,随着科学技术的发展,可再生能源的
本文研究了关联规则在故障检测中的应用,把故障进行了分类,对现在故障检测技术作了综述,对数据挖掘和关联规则现状作了综述。分析了数据挖掘在故障检测技术应用可行性,分析了关联
本文对数据仓库技术在河南国税系统中的应用进行了研究。文章通过对现行税收管理信息化工作的分析,总结出其特点和主要问题所在并提出解决问题的主要发展方向。数据仓库理论的
当今时代是数字化时代,大数据在给企业提供更多的商业价值和发展机会的同时,也给数据的有效管理和利用提出了更高的需求:海量的数据存取,更低的读写延迟,强大的可用性、可伸缩性和