基于Gossip的多源快速数据分发技术研究

来源 :国防科学技术大学 | 被引量 : 0次 | 上传用户:single654321
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
快速数据分发是将数据源产生的数据在广域的范围快速分发至多个用户,是分布式环境中资源汇聚和共享的一项关键技术,并且随着网络技术的发展日益重要。而基于Gossip的快速数据分发技术,以其分发方法的简单性,灵活性,可扩展性,鲁棒性等特点而得到了广泛研究和应用。然而基于Gossip的快速数据分发面临着分发冗余量大,分发延迟时间长等问题,严重影响了数据分发效率。为支持高效的快速数据分发,对网络规模估计、带宽优化分配以及数据分发方法进行了深入研究。取得的主要研究进展如下:网络规模是数据分发系统中的基础信息,可以有效地辅助节点决策,降低分发冗余和分发延迟。在大规模动态的节点群体下,网络规模估计技术需要较强的自适应性和容错性。本文提出了基于随机行走的自适应网络规模估计方法RASE。RASE在节点加入或退出时发起随机行走过程以更新规模估计值,提高了更新过程的自适应性;随机行走过程利用已有的规模估计值迭代计算,降低了通讯开销和计算延迟;通过控制随机行走长度,实现计算精度和通讯冗余的高效折中;通过记录更新过程信息和备份节点规模估计值,处理失效节点,增强了方法的鲁棒性。理论分析和模拟测试表明,与已有的典型方法GBA相比,RASE在动态环境下具有更好的计算精度、自适应性、容错性、快速收敛性以及更小的通讯开销。高效的带宽分配方法能够提高数据分发的带宽吞吐率,保证节点公平性,降低分发延迟。针对已有带宽分配方法中带宽吞吐率、节点公平性、网络拥塞控制方面的不足,提出一种基于市场竞争机制的公平带宽分配方法FMBA。FMBA中节点以效用函数最大化为目标,采用带宽竞价方式分配带宽。请求节点根据资源提供者的带宽单价周期性选择最佳资源提供者,以增强自适应性,保证资源提供者的负载平衡;资源提供者根据带宽供需情况周期性更新带宽单价,以提高带宽吞吐率,避免网络拥塞;资源提供者根据资源请求者的竞价水平分配带宽,以避免节点恶意竞争;各个节点根据收益更新竞价策略,以保证节点公平性。理论分析和模拟测试表明,与已有的典型方法BT相比,FMBA具有更高的带宽吞吐率、自适应性以及较好的节点公平性。针对已有数据分发方法中分发冗余量大,分发延迟时间长的问题,提出一种基于Gossip先推后拉的快速数据分发方法GBFD。GBFD在分发前期采用基于推的Gossip数据分发方法,以降低分发冗余量,提高链路成功率;节点根据链路成功率采用基于随机行走的自适应网络规模估计方法RASE计算出推拉分界点,确定数据分发由主动推送方式转向主动请求方式的时机;在分发后期采用基于拉的Gossip数据分发方法,以降低分发延迟,保证数据分发方法的收敛性,并采用基于市场竞争机制的公平带宽分配方法FMBA优化带宽分配,提高带宽吞吐率。理论分析和模拟测试表明,与已有的基于推的数据分发方法CREW相比,GBFD具有较高的带宽吞吐率,较小的分发延迟和通讯冗余。
其他文献
PBN讯2月14日,2011年度国家科学技术奖励大会在北京隆重召开。在本次大会上,共有12个化学化工类项目摘得国家自然科学奖,14个项目获得国家技术发明奖,34个化工类项目获得国家
毛泽东同志曾指出:“政策是革命政党一切实际行动的出发点,并且表现于行动的过程和归宿,一个革命政党的任何行动都是实行政策。”正确的政策制定出来,关键就是执行,这就是执行力
报纸
<正>中国石油天然气集团公司川庆钻探工程有限公司地质勘探开发研究院地质导向技术中心,以地质导向为主要业务,拥有一支专业技能过硬、现场工作经验丰富、敢于吃苦和勤恳敬业
以往由于受到实验分析手段的限制,对三水模型中定义的自由流体孔隙和微孔隙缺乏真正意义上的定量描述,因而在确定两部分孔隙的岩电参数时,多采用岩心数据回归分析的方法。针
中国和美国分别是单一制和联邦制国家结构模式的典型代表,两国政府体制的核心制度背景、两国的国内政府间关系、行政权的空间划分和政府结构形式都呈现出巨大的迥异之处,并且
以均匀电各向异性地层为模型,推导了直井与斜井中的三分量感应的磁场计算公式,运用MATLAB软件仿真磁场等值面,分析在低电导率各向异性条件下各向同性与各向异性磁场的分布情
本研究从新课改后体育课堂教学中存在的学生评价若干现象切入,重点分析了学生评价不明确标准、干扰主教材学习、评价活动无延伸、作秀走过场、时机不适当等不良现象。探讨了
<正>"划句号"是组工干部能力和智慧的直接体现,关系到组织工作决策部署的贯彻落实和党的事业兴衰成败。全国组织部办公室主任会议提出"组工干部要提升划句号的能力",是对组工
老油气田的老测井系列普遍存在测井信息不全,测井质量不高的问题,因此老油气田测井解释的关键是构建测井曲线。本文以四川盆地某老气田为例,提出利用测井曲线相对齐全、测井
在竞争日益激烈的市场形势下,分销渠道管理在企业营销管理中的地位日趋重要,逐渐成为企业获取竞争优势的砝码。本文基于博弈论中的纳什均衡囚徒困境模型,对企业分销渠道的水