并行数据采集器任务分配策略的设计与实现

来源 :CERNET第十届学术年会 | 被引量 : 0次 | 上传用户：xuanxuaner8

【摘要】

：

介绍了搜索引擎数据采集器的并行技术,分析了并行数据采集器的任务分配模式及其工作原理,讨论了任务粒度对动态分配效果的影响,并提出了动态分配模式下的任务分配策略,最后介绍了Sun ONE Grid Engine的任务调度机制,并利用Sun ONE Grid Engine对所提出的动态任务分配策略进行了实现.

【作者】

：

吕晓峰董守斌张凌

【机构】

：

华南理工大学广东省计算机网络重点实验室

【出处】

：

CERNET第十届学术年会

【发表日期】

：

2003年9期

【关键词】

：

搜索引擎数据采集器并行技术任务分配策略

下载到本地 , 更方便阅读

下载此文赞助VIP

声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架

论文部分内容阅读

其他文献

问号钩端螺旋体赖株基因组中一个新溶血基因的表达及功能鉴定

目的对问号钩端螺旋体赖株基因组中LA0202基因进行克隆表达并对重组蛋白的溶血活性进行初步鉴定。方法以问号钩端螺旋体赖株基因组DNA为模板。PCR扩增LA0202基因并重组到原核

期刊

问号钩端螺旋体溶血活性溶血素基因蛋白表达Leptospira interrogansl hemolytic activity hemolysin gen

幽门螺杆菌cag A基因稳定转染胃上皮细胞及其对细胞的作用

目的研究幽门螺杆菌（Hp）cagA基因重组子转染胃上皮细胞后对胃上皮细胞的作用。方法用PCR方法从Hp标准株NCTC11637中获取cagA全长基因，将其3．4kb的开放读码框架定向克隆入真核表

期刊

幽门螺杆菌CAGA细胞增殖细胞凋亡基因转染Helicobacter pylori cagA proliferation apoptosis gene

虚拟环境下复杂形状刀具的参数检测

分析了复杂形状刀具磨削加工结果的检验内容及检验方式,对虚拟环境下复杂形状刀具的CNC磨削及刀具参数的检测技术进行了研究.在Matlab环境下,采用图像边界识别技术获取所加工

期刊

复杂形状刀具数控磨削参数检验三维仿真MATLABcomplex shaped cutters CNC grinding geometrical par

Mesh互连网络光互连板结构设计

介绍了一种依据Mesh光互连网络拓扑原理设计制作的新型Mesh光互连板结构，提出了采用自己空间光互连和光纤互连相结合的互连方式，利用自由空间和光纤对光信号进行传输，对光路转换

期刊

Mesh互连网络光互连板结构设计Mesh network optical interconnection Light path transition m

氢氧化钙在年轻恒牙根尖诱导成形中的应用

年轻恒牙牙根未发育完成,遇外伤、龋齿、畸形中央尖折断引起牙髓感染,根尖诱导成形术是治疗年轻恒牙牙髓感染乃至根尖周病的一种有效方式.作者自1996年开始用氢氧化钙根充剂

期刊

氢氧化钙年轻恒牙根尖诱导成形牙髓感染根尖周病

重金属胁迫下水稻谷胱甘肽硫转移酶和类萌发素蛋白的表达特性和功能研究

近年来,工业和农业的快速发展使得环境中的重金属污染日趋严重。土壤和水体中过量的重金属不仅影响植物的正常生长,也会通过食物链危害人类的健康。重金属会损害细胞膜结构完

学位

水稻铜谷胱甘肽硫转移酶类萌发素蛋白转录组超氧化物歧化酶

TETRA数字集群系统语音编解码算法研究

研究了陆地集群无线通信（TETRA）数字集群移动通信系统的语音压缩编解码算法的基本原理。TETRA语音压缩编解码器使用一种低复杂度的ACELP（代数码激励线性预测）算法，通过线性预测和

期刊

陆地集群无线通信TETRA数字集群系统语音压缩编码terrestrial trunked radio (TETRA) trunked radio spe

论全球化背景下的文化策略

全球化将是各国无法回避的一个课题。在和平年代，直接的大规模的军事斗争已经不再是人们对抗的首要手段，单纯的赤裸裸的国家硬实力的斗争也逐步隐形化，取而代之的是国家软实力的

期刊

全球化运动文化策略国家软实力文化建设

福建省人感染高致病性禽流感病毒的分离及灭活病毒抗原的制备

目的从患者呼吸道标本中分离高致病性禽流感病毒（H5N1），摸索病毒灭活条件，用于制备安全和有效的高致病性禽流感病毒灭活抗原。方法鸡胚分离法分离高致病性禽流感病毒，应用甲醛和

期刊

H5N1病毒病毒分离灭活甲醛戊二醛HSN1 virusvirus isolationinactivation methanal glutaraldeh

TGF-β1基因＋869T/C多态性与贵州汉族结核病易感性的关系

结核病的发病是一个多因素综合作用的结果，影响因素不仅包括感染结核菌的数量，毒力和宿主的防御反应，也包括种族、社会经济地位、年龄性别等因素。在影响宿主防御反应的遗传学因

期刊

TGF-Β1基因遗传多态性结核病易感性宿主防御反应汉族贵州社会经济地位

并行数据采集器任务分配策略的设计与实现

与本文相关的学术论文