基于遗传算法的主题爬虫

来源 :计算机技术与发展 | 被引量 : 0次 | 上传用户:q365709285
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对目前主题网络爬虫搜索策略难以在全局范围内找到最优解,通过对遗传算法的分析与研究,文中设计了一个基于遗传算法的主题爬虫方案。引入了结合文本内容的PageRank算法;采用向量空间模型算法计算网页主题相关度;采取网页链接结构与主题相关度来评判网页的重要性;依据网页重要性选择爬行中的遗传因子;设置适应度函数筛选与主题相关的网页。与普通的主题爬虫比较,该策略能够获取大量主题相关度高的网页信息,能够提高获取的网页的重要性,能够满足用户对所需主题网页的检索需求,并在一定程度上解决了上述问题。
其他文献
随着经济的迅速发展带动了科技的进步,信息技术广泛地运用在教育行业,大大提升了教育、教学质量,信息技术具备较强的优越性与应用价值,小学教师也要跟上时代发展的脚步,在教育工作中科学、合理地运用信息技术,为小学生营造一个健康、轻松的学习氛围,帮助学生更为深刻、全面地掌握所学知识,同时利用信息技术锻炼学生的思维能力、创新能力、语言能力等,合理开展家校联合教育、德育工作,促进小学生的全面发展。我是一名小学教
对监测区域中部署的传感器节点的拓扑发现是传感器网络应用的前提,它反映了传感器网络的监测能力。考虑目前拓扑发现算法中能量消耗过多、网络连通性不强等问题,文中结合移动Ag
随着时代的快速发展,人们把越来越多的目光放在了学生的身体素质上。理所当然的体育这一课程成为了教育领域的重视点。分析小学生的体育锻炼培养自身良好的行为习惯。在本文
跨组织的工作流致力于跨越组织边界进行业务重组。针对多个组织间动态协同的复杂性,在组织间协作过程中必须考虑对组织的隐私信息、已建立的工作流和已建立的工作流管理系统
目的探讨症状性颈动脉狭窄对急性脑梗死患者预后的临床影响。方法对165例急性脑梗死患者的临床资料进行回顾性分析,均合并症状性颈动脉狭窄,按照狭窄程度分为轻度或无狭窄组8
在新课程改革的背景下,音乐课堂已经逐渐成为小学实施素质教育的重要途径,其艺术性也是审美教育的重要组成部分,随着新课程标准的逐步实施和不断深入,音乐教学的新理念在逐渐
目的 探讨两种护理模式(舒适护理和针对性护理)联合应用对结直肠癌患者术后并发症及生活质量的影响。方法 80例结直肠癌患者,随机分为一般护理组和联合护理组,每组40例。一般
小学语文教学中包含很多教学内容,特别是教学理念越发成熟下,教学中需要兼顾的内容也越发多样。汉字教学是最为基本的教学内容,整体教学中,强化汉字教育意识更是得到了很多关
新的一年,想事业再上一个台阶,没有好人缘可不行。在这个合作性也是竞争力的时代,好的职场关系会大大提升职场成功的机会。怎样从办公室默默无闻的“壁花小姐”,脱颖而出成为职场里红到发紫的OL呢?别忘了随时练就这6种姿态!    面带微笑的“早安”不能省    Best do:从走进办公室大楼到入座,这一段时间里,你的每一个表情都会泄露一些秘密:“今天心情不错”,“见到大家很高兴”,“我准备好迎接新的工作
移动Agent技术是一种分布式的网络计算模式,它将Agent的特点和移动的思想相结合,很好地解决了网络间任务分配与合作问题,使得一些网络技术的应用越来越广泛。但与此同时,移动Agen