Web新闻自动采集发布系统的设计与实现

来源 :计算机技术与发展 | 被引量 : 0次 | 上传用户:shirley09liu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对新闻网站通过人工方式采集发布来自其它网站的Web新闻费时费力、易重采与漏采这一问题,综合运用Web信息采集技术、网页去噪技术、文本文档消重技术以及文本自动分类技术设计并实现了一种基于网络爬虫的Web新闻自动采集发布系统。在给出系统总体结构的基础上,对其各个模块的功能、设计与实现方法进行了详细介绍。实验表明,该系统设计合理,具有采集效率高、消重准确、集成方便、运行费用低等优点,可作为新闻网站的采编工具加以推广使用。
其他文献
[目的]为花生壳在染料工业废水处理中的应用提供理论指导。[方法]通过甲醛改性花生壳对亚甲基蓝的吸附试验,探讨振荡时间、初始浓度、pH值、温度等因素对吸附过程的影响。[结果]15 m
目的探析子宫肌瘤合并高血压的病人在围手术期期间进行护理干预的措施以及临床效果。方法以2012年至2013年在本院诊治的子宫肌瘤合并高血压的240例病人为研究对象,按随机数字
2014年以来,浙江省宁海县紧紧围绕村级权力清单“36条”,其中涉及村集体管理事务(村集体权力)19条,便民服务事项17条,切实加强农村集体“三资”和财务管理,推动农村社会稳定
1选择质量好的反光膜目前,反光膜生产厂家较多,产品质量良莠不齐。一般质量较好的是聚丙烯、聚脂铝箔、聚乙烯材料的纯料双面复合膜,其柔韧性好,反光率高,抗氧化能力强,可使
提出了一种基于Uboot的嵌入式系统远程更新设计,主要由三星S5PV210微处理器、DM9000网卡芯片、NAND Flash芯片以及SDRAM随机存储芯片组成,结合MTD分区技术和tftp下载命令,通
贵州省铜仁市沿河县土家族生存的地区山高涧深、交通闭塞、来往不便,以长刀短笠去烧畲的山地农业文化为主,因而在天然环境中即兴创作了土家劳动歌、婚丧歌、情歌等。
在数学教学中,解题教学具有举足轻重的地位,波利亚更是坦言“掌握数学就是意味着善于解题”.当前,数学解题教学基本上都是按照“例题讲解+练习强化”的模式展开,这样做的好处
对SS6B型电力机车ZD114型脉流牵引电动机新造及中修运用一段时间后所发生故障,进行比较深入的分析,并探讨其设计、制造和检修方面存在的缺陷。根据实际运用及检修经验,提出一
在聚变堆研究中,聚变环境中涂层材料的防氚渗透问题是聚变堆材料研究的重要课题之一。主要介绍目前常用的几种防氚渗透涂层制备技术的研究进展,并提出利用双辉技术制备梯度氧化