论文部分内容阅读
针对重要的舆论平台BBS论坛,提出利用网络爬虫构建适合抓取论坛数据的爬虫模块。通过分析BBS论坛以及比较不同类别爬虫的特点,介绍BBS爬虫模块的工作流程以及需要选择的策略,讨论URL的处理与重定向问题的解决方法,并提出对不同论坛模块定制不同任务的抓取策略。
BBS舆情系统爬虫模块的研究
【摘 要】
：
针对重要的舆论平台BBS论坛,提出利用网络爬虫构建适合抓取论坛数据的爬虫模块。通过分析BBS论坛以及比较不同类别爬虫的特点,介绍BBS爬虫模块的工作流程以及需要选择的策略,
【机 构】
：
北京交通大学通信与信息系统北京市重点实验室
【出 处】
：
铁路计算机应用
【发表日期】
：
2010年12期
其他文献
目的探讨血浆脑钠肽（BNP）预测机械通气患者脱机失败的作用。方法选择44例脱机困难患者，监测BNP基础值、自主呼吸试验（SBT）前后的BNP值，比较脱机成功组和脱机失败组的BNP基础、BNP前
细菌属于原核细胞型微生物，必须借助显微镜进行微观实验研究。因此，在学习细菌学检验时，要求学生既具备一定的生物学、微生物学、基础化学的基础知识和基本理论，同时又具有一定的
本文分析了供应链系统下物流企业面临的问题,提出供应链系统下企业管理管理工作有效开展的策略,对于实现物流管理模式的创新发展具有积极的指导意义。
研究了碱性溶液中低浓度铷的萃取工艺,采用逆流萃取的方法,研究了萃取的工艺条件:温度、时间、浓度、相比、级数等因素对溶液铷萃取效果的影响,在最佳工艺条件下,溶液铷的萃
对公司会泽生产区深井多绳摩擦式提升机尾绳更换方法进行了实践分析,提炼了其中的技术要素,为今后深井换绳提供了可靠性技术方法,能稳定和提高今后深井首、尾绳换绳的速度、
目的针对现有二羟丙茶碱工艺方法收率低,副产物较多,对环保产生较大压力的问题,研发了一种制备二羟丙茶碱的新工艺。方法采用有机相代替水相反应,并采用弱碱性盐类作为催化剂
作为国内公法的一国刑法和刑事诉讼法共同展示了国家诠释、认定、处罚犯罪的整体流程和态度。通观国际和国内两个层面的刑法和刑事诉讼法的立法发展,我们可以看到,各国的刑法
<正>血液标本质量控制涉及标本采集、处理、贮存和运送等,因此能否正确、规范地采集和处理标本是实验前质量保证的重要环节,只有认真处理好每一个环节,才能保证送检标本的真
<正>平方差公式是指两数和与这两数差的积,等于这两个数的平方差.用公式可表示为(a+b)(a-b)=a2-b2.在新课改理念下,利用图形来验证平方差公式的创新题在中考中频频出现.现举
期刊
<正>随着近年来艺术的全面化多方位发展,西方的街头文化越来越多的受到中外艺术爱好者的关注。而街头与艺术的组合碰撞出了新的火花——3D街头地画。3D街头地画起源于西方,20
期刊