基于Python的微博爬虫系统研究

来源 :大众科技 | 被引量 : 0次 | 上传用户:mawenxing8155
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着大数据时代到来,爬虫的需求呈爆炸式增长,以新浪微博为代表的一系列社交应用蕴含着巨大的数据资源。以新浪微博为研究对象,利用Python语言实现模拟登陆和网页解析技术,将获取的用户信息存为文档进行分析。文章分析了新浪微博模拟登陆时的加密方法,研究了验证码识别的实现方法,对挖掘的数据使用TF-IDF算法进行分析,提出了新的微博数据挖掘方向,论述了爬虫的国内外研究现状及开发难题。
其他文献
家庭病床在西部农村有广阔的就医需求市场,但医院的医疗行为和群众的需求、相关医疗法规存在具体的不可操作性。其医疗危险因素相对较多,其操作亟待相关政策指导,发展和完善家庭
摘 要 总结分析昭通市12家国有二级以上综合医院医疗纠纷发生的原因,从中试图找到适合本市医疗机构处理医疗纠纷的捷径,对医院防范纠纷、规避风险,降低医院管理成本具有很好的借鉴作用。  关键词 国有医院 医疗纠纷 研究    自2002年9月1日起,新的《医疗事故处理条例》(以下简称《条例》)颁布施行以来,由于新的举证规则《最高人民法院关于民事诉讼证据的若干规定》(以下简称《若干规定》)规定了处理医疗
中青年高血压发病率逐年增加,且表现出低知晓率、低治疗率、低控制率的特点。中青年高血压病因复杂,用药控制血压是重要手段,但因患者服药依从性差,导致治疗效果不理想。文章
研究了浙江省土壤有效硼、钼,铜,锌,锰,铁的含量分布和影响其有效性的某些因子。全省土壤86.2%缺硼,73.8%缺钼,41.3%缺锌和可能缺锌,少数土壤缺铜,缺锰和铁。1988-1993年全县作物累计施用微肥面积1914.2×10^4亩,其中
本文研究了丘陵红壤柑桔园在绿肥覆盖条件下,土壤水分和温度的变化规律。5年定位试验结果表明,在夏秋高温干旱季节,丘陵红壤柑桔园绿肥覆盖能有效地提高土壤水分,降低土壤温度,从而
复旦大学高分子科学系聚合物分子工程教育部重点实验室,通过4种聚醚酰亚胺(PEI)PID、PIM、PIP和PIB改性3种热固性树脂(环氧、氰酸酯以及双马来酰亚胺树脂)的研究,讨论了PEI结构、用
中医药的热罨包在慢性盆腔炎的治疗中具有一定优势,特别是其优势互补的综合治疗手段更提高了临床疗效。文章综述中药热罨包治疗慢性盆腔炎的护理研究进展,包括热罨包的作用机