【摘 要】
:
进入移动互联网时代,社交媒体层出不穷,如Twitter、Facebook、微博、知乎等。微信作为后起之秀,月活用户已经接近10亿。据数据统计,微信公众平台公众号数量已达2000万+,平均每月产出1.07亿篇内容,成为信息传播、舆论发酵的主要场所之一。全面高效地采集与分析微信数据在热点话题发现、突发事件实时追踪和舆情监控等领域有着重要的应用。本文针对微信API请求速率限制严格、接口开放程度不高和已有
论文部分内容阅读
进入移动互联网时代,社交媒体层出不穷,如Twitter、Facebook、微博、知乎等。微信作为后起之秀,月活用户已经接近10亿。据数据统计,微信公众平台公众号数量已达2000万+,平均每月产出1.07亿篇内容,成为信息传播、舆论发酵的主要场所之一。全面高效地采集与分析微信数据在热点话题发现、突发事件实时追踪和舆情监控等领域有着重要的应用。本文针对微信API请求速率限制严格、接口开放程度不高和已有依托于搜狗微信等第三方网站的网络爬虫采集方法,采集数据不全、低效等问题,设计并实现移动端数据采集系统。该系统将数据采集迁移到移动端,利用自动化测试框架在应用内模拟正常用户的点击、浏览等对服务器的请求操作,实现了公众号全历史消息和单篇文章包括正文、用户评论、点赞量等全维数据的采集。进一步,在对采集到的数据进行话题检测与演化分析时,本文提出基于去噪的话题检测方法和基于增强字体的话题演化方法。公众号文章中包含热点新闻和大量的非热点新闻,如果使用聚类算法直接进行聚类,容易受异常值(非热点新闻)的影响,聚类效果差。根据论文所设计系统采集数据的全面性,本文提出多维度有效报道检测方法去除噪声,一方面提升聚类效果,一方面降低聚类成本,尤其是大数据时代的海量数据。其次,考虑即使是资讯类公众号通常也会发布软文、广告植入等非新闻报道类微文,传统对新闻话题基于标题和导语的方法对微信公众号不再适用,本文根据微文排版特点,提出基于增强字体的话题演化方法,实验结果表明该方法在整体上优于传统方法。
其他文献
在人类生产、生活过程中所采取的各种工程措施往往会在自然环境中造成大量创伤面,这种创伤面即为工程创面。工程创面往往会破坏原有的植物群落,使原有的自然土壤完全丧失或严重退化。如何对工程创面的生态环境进行科学地修复,使之能够兼顾维护相关工程设施安全运行、与当地生态环境协调统一及具有一定的景观功能和美学价值,如今成为了工程学界、生态学界、自然地理学界等相关学科的交叉点与研究热点之一。本研究通过对自然恢复的
家禽视网膜和松果腺可以接受外界光照刺激,激活下丘脑-垂体-生长轴,调控家禽生长发育。肉鹅对不同颜色光谱刺激响应可能存在差异。为此,本研究选取600只1日龄同批次扬州鹅,随机均匀饲养于4栋相同鹅舍,分别采用白光、红光、绿光与蓝光处理70天,比较各组间生长性能、肉品质和生长轴相关基因表达水平。研究结果如下:1.单色光对扬州鹅生长性能的影响:绿光处理组肉鹅各时期平均体重显著高于(P<0.05)对照
2,4,6-三硝基甲苯(2,4,6-Trinitrotoluene,TNT)是一种带苯环的有机化合物,能与土壤的腐殖质紧密结合,降低植物汲取营养的能力,被列为土壤重要的污染物。此外,TNT还具有较强的毒性,并被美国环境保护局(Environmental Protection Agency,EPA)列为重要致癌物。治理土壤中TNT的最有效方法是采用植物修复的方法,然而目前对TNT的植物修复仅限于将细
电动汽车使用新型清洁能源,在节能减排方面具有突出优势,有望替代传统汽车,发展电动汽车产业已经逐渐成为世界各国的战略重点。电动汽车产业是一个新兴产业,领域内的关键技术还有较大突破空间。基础技术是连接科学基础与共性技术、专有技术的关键中介,弄清电动汽车产业的基础技术的扩散机理,对我国电动汽车产业的核心能力提升有重要理论和实践意义。本文将电动汽车产业相关专利文献作为数据载体,通过梳理现有文献,首先根据基
《圣经》是经典的宗教文学作品,《雅歌》是其中一个特殊的章节,它以歌颂爱情为主旨,透过丰富的诗歌意象,表现爱侣之间的浓烈情感。到目前为止,国内外关于《圣经》汉译的研究不少,而且随着时代的变迁,相关研究得到不断拓展,但是从美学重构角度研究圣经汉译的成果不多,尤其是关于本诗中意象美学特征再现的研究更为少见。《雅歌》作为一首爱情诗篇,译者必须要充分考虑诗歌中丰富的意象在翻译中如何恰当重构,才能更好传达原诗
儿茶素广泛存在于水果、蔬菜、茶叶、葡萄酒及可可制品中,具有强烈的抗氧化活性以及杀菌,抗炎症等生物学效应。儿茶素具有五种主要的单体成分:游离态的儿茶素(C)、表儿茶素(EC)、表没食子儿茶素(EGC)以及酯化的表儿茶素没食子酸酯(ECG)和表没食子酸儿茶素没食子酸酯(EGCG)。本文选取儿茶素母体成分(+)-儿茶素以及抗氧化性最强的儿茶素单体EGCG研究HepG2细胞及昆明小鼠两种实验对象研究儿茶素
目的:急性肾损伤(acute kidney injury,AKI)极易进展为慢性肾脏病(chronic kidney diseases,CKD)及终末期肾病(end stage renal diseases,ESRD),其发病率和病死率不断提高,给家庭和社会造成巨大伤害。肾脏缺血再灌注损伤(renal ischemia reperfusion injury,RIRI)是导致 AKI的重要原因,也是
目的:观察高瓜氨酸(homocitrulline,HCit)在不同年龄段的脂溢性角化病(seborrheic keratosis,SK)皮损、SK皮损周围皮肤以及正常皮肤表皮上的表达情况,探讨HCit与SK之间的相关性;观察HCit在不同年龄段的健康正常人外周血中的表达趋势,比较HCit在SK患者、新发2型糖尿病(type 2 diabetes mellitus,T2DM)患者外周血中的表达与同年
胶接是一种能提高航天飞行器结构效率和结构破损安全性能的先进连接技术,环氧树脂由于其内聚强度大、粘接强度高等特点,被广泛用于飞机零部件的粘接结构中。近年来,胶接技术
风险管理是用来降低风险发生所引起的消极后果的决策过程,它主要包括风险识别、风险预测和风险评价,并且它是一项目的性很强的管理活动。现阶段,我国的油田地面工程涵盖土建、储运、用电、采油、维护和整改等过程,在这一系列的操作过程中,隐藏着诸多的危险,其中任何一个环节出现错误,都有可能导致潜在危险的爆发,进而给国家或石油企业造成巨大的损失。大庆杏Y联脱水站原址改造项目是针对杏Y联脱水站现有的安全隐患、腐蚀老