基于社交网络的城市标签分析

来源 :苏州大学 | 被引量 : 0次 | 上传用户:luoboge
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
信息化时代的背景下,网络社交平台所累积的大量数据资源蕴含了许多具有价值的信息,如何充分利用和挖掘这些信息去更好进行城市治理具有重要意义。本文主要探讨公众在社交网络上对于城市的评价与印象,从而了解城市,推动政府部门对城市进行更精细化的管理。本文以知乎平台作为案例,对14个城市综合运用自然语言处理中的文本分词、文本聚类等相关技术,呈现完整的城市标签分析方案。运用python语言进行网络爬虫获取原始数据,进行标签获取、标签过滤以及标签规范处理等数据预处理过程。其中包括对数据清洗,文本分词,剔除不符合规则的标签以及同义替换等多项操作,获得原始的标签集合。采用向量空间模型描述文本,因此进行特征词抽取,介绍tf-idf、文档频率、信息增益、χ2统计检验法四种方法。对于城市标签分析主要从以下几个方面展开:(1)城市关键词。结合textrank以及tf-idf对标签进行权重的赋值,排序得到各城市的关键标签,绘制城市标签云以及城市指向网络。(2)城市主题。利用LDA主题模型探索每个城市的公众印象的潜在抽象主题,随后利用所得的文本信息找到内含的四类抽象主题。如重庆的主题由火锅、轻轨、山城、洪崖洞、夏天等词以不同的可能性构成。(3)标签组织化。对于得到的平面化、无序的标签集合构建具有层级关系的标签体系。利用word2vec对文本进行词向量的训练,通过谱聚类划分标签,分析不同类别中标签的特征。(4)城市聚类分析。利用获得的标签权重矩阵对城市采用kmeans、dbscan、mean-shift三种聚类方法进行城市的聚类分析,以便帮助构建城市社群。此外,在基础设施、饮食文化、城市群体三个更细粒度的维度进行城市的聚类并且给出模型评价,进行结果分析,探索部分城市发展的共同方向。本文的创新之处在于提供了对于标签组织化的改进方案,除了对文本本身进行词向量训练外,考虑引入标准语料库后再进行词向量的训练,得到词与词之间的相似度后进行存储,匹配关键标签再展开聚类。只要语料库中的文本信息足够丰富,语言足够规范,那么所得到词语间的关系也是可信的。更进一步的,考虑一种词典和谱聚类相结合的改进算法,利用领域词典改进聚类分析的算法步骤,提高标签划分的科学性,同时能够更好的指明标签类内在的含义。总的来说,本文为用户在社交平台所发表的文本信息展开完整的分析处理提供了借鉴,对于相关技术的应用场景给出了具体实践,同时提供了如何构建标签层级体系的新思路。
其他文献
P2P网贷是一种基于电子网络平台,进行借贷的互联网金融新型模式。目前,P2P网贷行业中最突出的问题是信用问题。该行业在发展规模不断扩大的同时,由于网络交易信息不流通、相关法律法规缺失、监管不到位等因素,随之出现的平台关停、卷款跑路、延期兑付、提现困难等一系列问题直接导致投资者资金损失。P2P网贷市场面临着巨大的信用风险与信任危机。较长潜伏期、较大破坏性是P2P网贷平台信用风险所具有的特征,因此对其
我们越来越担心自21世纪以来,在气候变化引起的全球变暖的背景下,因城市化进程加快而造成的人口和社会经济财富的高度集中使得人类在面对包括高温在内的气象灾害时显得更加脆弱,进而导致人类社会经济的可持续发展面临严峻挑战。因此,对气象灾害防治的研究成为当前国际社会的普遍关注的焦点。本文在前人社会脆弱性研究的基础上,紧抓社会脆弱性的内涵和评估理论,从暴露性、敏感性与社会适应力三个维度,构建上海市高温灾害社会
日本遗弃在华化学武器问题是历史遗留问题。虽然抗日战争结束已经75年了,但日本侵华战争的罪行还在,遗弃化学武器仍然在不断的危害中国人民的生命财产安全与生态环境安全。根
融资作为一项重要的财务活动,是企业发展过程中最为关键的环节,大型企业集团无论是想实现经营的扩张或是着重核心业务,都离不开内部和外部的资金支持。融资偏好,即在面临融资决策时,企业经营者对各类融资方式的选择顺序。对上市公司的融资偏好行为进行研究,既能提高企业融资决策的效率,还有利于资本市场的持续发展。本文基于我国沪深A股市场2018年3385家上市公司财务年报数据,根据经营行业数将搜集的样本企业划分为
硅(Si)具有高的理论比容量(4200 m Ah?g-1)、低的反应电位和丰富的自然资源是下一代高能量密度锂离子电池负极首选材料。但Si负极在锂化和脱锂的过程中存在巨大的体积变化(>3
[目的]通过评估在胸腔镜手术中单肺通气(OLV)前予不同的通气暂停时间对术侧肺萎陷加速作用的影响,观察肺萎陷加速效果,寻找兼具安全性及有效性的最佳通气暂停时间。[方法]选
当前,世界能源危机和环境污染是人类面对的重大挑战,如何实现建筑节能及减少碳排放量,对于人与自然的和谐发展具有重要的意义。由于温湿度独立控制空调系统具有较高的能效比
目前,因能有效地避免传统抗生素的弊端,光热杀灭致病菌和治疗伤口感染已受到人们的高度重视。本论文通过简便环保的策略,制备了具有光热效应的琼脂糖基水凝胶,并对其光热性能,光热杀菌和生物相容性等方面进行研究。(1)光热杀菌制备了一种含单宁酸铁(TA-Fe)纳米粒子的琼脂糖(AG)基水凝胶。优化后的纳米复合水凝胶具有良好的力学性能和加工性能。更重要的是,纳米复合水凝胶表现出了显著的光热效应,在808 nm
太行山东麓,一条流动的"天河"盘在山腰,这就是被称为"世界奇迹"的红旗渠。20世纪60年代,一群天不怕、地不怕的河南林县(今林州市)人以最原始的工具和逢山凿洞、遇沟架桥的最
斯特林脉管制冷机在20 Hz以上高频运行,能流密度高,线性压缩机维护需求低,并且低温下无运动部件,具有振动和磨损小、可靠性高、寿命长、结构简单紧凑和质量轻等优点,是航空航