基于网络媒体的食品安全数据采集与处理研究

来源 :北方工业大学 | 被引量 : 1次 | 上传用户:vict1234
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
食品安全作为关乎国计民生的重要社会问题,始终是业界的研究热点。随着信息技术的不断发展,研究怎样将相关技术手段应用于食品安全领域成为了一种新的研究思路。网络媒体作为一种公共数据源,其本身蕴含有丰富的各类信息。如果能利用技术手段从网络媒体中采集食品安全相关数据,并对其进行信息处理以发掘其内在价值,必将有利于解决食品安全问题,促进社会的稳定发展。本文以网络媒体中存在的食品安全文本数据作为研究对象,针对其数据采集与信息处理方法展开研究工作。首先分析了网络媒体中存在的食品安全数据的内容特点,然后制定评价标准对各种不同类型的食品安全数据进行评判,并以此为依据选定具体研究对象与数据采集来源;其次提出一种基于Scrapy的数据采集方案,详细阐述了其构建与实现方法,并利用该方案从选定网站中采集包括食品安全新闻报道、食品检测通告、食品安全刑事裁判文书在内的三种食品安全文本数据作为具体研究对象;然后介绍了针对食品安全数据的信息处理方法,主要内容包括数据预处理方法、基于BERT关键词嵌入的文本筛选方法、基于BiLSTMCRF的命名实体提取方法、基于正则表达式的信息提取方法以及基于Text Rank的文本摘要提取方法;最后利用上述信息处理方法对采集到的食品安全数据进行结构化处理,并使用ECharts进行了数据可视化,构建实现了“食品安全新闻报道词云图”、“食品-非法添加剂关系图”以及“食品安全违法事件地图”三种可视化图表。
其他文献
目的 研究三叶青黄酮对荷Lewis肺癌模型小鼠脾脏调节性T细胞和相关细胞因子体外表达的影响;初步通过体内外实验来探讨三叶青黄酮调节荷肺癌鼠的免疫功能,逆转肿瘤免疫逃逸的
移动服务机器人在复杂室内环境中完成各种智能化任务依赖于对周围环境的深层次理解与建模,这个过程可以通过机器人即时定位与地图构建方法对周围环境进行三维稠密建图,并采用
不平衡数据的分类问题普遍存在于实际应用中,例如,医疗诊断,网络入侵检测和生物数据分析。少数类样本往往隐藏着更重要的信息,错误分类少数类样本可能造成严重的代价。然而,
本文通过利用Ansys Workbench有限元分析软件对离心压缩机的螺栓淬火过程温度场进行有限元模拟,得到了零件温度随冷却时间的分布关系。分析了原有热处理工装的不足,并且提出
目的从临床数据、术中情况、术后恢复等角度入手探讨腹腔镜下大范围肝切除术(laparoscopic major hepatectomy,LMH)与开腹大范围肝切除术的临床效果,以期探讨腹腔镜下大范围肝切除术的可行性、安全性、实用性及其临床应用前景。方法回顾性分析苏州大学附属第一医院普外科2016年至2018年间开展的35例LMH与同期开展随机选择的35例开腹大范围肝切除术病例的临床资料。比较两组患者
目的:椎间盘退变(Intervertebral discdegeneration,IDD)是导致腰背痛的重要原因之一。相关研究表明,在IDD的病理性变化中活性氧分子增多,炎症因子过表达及细胞外基质丢失均是重要的诱因。阿司匹林(Aspirin)作为经典的非甾体类消炎药物之一,在临床应用中能够有效缓解各类疼痛及炎症。然而Aspirin能否通过减轻氧化应激来改善IDD的进程,目前并不清楚。本实验旨在研究
全球有70%的海岸遭受侵蚀,我国则有49.5%的砂质海岸处于侵蚀状态。因此,如何有效地防御海岸侵蚀,特别是砂质海岸的侵蚀,一直以来都是国内外研究的热点。海滩是宝贵的旅游资源
在600-800℃的中温范围,CeO2基固体电解质因比ZrO2基电解质具有更高的氧离子导电率,被认为是极具潜力的中温固体燃料电池中固态电解质材料。但是,Ce02的本征脆性使其在固体燃料电池运行过程中,常因频繁启动、停机而形成的热冲击而发生断裂,极大地降低了固体燃料电池的可靠性及寿命由于机械应力和热应力而破裂等原因,还不能商业化。因此,急需改善CeO2基固体电解质力学性能和热冲击性能。本论文利用氮化
目的:考察大鼠肝脏细胞色素P450酶水平对何首乌肝毒性的影响。方法:采用雄性的SD大鼠,200± 10g,随机将大鼠分为六组,分别是:空白对照组(a)、何首乌对照组(b)、CYP1A2抑制对
我国工业过去依靠大规模要素投入的“粗放型”增长模式已经引发了资源约束紧缺、生态环境持续恶化等一系列问题。资源、环境与经济发展的矛盾已经成为制约工业发展的关键,因