基于优化后LDA主题模型的中外期刊对比分析 ——以《中国医学杂志》和《美国医学会杂志》为例

来源 :东北财经大学 | 被引量 : 0次 | 上传用户:asdf200201
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着大数据时代的来临,信息爆炸式增长,大量的数据以各式各样的形式展现在人们面前,不再拘束于区区的数字,文字、图片、视频甚至人们的一个小小的动作都可以成为数据保留下来。这些数据中蕴藏着大量可以加以利用的信息,如何将这些信息从大量看似毫无用途、毫无意义的数据中提取出来并完成信息的利益最大化,成为人们当下急于解决的问题。在文本领域,对研究者来说,最重要的莫过于文献,通常的文献利用大多停留在单篇文献的研读,或者是对文献的描述性分析,信息没有被充分挖掘,文献之间的联系被忽略。中文文献和英文文献对于研究者具有同样重要的学术价值,但两者的差异以及存在的相同点却未被熟知,不同国家的同一领域学术研究重点对于该领域的学者们具有指引和参考的重要作用。在此情况下,采用文本挖掘分析研究大量中外文献之间的内在联系以及差异化具有重要的理论价值以及现实意义。本文将以中国与美国的医学领域权威期刊《中华医学杂志》和《美国医学会杂志》为例,对其进行描述性分析以及优化的主题建模分析。相比于传统主题模型的不足,提出更加适用于文献文本的主题建模,目的是准确的将二者进行对比研究,深挖其背后所隐藏的信息,展现中美两国医学领域的研究热点及发展趋势,给研究者带来可供参考的资料信息。本文利用爬虫方法,爬取《中华医学杂志》和《美国医学会杂志》从2010年至2019年十年间文献的题目、作者、日期以及摘要。为得到中外期刊作者的写作规律,对科研论文发文量、高产作者数量以及合著率进行描述性分析。再对文献摘要进行预处理,对中文文献进行分词、去停用词、去除单字等操作,对英文文献进行分词、大写转小写、去停用词、去除三个字母以下的单词等操作。传统LDA模型无法对医学领域专业性较强的词汇完成高精度的建模,对此,针对LDA模型进行小幅度的优化,将TF-IDF工具与其结合使用。利用TF-IDF的强大筛选能力选择出文献中医学专业高频词汇,再对其进行具有同样作用的LDA主题建模,双重筛选保证每个主题中单词的高精度以及较高的代表能力。本文在对中外期刊文献描述性分析后,得出《中华医学杂志》相对《美国医学会杂志》而言,科研发文量较少,且自2014年开始差值逐年拉大。两类期刊合著率总体升高,可知期刊合著将会称为一种趋势。结合TF-IDF方法的LDA主题模型相比于传统LDA主题模型,准确性以及适用性更加出色。基于优化后的LDA主题模型对两种中外期刊文献模型分析的比对,可以发现中外临床医学领域的研究科目部分相同的情况下,其他科目研究方向的差异。对国内发文量较少的急诊医学等科目增加适量的学术探讨、交流以及学习。本文的创新点在于数据处理阶段由于医学领域专有词汇的特殊性,使用一般的分词工具无法带来精准切割,会对后续建模产生特别大的影响。对此,本文将采用临床医学疾病库的词汇与医学词汇大全融合的方法,汇成个人词典,加入jieba分词词汇表中,完成准确切割,最大程度保留医学领域专业词汇完整性。停用词使用的是哈工大停用词库、四川人工智能实验室停用词库及百度停用词库相融合的词库,很好的实现去停用词功能。随后便是建模阶段,先使用TF-IDF方法将预处理后的语料库进行权重处理,取权重相对较大的词汇进行LDA模型分析,分析后的结果可视为更为精准的结果,可以更加直观的添加主题。
其他文献
在人类历史长河中书籍一直作为传播知识的重要媒介,随着材料和技术的发展,书籍材质也一直在发生着更迭。直到印刷技术和造纸技术成熟后书籍材质才稳定在纸质材料。到现代随着信息环境的高速发展,越来愈多样的媒介出现,人们对书籍也提出了更加艺术化、情感化的需求。手工书籍因其饱含手工温情和形式艺术化而受到越来越多设计师的青睐。手工书籍因其没有印刷技艺的限制所以在材料选择上更加的自由。材料天然自带情感因素,不同的材
随着“打工经济”的发展和农村人口大规模的流动,在农村男女比例失衡带来的婚姻挤压下,农村婚姻的外在结构和内在价值发生着根本变化,出现了一系列的新问题,新挑战:如村庄内形成女性主导的“新离婚秩序”、高额彩礼、离婚率不断上升等。如何解决农村现有的婚姻问题,提高农村夫妻的婚姻质量和婚姻稳定,从而维护家庭和社会的稳定,具有重要的现实意义。梳理文献发现,现有关于农村夫妻的婚姻质量和婚姻稳定的影响因素的研究中,
宋代是“文化造极”的一代,思想与文学于其间产生了激烈的碰撞,理学对诗歌的影响是尤为显著的一端。理学于北宋诞生以来,历经“濂、洛、关、闽”,于宋季终成思想界不二之主流;同时两宋诗坛亦于唐诗外另辟蹊径,完成了议论化、理性化的构建,流派竞起,异彩纷呈,可谓别开生面。这一过程中,理学直接作用于诗人思想,渗透到诗歌创作的内容、诗艺、格调、法度之中,产生了多方面的影响。陈普作为朱熹的嫡传弟子,其诗歌创作与理学
工业化、城镇化进程的不断推进使得中国经济得到迅猛发展,随之而来的环境问题却日益加重,这其中碳排放一直是焦点问题。2018年全球碳排放总量约为331亿万吨,达到历史新高,其中,中国的碳排放量占全球总量的27%,是全球第一大碳排放国。同时中国经济发展中存在的收入不平等问题也日益突出,城乡收入差距不断扩大。收入分配问题关乎人民的切身利益,如若不加以重视,会不利于整个社会的和谐稳定。因此,当前我国面临着节
在如今的消费语境与互联网时代,各种文化形式蓬勃发展,并催生出各具特色的设计风格,中国现代设计也在此背景下迅速地成长起来。中国作为蕴含悠久历史文化的文明古国,为中国设计提供了丰厚的文化资源。民族的就是世界的,特别是经济文化已迈入全球化时代,发扬饱含民族文化内涵的设计显得尤为重要。插画设计因其形式多样、适用性广泛等特点,无疑是一种能够很好展现民族文化、传递中国风情的设计表现样式。互联网与数字技术的迅猛
中国经历了史无前例的劳动力乡城流动过程,农业中释放出的大量剩余劳动力不断涌入城市,形成了庞大的农民工群体。农民工在城镇劳动力市场中处于弱势地位,工资低、不稳定、工作强度大并且社会保障不足。为维护包括农民工在内的低收入者的就业权益,《最低工资规定》于2004年开始实施,各省份和地区结合经济发展状况确定了各自的最低工资标准,随后,最低工资标准不断提升。最低工资调整对农民工的受雇就业以及就业稳定性产生了
中国是一个文化大国,有着延绵五千年的悠久历史,在中国的大地上孕育着各种各样丰富多彩的文化。文化的多样性,正是中华文化的巨大魅力。十八大以来,习近平总书记在多个场合谈到中国传统文化,表达了自己对中国传统文化中值得继承发扬的优秀文化的认可。地方文化作为传统文化的一部分,在历史文化的发展进程中也扮演着重要的角色。保护中国的传统文化,首先就应该从保护地方文化开始,只有地方文化引起广泛的重视,才能够使年轻人
城镇化是国家社会进步的重要标志,传统的城镇化发展重视速度,忽略质量,随着“建设美丽中国,突出生态文明建设重要地位”这一指导思想的提出,迫切要求政府改变固有思维,将速度与质量并行这一准则作为新型城镇化建设的重点要求。城镇化一词内涵丰富,其中,经济城镇化是本文的主要研究内容。夜间灯光数据由美国国家海洋和大气管理局公布,这一数据是通过卫星夜间观测获取到的,相比于经济发展落后的地区,经济发达地区在晚上时的
面对国际经济发展持续低靡,国内经济发展后劲不足,供给侧矛盾及产业结构矛盾日益突出等一系列问题,中国经济开始承受较严重的下行压力,经济增速明显放缓,我国要想在经济“新常态”轨道上正常运行,就必须发掘新的发展突破口。国家领导人习近平主席结合国内外经济社会发展实际,科学决策,提出“一带一路”伟大构想。“一带一路”倡议是中国面对新时代,深化改革开放进程、统筹国内区域协调发展、深化供给侧结构性改革、优化产业
随着互联网的快速发展,网络已经成为人们日常生活中重要的一部分。而智能手机等智能终端设备的出现,使得移动端成为互联网的重要接口。现如今,越来越多的网民选择通过移动端接入互联网,通过移动互联网,人们可以随时获取想要的信息,摆脱了时间和地点的局限。如果说手机是移动网络的接入载体,那么App就是获取信息的重要媒介,各种各样的应用程序已然成为人们网络行为的重要载体。通过各类应用程序,人们可以实现新闻浏览、图