基于MapReduce架构的文档相似度计算方法

来源 :网络与信息 | 被引量 : 0次 | 上传用户:taobaowang1312
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
MapReduce是Google开发的在超大集群下进行海量数据运算的一种分布式编程模式。Google利用MapReduce编程模式,其搜索业务取得了巨大的成功。TF-IDF是计算词条权值的一种方法,常被搜索引擎应用,作为文件与用户查询之间相关程度的度量或评级,但是计算量特别大。本文将介绍使用MapReduce架构来解决TF-IDF实现中计算量大、速度慢的问题。
其他文献
中国作家汪曾祺的《复仇》和日本作家菊池宽的《超越恩仇》是典型的以“复仇和解”为主题的文学作品。中日两国的研究者对这两部作品都给予过关注。但是,以《复仇》和《超越恩
论文首先全面概述了低温共烧陶瓷(LTCC)技术的研究发展概况。鉴于LTCC涉及的材料的低温烧结和与Ag共烧问题,在很长一段时间材料技术都没有得到足够重视,阻碍了整个LTCC技术的
<正>DRGs-PPS是疾病诊断相关分组预定额付费制的缩写,它是一种被国际上广泛认可的用于医疗保险费用支付方式。DRG-PPS根据患者性别年龄、诊断、疾病程度、并发症和合并症、是
在中国,石油煤炭等能源的大量消耗造成环保与能源安全的双重压力,这都要求中国调整现有的能源结构,其中包括增加天然气在一次能源中的占比。中国天然气产业的发展起步较晚,产业推
<正>泗县位于安徽省东北部,黄淮海平原南端,地处皖苏两省五县交界地带,地近沿海,背靠中原,属长三角腹地,是安徽省东向发展战略重点发展的23个县之一。全县土地总面积1787平方
全球气候改变、水土流失、土地荒漠化等环境现象无不与森林资源日益减少有直接或间接的关系。解决森林问题是解决以上生态环境问题的关键。森林资源是林业企业的基础,在林业
松树、竹子和梅花,都属于耐寒植物,因此被人们称为"岁寒三友",而且历来被人们所称颂。无论诗词,还是绘画,此三者一直都是中国古代文人墨客千年吟咏不绝的主题。"松"象征着坚
主体性是思想政治教育对象的本质属性,精细化是现代大学生思想政治教育发展的必然要求。实现思想政治教育的主体性和精细化,必须建立教育者与学生双向型互动关系。要尊重制度均
研究背景与目的:作为最常见的妇科恶性肿瘤之一,宫颈癌每年在全球约有50万新发病例和23万死亡病例,严重威胁着妇女的健康和生存。因此,宫颈癌的防治工作刻不容缓。2008年的诺