基于Hadoop框架的TF—IDF算法改进

来源 :微型机与应用 | 被引量 : 0次 | 上传用户:wb5019
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在分析Hadoop框架与TF—IDF算法的基础上,给出了TF—IDF算法在Hadoop分布式框架下的具体实现。实验表明,在处理大数据量时,与传统方法相比,新方法的效率更高。
其他文献
分析和设计了单片机控制的远程告警系统,给出了软件流程图。该系统以微控制器( MCU )为核心,结合其他外围模块电路,通过公众交换电话网络实现远程自动语音告警,用户也可以方便地在
提出了一种新的基于DSP和CPLD的图像采集系统驱动设计方法,该方法针对现有图像采集系统中程序设计灵活性较低和数据传输速度较慢的问题,利用CPLD的灵活性和TMS320C64x系列DSP的
要想用 Petri 网对系统进行有效的模拟和分析,就必须先建立起可靠准确的 Petri 网模型,目前很少有文献专门研究 Petri 网对系统的建模问题。对此,提出了基于系统行为序列的 Petr
NCPengineering近日宣布,该公司推出其新版通用(Entry)(http://www.ncp—e.com/en/products/universal—vpn—client—suite.html)和詹博(Junipel)(http://www.ncp--e.com/en/products/juniper-vpn-cli
简述了异步任务处理在复杂Web应用中的必要性,利用Java中基于线程池的执行框架,分析并设计了相应的任务调度方法,以解决Web应用中大型任务处理时间长与系统要求响应时问短的矛盾
从测量矩阵和稀疏矩阵的互相关性角度出发,通过对测量矩阵和稀疏矩阵所构成的Gram矩阵进行门限选择,进而经过相应的缩放处理降低互相关性,这样不仅可以获取更多有信息量的测量值,而且可以完成对测量矩阵的优化改进。通过在DWT、DCT下的压缩感知图像重构实验验证了该方法的可行性,恢复效果得到一定程度的提高,相比于传统的小波恢复重构,达到了预期的效果。
介绍了以VC6.0为开发平台,用无线单片机CC2530进行多节点多参数的低功耗数据采集系统。下位机设计了可灵活扩展的无线数据帧,并设计了采集控制命令,实现广播模式和单目标地址控制
为了减少楼宇火灾中人员的伤亡与财物损失,针对现有消防报警系统施工与维护复杂、抗干扰能力低等问题,提出了基于ZigBee静态网络与移动节点相结合,监测、显示、储存为一体的
主要运用Quartus5.1软件开发平台,利用VHDL语言编程和仿真,基于Altera公司MAX11系列CPLD芯片EPM1270T144C5实现了硬件六十进制压缩BCD码加减运算功能。将设计的CPLD电路应用到光
近日,凌力尔特公司( Linear Technology Corporati on )推出可兼容 IO-Link PHY ( COM1/COM2/COM3)的工业收发器LT3669,该器件包含一个高效率降压型稳压器和一个低压差线性稳压器。