垂直搜索引擎关键技术的研究与实现

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:hua6952
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
当今社会已经进入了网络信息时代,计算机与网络信息技术的飞速发展使得各个领域的数据和信息急剧增加,并且由于人类的参与使数据与信息系统中的不确定性更加的显著。如何从大量的﹑杂乱无章的﹑强干扰的数据中挖掘潜在的、有利用价值的信息,这给人类的智能信息处理能力提出了前所未有的挑战。在某些专业领域,如房地产、电子商务领域等,传统搜索引擎已经无法满足用户的需求。面对这些挑战,针对特定主题和个性化信息检索的垂直搜索引擎应运而生。基于主题的垂直搜索引擎已经成为当前搜索引擎和Web信息挖掘中的一个研究热点和难点,本论文的研究就是以这一热点和难点技术而展开的。首先,对通用搜索引擎的组成部分作了简单介绍,并细述了其工作原理。进而对垂直搜索引擎的一些关键技术如主题网络爬虫、信息抽取、文本分类、垂直搜索引擎架构等进行了详细的阐述。接着,在垂直搜索引擎技术中,探讨网络爬虫以何种搜索策略访问Web,以提高效率和准确率。考虑到web页面上存在的主题孤岛问题,提出基于主题内容和URL链接地址分析的搜索算法,可以使网络爬虫穿越隧道爬过更多的相关主题页面来解决主题孤岛问题,提高搜索引擎的主题资源覆盖率,同时可以较好的避免主题漂移现象。最后,根据本文提出的方法,设计和实现一个与“高等教育”主题相关的垂直搜索引擎,主要实现的功能主要包括网页的爬取,网页的解析,网页相关度判断,抓取深度控制,日志及结果记录,可视化界面等。
其他文献
是药三分毒,药物在治疗疾病的同时还可以由于其自身存在的毒性产生一些损害患者身体健康的情况,也就是所谓的药品不良反应(ADR),由于各种药物种类不断被研发出来,那么药物出
资料与方法 一般资料:2004年2月-2007年10月我们收集75例60岁以上老年病人病例,男56例,女19例,年龄60~73岁,平均66.5岁。胆囊结石38例,胆囊结石并胆总管结石21例,左肝内胆管结石7例,右
病毒性肠炎是世界各地婴幼儿腹泻中最常见的一种类型,尤其造成秋冬季节的广泛流行,对婴幼儿的健康产生极大威胁。到目前为止,该病缺乏有效的治疗手段。我们应用经皮给药治疗仪辅治病毒性肠炎,取得了较满意的效果,报告如下。
互联网技术对传统金融产业的冲击加速了金融产业内部启动创新发展模式的能动性,以余额宝为例来探析互联网金融的大数据商业模式特征及其创新路径成为金融产业内部共识。本研
圣稻13(原代号Ve) 审定编号:鲁农审2006037 号育种者:山东省水稻研究 所品种来源:1050与T022杂交后系统选育而成。特征特性:该品种为中晚属常规品种,生育期156天(比对照豫粳6号早熟3
ue*M#’#dkB4##8#”专利申请号:00109“7公开号:1278062申请日:00.06.23公开日:00.12.27申请人地址:(100084川C京市海淀区清华园申请人:清华大学发明人:隋森芳文摘:本发明属于生物技
入侵检测系统作为保护计算机系统安全的重要手段其应用越来越广泛,然而随之产生的大量原始报警事件也带来了新的问题:数量巨大、误报警多、重复报警多,影响了对入侵检测系统的
采访专家$$李祥晨(国家体育总局体育科学研究所体育工程中心副主任、研究员)$$黄光民 (国家体育总局运动医学研究所主任医师)$$郭建军 (国家体育总局体育科学研究所研究员)$$罗东梅
报纸
资料与方法 临床资料:2003年3月-2008年3月我院应用湿润烧伤膏尝试治疗颌面部擦伤60例,采用随机抽样的方法将患者分为MEBO治疗组60例,常规外科治疗组60例。MEBO治疗组中,男35例,女
采用化工流程动态模拟与传统危险与可操作性分析(HAZOP)相结合的方法,从机理模型和工艺危害后果定量分析的角度出发,以芳烃联合装置中重芳烃精馏工艺和设备为研究对象,选取塔