房地产信息垂直搜索引擎技术研究

来源 :杭州电子科技大学 | 被引量 : 0次 | 上传用户:yuanlaiyizhizailiula
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
由于计算机及网络的飞速发展,因特网上的信息量呈指数级增长。当使用通用搜索引擎来搜索相关的信息时,准确率越来越令人难以接受,有时候甚至访问了几十个页面都无法找到所需的内容,这对于一般人是无法接受的。面对这个问题,垂直搜索引擎应运而生。垂直搜索引擎的出现能够解决通用搜索引擎的领域性不足问题,对特定领域的搜索能够做到更加专注、更加深入、更加精确。本文课题是针对近年来房地产的现状,设计并实现了房地产垂直搜索引擎。其中重点研究垂直搜索引擎中的两个关键技术:网络爬虫和中文分词。本文的主要内容如下:(1)介绍了研究背景和意义、搜索引擎的概述以及垂直搜索引擎的国内外现状和发展。(2)介绍了垂直搜索引擎所涉及的相关技术,包括网络爬虫技术、网页信息提取技术、中文分词技术、信息索引技术和搜索结果排序技术。(3)深入研究了Shark-Search算法,分析其存在的两个不足之处:锚文本上下文不足和局部最优不足。针对这两个不足之处提出了改进,分别加入了链接聚类和隧道技术。链接聚类能够解决Shark-Search算法的锚文本上下文不足之处,而隧道技术则能够解决主题孤岛效应,从而避免局部最优问题。实验表明改进后的算法相比原来算法在抓取主题相关的页面上有显著提高。(4)研究了概率统计模型的一种——隐马尔可夫模型,并且将其和词性标注相结合,加入自定义状态和自定义标注,经过计算来确立最大概率的状态序列,从而能够有效地识别房地产命名实体。(5)结合前几章提出的理论,实现了房地产垂直搜索引擎系统,其中包括五大部分:网络爬虫、页面处理、中文分词、信息索引、信息搜索。(6)对论文做了全面的总结,并对未来的研究工作进行了展望。
其他文献
第二次世界大战的“婴儿潮”时代出生的人逐渐步入老年化,随之带来的老龄化问题迅速成为焦点。老人的生理机能由于器官衰竭而退化,从而造成行动不便,自信心下降等心理问题。如果
计算机技术发展至今,计算机软件系统虽然只经历了短短的几十年历史,但其在社会各个行业得到了极其广泛的应用,如医疗卫生、航空航天、核电站控制等等。同时,人们对软件的质量
无线网络链路可用带宽测量对保证无线网络的通信质量具有非常重要的意义,精确的链路可用带宽估计能使有限的带宽资源被充分利用,错误的估计会造成节点之间通信质量差甚至无法
无线传感网是由部署在监测区域的传感器节点自组织构成的网络,正确可靠的网络协议是该网络自组织高效运行的基础。在无线传感网自组织协议验证手段中,模型检验是一种形式化自动
图像分割是把图像划分成各具特性的子区域并提取出感兴趣目标的技术和过程,它是对图像进行进一步处理和分析的基础。在已提出的图像分割方法中,很多方法都具有较好的分割效果,但
无线传感器网络(Wireless Sensor Network, WSN)融合多领域前沿科技于一体,有寻常网络难以企及之优势,其未来发展不可限量。迄今为止,WSN在深海探测、航空航天、救灾抗震等领域已
随着电子产业的发展、硬件成本下降以及图像视频处理各种算法不断推陈出新,视频处理技术在工业、商业以及民用方面已经达到实用的阶段。在视频处理技术快速发展的环境下,虚拟广
遥感技术已经逐渐成为我们生活中不可缺少的一部分,它的发展让我们的信息来源更加的广泛,给各个领域的发展开辟了新的发展空间。但由于在拍摄的过程中受到种种原因的影响(如热噪
大众标注(Folksonomy)的概念随着Web2.0技术的发展出现,它重视用户参与,通过邀请用户参与标注过程,可以达到知识共享和用户交互的目的,能挖掘用户标注中潜在的偏好。凭借自发性和
合成孔径雷达(Synthetic Aperture Radar,SAR)是遥感技术的一个重要研究方向,在军民两方面都有重要应用价值。SAR图像的成像原理与光学图像不同,研究SAR图像去噪方法有重要意义