基于文本和视觉信息融合的Web图像检索

被引量 : 0次 | 上传用户:luluzhangwei
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着数码技术、扫描技术和Internet的迅速发展,Web图像资源日益丰富。但由于Web数据具有多样性、复杂性和无规则性等特点,如何快速、准确地从海量Web资源中查找用户感兴趣的图像成为一个非常具有挑战性的任务。Web图像检索通过合理地组织Web图像资源,并研究高效的查询和检索方法以达到充分利用Web图像资源的目的。目前主流的Web图像检索方法大致可以分为两大类,即基于关键词的图像检索(TBIR)和基于内容的图像检索(CBIR)。Web图像主要包含两种类型的信息,一种是Web图像本身所包含的丰富的视觉信息,另一种是Web图像所在网页包含的丰富的文本信息。TBIR仅仅使用从文本信息中抽取的文本特征索引和检索图像,而CBIR仅仅使用从图像视觉信息中抽取的低层视觉特征索引和检索用户。显然,要较好地满足用户检索图像的需求,在Web图像检索过程中必须充分利用并融合上述两种不同类型的信息;此外,还需要为Web图像附加上包括图像内容的高层语义在内的各种信息,因为用户主要根据图像的高层语义特征判断图像满足自己的需要程度。但如何为Web图像附加语义信息,以及如何实现上述两种信息的融合直到今天依旧是图像检索领域中的研究难点。针对上述问题,本文首先提出了浅层语义处理技术一词汇相似性计算技术。词汇相似性计算是自然语言处理领域中语义处理的基础性研究之一,主要研究如何计算词汇之间的语义相似程度。本文的研究中将词汇相似性计算技术作为语义信息的度量手段,这使得存在于人类思维中的抽象语义信息具有了可计算性和可对比性,同时也进一步使得Web图像的文本信息和视觉信息(图像视觉信息被表示为高层语义特征,参考下文)的融合成为可能。其次,本文针对Web图像的低层视觉特征和高层语义特征之间的语义鸿沟问题,提出了一个Web图像自动加权标注模型:首先使用各种机器学习和统计技术学习从图像低层视觉特征到图像高层语义特征的映射模型;然后利用这个映射模型抽取图像的高层语义特征;最后根据Web图像文本信息和提取出的高层语义特征本身,使用词汇相似性计算技术度量抽取出的高层语义特征的质量。通过上述步骤可以将Web图像表示为带有权重的高层语义特征,同时也进一步将图像视觉信息和文本信息的融合转化为表达图像内容的高层语义特征和Web图像文本信息的融合。接着,针对Web图像包含的文本信息和从图像视觉信息中提取的高层语义特征,提出了一种具有可扩展性的Web图像检索模型。为了充分利用Web文档中的文本信息和从Web图像低层视觉特征中抽取的高层语义特征,该模型构架在贝叶斯推理网上,利用推理网内在的多信息源融合能力,将Web图像文本特征和Web图像的高层语义特征无缝地融合在一起实现Web图像检索。基于上述研究,本文设计并实现了一个Web图像检索原型系统,该系统充分利用Web图像的两类信息:从Web图像内容中提取高层语义特征,然后将它们与从Web图像文本信息中提取的文本特征融合在一起实现Web图像检索,研究结果验证了本文提出的模型在Web图像检索中的有效性。文章最后对本文的研究工作进行了总结和展望。
其他文献
课堂是学生出错的地方,初中数学教学中,错误本身就是一项重要的资源。在教学中,教师要善待"数学错误",要重视其教育价值,引发思维碰撞,促进动态生成,来提高教学有效性。
随着社会的高度发展,人们对于安全防护的需求越来越高。特别是用于高安全场所的安全防范系统,一方面面临着复杂自然环境的考验,要做到不受任何天气、地形及其他环境因素的影
区域金融竞争力决定着一个区域的金融产业和经济的发展。本文对浙江省整体金融竞争力的时序差异特征和各地市金融竞争力的区域差异特征进行了具体的描述,试图探索适合浙江省
《中学教师专业标准》的实施为培养合格的中学数学教师指明了方向和要求:中学数学教师要具有良好的职业道德和专业精神、合理的专业知识结构和较强的专业能力.据此,对应《标
纤维球过滤可充分发挥出滤料深层的截污能力。介绍了改性纤维球滤料的技术要求,在使用过程中主要存在的几个问题,改性纤维球过滤器的结构及特点,在油田污水处理中的现场应用
随着社会的发展,科技的进步,人类对周界安全防范的需求愈来愈高,针对各种社会财产和公共设施的保护更逐渐受到国家的重视。对于边境、机场、军事基地、指挥中枢、通信中心、
家族企业要在市场激烈的竞争中站稳脚跟,并谋求发展,就必须站在战略的高度重新审视企业制度的建设。本文通过对家族企业PSB公司的制度建设中的权力分配进行研究,介绍中国家族
<正>采用蒸馏和柱层析法对依兰精油进行分馏,并用光谱法分离和鉴定出17种纯化合物。尽可能用色谱—质谱、红外光谱、1H核磁共振和13C核磁共振法分析挥发性、含氧的和烃类馏分
蛋黄含有大量的生理活性物质,具有重要的食用价值和生理功能。本论文对利用水酶法从鲜鸡蛋中提取的蛋黄油进行脱酸、对蛋黄卵磷脂进行纯化。首先,利用溶剂萃取-碱炼法来降低
陀螺稳定平台是光电跟瞄系统的核心,它能够隔离载体运动、风阻力矩、内部摩擦等因素的影响,保持平台上探测设备的视轴在惯性空间稳定,因此被广泛应用于军用及民用领域。本文