基于监督哈希方法的图文跨模态检索研究

来源 :大连理工大学 | 被引量 : 0次 | 上传用户:wangrui1006
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着科技的发展,网络上不同模态的多媒体信息日益增多。适应这一发展趋势,跨模态检索成为一个重要问题。哈希方法由于具有存储空间小、计算速度快的优点,在跨模态检索中受到了广泛的关注。跨模态哈希方法是将样本的不同模态的特征映射为二进制的哈希码,通过计算哈希码之间的汉明距离,来对不同模态样本之间的相似性进行衡量,从而进行跨模态检索。本文主要围绕跨模态哈希方法进行研究,提出两种监督跨模态哈希方法,研究成果如下:(1)在将不同模态的特征映射到统一的汉明空间的过程中,如何更好地保持模态间相似性和模态内相似性仍然是一个挑战。大部分现有的跨模态哈希方法忽视了对不相似样本的限制。此外,大部分现有的跨模态哈希方法在优化的过程中放松了对哈希码的离散约束,优化放松后的目标函数,再将得到的连续值量化来获得哈希码,然而这种方法会带来量化误差并且降低检索性能。为了解决上述问题,本文提出一种监督跨模态哈希方法,称为离散相似性保持哈希方法。该方法同时保持模态间相似性和模态内相似性,特别地,该方法对相似样本和不相似样本都进行限制以学习更有区别性的哈希码。此外,设计一种离散优化方法来学习离散的哈希码。最后,在三个数据集上的实验验证了该方法的有效性。(2)利用标签信息有利于提高跨模态检索的性能,另外虽然已有一些方法将协同矩阵因子分解应用在跨模态检索中,在训练的过程中如何更好地将标签信息和协同矩阵因子分解融入一个框架中仍然需要引起关注。此外,大部分现有的方法放松离散约束后再优化目标函数,这会影响跨模态检索的性能。为了解决上述问题,本文提出一种监督跨模态哈希方法,称为语义关联离散哈希方法。该方法将训练样本的语义类别标签回归到哈希码,采用协同矩阵因子分解直接学习哈希码。此外,在对目标函数进行优化时,对于哈希码矩阵用一种离散优化的方法进行求解。最后在三个数据集上进行了实验,实验结果验证了该方法的有效性。
其他文献
目前,中国的宏观经济正面临着新旧转型的挑战期,严峻的经济形势使得商业银行之间的竞争尤为激烈。商业银行要想能够在激烈的竞争中站稳脚跟,持续前进,只能根据自身的情况进行
光码分多址(OCDMA)技术具有安全性高、保密性强、和提供多服务质量(QoS)等特点,该技术可实现不同用户之间异步共享整个信道。其中,语音、图像、视频等多媒体应用可根据不同服
随着科学技术的发展,越来越多的机器人开始服务于我们的生活,为我们的生活带来了极大的便利,为公司节省了不少人力成本,为国家的国防也做出了突出的贡献。机器人在室外可以使用全球导航卫星系统进行精确定位,但在室内环境中,卫星信号容易受到干扰导致机器人在室内无法使用全球导航卫星系统进行精确定位。因为人们对室内定位服务的迫切需求,室内定位技术已经成为国内外研究的热点。随着计算机技术和图像处理技术的迅猛发展和图
强夯法是一种重要的地基加固方法,随着我国工业化进程的加快,它将会在城市建设中发挥越来越重要的作用。目前,国内外许多学者已经就强夯加固的机理进行了深入细致的研究,并取
本篇论文是从对外汉语教材编写的角度,研究近代中国海关英国籍洋员邓罗(1857-1938)1899年编译的汉语口语学习用书《谈论新编,Chats in Chinese》。第一、第二章论述了近代中国海关洋员汉语口语学习教材研究现状以及《谈论新编,Chats in Chinese》的基本情况,包括海关洋员的汉语口语学习、编译体例及主要内容,揭示该书作为口语学习和考试教材的特征。第三、第四、第五章,从词汇
基于物理的实时流体仿真是计算机图形学的重要研究方向之一,目前已经被广泛应用于计算机动画游戏、电影特效、工业仿真、军事仿真以及科普教育等多个领域。随着人们对流体动
在这篇文章中,我们利用Kazhdan-Lusztig基的线性组合构造出了在交换环R上2n阶的二面体群对应Hecke代数的胞腔基,它的系数是由正规化的Chebyshev多项式Sk,R(x)和Sk,R(x)对应的
期权作为一种重要的金融衍生品,从出现至今一直都是金融领域研究的重要课题。期权定价理论是现代金融学理论的核心内容之一,从1973年Fisher Black和Myron Scholes提出经典的B
实现钣金的自动加工工艺规划对提高钣金生产效率有重要意义。自动工艺规划过程取决于CAPP系统对CAD零件数据中工艺特征的提取,而特征识别技术是解决工艺特征提取最有效的方法之一。但当前特征识别技术在钣金特征识别中仍无十分有效的解决方案。为此,本文以钣金零件为研究对象,开展基于图和规则的特征识别算法研究,实现钣金件中主要工艺特征的提取,研究工作如下:(1)研究钣金零件加工过程及工艺特点,分析钣金零件三维
和量子纠缠一样,量子非局域性也是量子信息中一种非常重要的资源。在量子通信中多粒子纠缠态经常需要被局域地制备然后通过信道来分发给不同地方的不同用户来构建量子信道。