【摘 要】
:
近年来,随着数据种类的不断多样化,如何有效检索跨模态数据成为了人们关注的热点问题。由于基于哈希的跨模态检索方法具有低存储开销和高检索速度的特点,使得跨模态哈希成为了许多学者研究的重点。然而,现有的研究大多忽略了对于邻域邻近性保持和类别邻近性保持的探索。此外,随着数据的爆炸式增长,大量的新兴事物(不可见类数据)给传统的跨模态检索带来了巨大的挑战,大多数现有方法难以完成在数据零样本情况下的跨模态检索任
论文部分内容阅读
近年来,随着数据种类的不断多样化,如何有效检索跨模态数据成为了人们关注的热点问题。由于基于哈希的跨模态检索方法具有低存储开销和高检索速度的特点,使得跨模态哈希成为了许多学者研究的重点。然而,现有的研究大多忽略了对于邻域邻近性保持和类别邻近性保持的探索。此外,随着数据的爆炸式增长,大量的新兴事物(不可见类数据)给传统的跨模态检索带来了巨大的挑战,大多数现有方法难以完成在数据零样本情况下的跨模态检索任务。为了解决上述问题,本文提出了两种基于类别语义嵌入的跨模态哈希方法,利用类别语义信息建立类别之间的联系,从而提高跨模态检索的性能,具体内容包括:(1)针对邻近性保持的问题,提出了一种流形嵌入语义哈希算法。该方法利用局部线性嵌入对邻域邻近性进行建模,并通过类别语义嵌入保持类别的邻近性。使得流形嵌入语义哈希不仅可以提取不同模态数据的流形结构,而且可以将类别语义信息嵌入哈希编码中,进一步提高学习的哈希编码的判别能力。(2)针对数据零样本的问题,提出了基于属性的正交投影跨模态哈希算法。该算法将跨模态特征和类别属性均投影到汉明空间中,并约束汉明空间中的跨模态特征的投影与不匹配的类别属性正交,因此模型可以学习每个模态的具有判别性的二进制哈希表示。其中,通过类别属性转移可见类的知识到不可见类,从而完成零样本跨模态检索任务。本文在广泛使用的数据集上进行了大量的实验,并在多种评价指标下与多种先进的方法进行对比,以此评估本文提出的算法的性能。实验结果表明,本文提出的流形嵌入语义哈希可以有效提升跨模态检索的性能,同时可以在深度特征上获得良好表现。而本文提出的基于属性的正交投影跨模态哈希可以在可见类和不可见类的检索中均获得良好效果,验证了该方法处理零样本跨模态检索问题的有效性。因此,本文提出的算法能够有效处理传统跨模态检索以及零样本跨模态检索任务。
其他文献
随着航空航天事业的蓬勃发展,小卫星由于其质量轻、成本低、应用范围广等优势重新掀起商业浪潮,由于小卫星对重量和体积的敏感,对小卫星载荷体积和重量提出了更高的要求,其中如何设计出拥有更小体积和重量同时又拥有较高分辨率的成像系统就成为了小卫星领域的研究热点。成像系统分辨率主要取决于主透镜(反射镜)的口径。从光学系统设计的角度出发,将光学成像系统设计成折叠状是一种热门的设想,但是这种折叠必然造成特殊形状的
轧钢过程是钢铁生产制造中的重要环节,轧钢区段的生产优化调度问题是相关领域的研究应用热点。随着钢铁工业信息化、智能化程度的不断提高,搭建运算效率高、界面友好、普适性强的优化调度软件平台成为一个首选的系统化解决方案。通过建立适合实际问题的通用数学模型并集成高效的优化方法,平台能够弥补人工调度在精度、效率等方面的缺陷,助力钢铁企业提升产能和经济效益。本文以解决轧钢过程中常见的组合优化问题为需求,面向两种
随着我国工业化、信息化水平不断提高,近年来巨大的住宅产业建设面积以及销售量,作为城乡建设一体化的重要物质载体被广泛关注。住宅建设在满足基本居住供给需求的同时也带来了一些不容小觑的问题,如建设周期较长、生产质量难以把控、制造环节智能化程度低、维护成本高昂以及高能耗、高污染等问题。我国住宅产业的传统装修模式已经无法满足推动住宅工业化发展的要求,住宅产业的传统模式需要融入新的建造技术以推动可持续发展。因
米制航空航天螺纹(MJ螺纹)采用热处理后进行滚压螺纹制造的工艺,具有高疲劳强度和高疲劳寿命的特点,广泛应用于航空航天领域。在螺纹滚压加工过程中,第一步就是对刀。传统的手工对刀法采用试切法,这种方法对刀效率低、精度低,已经无法满足现代数控机床大批量、高精度加工的要求。随着人工智能的发展,机器视觉技术现已广泛应用于各行各业,它可以大大提高生产效率和自动化程度。本文将机器视觉应用到螺纹滚压对刀中,提出一
在专利申请的初步审查过程中,审查员应当对专利申请人的申请资格进行审查,但是对于什么样的主体可以享有申请专利的权利,享有专利申请权,现行的法律法规中的判定标准比较宽泛。由于审查标准的宽泛,加之审查员审查经验的不同,对于要求申请人提供何种证明材料来能证明其具备申请人资格,不同的审查员在审查尺度的把握上各有不同。本文结合相关案例以及相关的法律法规中对申请主体资格的规定,针对该问题进行分析和探讨。
本文首先以炎症因子TNF-α为刺激物作用于人体皮肤细胞,探究炎症因子对人体皮肤的影响。结果表明炎症因子TNF-α使得皮肤细胞内胶原蛋白含量表达异常,打破氧化还原系统影响人体皮肤,具有一定的加快皮肤老化作用,同时TNF-α可以作为刺激物建立慢性炎性皮肤衰老模型。后续实验通过TNF-α建立慢性炎性衰老模型,分别考察与比较维生素C、龙血竭提取物、铁皮石斛提取物对炎性衰老的抑制作用。结果表明,维生素C作为
面对源源不断产生的海量数据,人们希望能从中揭示事物潜在的规律,发掘具有重要价值的知识。但缺失数据的存在不仅增加了数据挖掘的难度,并会降低分析结果的可靠性。合理填补缺失值成为当前数据分析和挖掘中一个非常重要的环节。对此,本文采用数据建模的方法填补不完整数据中的缺失值,通过构建模型挖掘数据属性间的关联关系,以提高模型对不完整数据属性关联关系的逼近能力为目标,开展了如下工作:(1)针对“不同样本类别间的
肝脏疾病对于人类的健康是巨大的威胁,临床上对于这类疾病的诊断和治疗是十分依赖计算机辅助技术的。因此如何从CT图像中获取肝脏以及肝脏肿瘤的位置、大小等特征,是进行肝病诊断、手术规划、功能评估和治疗决策的重要前提。然而依靠专业人员进行纯手工分割是耗时费力的,另一方面,由于肝脏以及肿瘤在CT图像中表现出边缘模糊、低对比度和灰度不均等特性,完全依靠计算机进行自动分割也是较为困难的。因此,本研究针对肝脏和肝
本文主要研究的内容是使用FPGA测量无特征物体的移动速度。无征物体指从前到后物体的整个形状基本上没有发生改变,在无特征物体的选用方面,选择热轧钢作为处理对象。本文的设计方案是使用激光照射热轧钢表面形成散斑,通过匹配热轧钢表面散斑的移动位置来确定热轧钢的移动位置,从而进一步求出热轧钢在二维平面的移动速度。使用图像匹配的方式来对视频流当中两帧图像进行散斑的位置匹配,通过获取散斑移动位置来得出热轧钢的移
近年来,电流体喷射打印工艺在柔性显示、生物医学微器件、MEMS传感器和柔性电子封装等领域的应用日益广泛,使用电喷印工艺可突破挤出式打印工艺和喷墨打印工艺对于喷头内径及结构分辨率的限制,但射流的稳定性与打印的一致性需进一步提高。柔性电子器件中常用的高绝缘性聚合物衬底,在电喷打印过程中易积累残余电荷,对后续射流产生静电排斥力,影响打印的稳定性和可控性。本文模拟了不同喷针和打印参数条件下柔性衬底上的电射