基于知识嵌入和光谱融合的车辆重识别方法研究

来源 :李洪潮 | 被引量 : 0次 | 上传用户:ted_yu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
车辆重识别(Vehicle Re-identification,Re-ID)是近几年智能视频分析领域兴起的一项新技术,主要用于城市监控视频下的车辆图像识别。车辆重识别的核心目标是在无重叠视域监控网络下跨时空地识别和匹配跨相机下穿梭的车辆,这对公共安全、平安城市、智慧交通、智慧城市、无人驾驶等行业的发展都具有推动作用,因此具有重要的研究和应用价值。随着深度学习技术的推动,这方面的研究已经取得了令人瞩目的成就,但是,由于数据、场景、环境的复杂性,车辆重识别仍然是未能得到很好的解决。本文围绕上述复杂因素,从知识嵌入和光谱融合这两个方面出发,对车辆重识别问题开展讨论,分别研究了基于相机感知和实例内关系嵌入的车辆重识别方法、基于属性增强和状态削弱的车辆重识别方法、基于多尺度知识感知Transformer的车辆重识别方法以及基于异质光谱融合的车辆重识别方法。通过利用与分类相关的损失函数(例如,交叉熵损失和三元组损失),深度模型的蓬勃发展见证了车辆重识别的最新进展。然而,车辆实例的全局结构可能会由于不同的相机和视角引起的巨大外观变化而受到损害。为了解决这个问题,本研究提出了一种基于相机感知和实例内关系嵌入的车辆重识别方法。首先,通过相机和视角注释信息来挖掘正样本之间的图关系。然后,设计了一种新颖的分段列表损失,利用图关系为处于不同列表的正样本赋予不同的学习权重。在基准数据集上的大量实验验证了所提出的方法相对于最先进车辆重识别方法的优越性能。车辆重识别是智慧城市和智能交通中的一项关键任务,旨在跨相机场景中匹配车辆图像。然而,不同车辆的图像可能会因为属性相同而具有较小的视觉差异,同一车辆的图像可能因为状态的不同而具有较大的视觉差异。为了同时考虑以上两种挑战,本研究提出了一种属性和状态引导结构化嵌入的车辆重识别网络,通过基于属性的增强和基于状态的弱化对车辆重识别实现判别性特征学习。在多个基准数据集上进行的大量实验验证了所提出的方法相对于最先进车辆重识别方法的优越性能和泛化性。现有的车辆重新识别方法通常存在实例内差异和实例间相似性。解决这个问题的关键在于过滤掉与身份无关的干扰并收集与身份相关的车辆细节。为此,本研究提出了一种基于多尺度知识感知Transformer的车辆重识别方法来训练由知识向量引导的模型,它能够解耦与身份相关的特征和与身份无关的特征。大量实验表明,所提出的方法在三个广泛使用的车辆重新识别基准上达到了新的最先进水平。目前,大多数车辆重识别方法都集中在可见光车辆图像上,这限制了其在黑暗环境和恶劣天气等不利环境中的实际应用能力。红外光谱成像提供了补充信息用来缓解计算机视觉任务中的照明问题。此外,车辆重识别面临着不同视角导致多样化外观的巨大挑战,例如卡车的不同视角图像大不相同。在这项工作中,贡献了一个名为RGBN300的多光谱车辆重识别基准,它同时包含多光谱图像和多视角图像。然后,本研究提出了一种异质协作感知多流卷积网络,在端到端学习框架中自动融合不同光谱的车辆特征。结合多种主流深度神经网络的综合实验表明,异质协作感知多流卷积网络可以有效整合多光谱数据,以便在白天和黑夜进行鲁棒的车辆重识别。
其他文献
具有优异性能的序列在无线通信、密码学、雷达、声呐、超宽带无线定位和压缩感知等领域有着重要的应用。本论文聚焦适用于多载波无线通信系统的大集合序列集设计,对具有良好相关特性的互补序列与准互补序列设计展开深入研究,主要包括相互正交互补序列集设计、低/零相关区互补序列集设计以及低相关互补序列集设计。首先,基于二次广义布尔函数,研究了一类完全互补序列集直接构造方案与一类长度灵活的相互正交互补序列集直接构造方
学位
巨大的能源消耗和污染物排放加剧了世界能源短缺和环境压力。提高能源效率,优化能源利用,减少污染物排放已经成为未来可持续能源发展战略的重点。蒸汽动力系统为过程工业提供所需的电力,蒸汽等,同时也会消耗大量的一次能源,产生大量的污染物。因此,蒸汽动力系统的设计与运行优化研究对于企业经济效益、环境保护和能源节约具有重要的理论和实际意义。在实际蒸汽动力系统设计与运行优化研究中,不确定因素是必须考虑的。不确定因
学位
共价有机框架(covalent organic frameworks,COFs)是一类由轻元素(C、N、O、H等)组成的有机单元通过共价键连接而成的晶态有机多孔聚合物材料,具有高比表面积、规则有序孔结构、易于功能化修饰、结构及功能可调等特性,可根据其相应性质和功能应用于多个领域。因此,结合海洋环境修复和海洋资源利用的实际需求,本文基于席夫碱反应和合成后修饰(post-synthetic modif
学位
背景部分或全脑放射治疗是脑内原发或转移性肿瘤重要的辅助治疗手段,放射性脑损伤(radiation-induced brain injury,RBI)为头颈部肿瘤放疗常见的并发症。放射治疗除对肿瘤细胞具有明显的杀灭和抑制作用外,同时不可避免对辐射区域肿瘤旁的正常组织有明显的损伤作用。RBI导致脑组织退行性变、认知功能减退,甚至严重痴呆,严重影响放射治疗患者生存质量,为致死致残的主要原因。对其病理生理
学位
背景2016 年世界卫生组织(World Health Organization,WHO)把 H3 K27M 突变的弥漫性中线胶质瘤列为一个新增肿瘤实体加入到中枢神经系统肿瘤分类中,肿瘤的分子分型与磁共振成像(Magnetic Resonance Imaging,MRI)表现的关系有待进一步研究。肿瘤分子分型需靠术后病理获得,而影像组学能无创地从医学图像提取定量信息,有准确预测分子突变状态及评估预
学位
对《总目》的杂家及杂家观进行整体观照是进入宋杂家类提要研究的首要前提。杂家类是《总目》子部中书籍收录数量最多的一门,其“杂”的内涵包含了思想立场、考证范围、著述行为、编纂形式等多个要素,故此类文献被细分为杂学、杂考、杂说、杂品、杂编、杂纂六小类,体现了从“思想之杂”到“杂之义广”的变化过程。其中与作为思想学派的杂家关联度最高的是杂学类,但它和先秦“兼儒、墨,合名、法”的各家平等立说的综合性学派最大
学位
变压器是支持农村偏远地区扶贫和乡村振兴的重要电力支持设备,其安全运行关系到国计民生的方方面面。而当前农村地区产业需求得到释放,农村经济蓬勃发展,激增的电力负荷给变压器带来严重威胁,为了解决变压器的运行可靠性和故障诊断,需要研究能够实时监测变压器特征信息的检测手段。研究发现,变压器油纸绝缘在超负荷或过热故障下易引起不同程度的分解,其中典型故障特征气体为CO和CO2,随着故障持续时间的增加和严重程度的
学位
以史为鉴,可以知兴替。科学总结党领导思政课教师队伍建设的历史经验,是党的思想理论建设的应然指向和重要内容。中国特色社会主义进入新时代,高校思政课受到前所未有的高度重视,思政课教师队伍数量不断扩大、质量明显提升。但是,我们也清醒地认识到,国际环境日趋复杂,不稳定性不确定性因素明显增加。市场经济的发展,社会生活多元化、多变性更加凸显,多样化的思想观念碰撞、交织,社会主义意识形态教育面临的任务异常艰巨,
学位
本文主要以可入肺颗粒物(PM2.5)为研究对象,分别考虑易感人群吸入空气污染物直接得病和受呼吸系统疾病感染者的传染而间接得病两种情况,建立数学模型进行分析研究.第一章是本文的绪论部分,主要阐述了空气污染和PM2.5的定义,以及呼吸系统疾病的研究现状,流行因素,防治措施等等.然后,简要概述了有关呼吸系统疾病的数学模型.最后介绍了本文主要进行的研究内容.第二章考虑到敏感人群吸入空气污染物导致生病,并且
学位
《国家新型城镇化规划(2014-2020)》指出我国城镇化存在“产城融合不紧密,产业集聚与人口集聚不同步,城镇化滞后于工业化”等突出矛盾与问题,而空间关联是破解上述问题的有效路径之一。作为历史文化名城的典型代表——扬州,伴随着城市规模的迅速扩张,“有产无城”、“有城无产”两类矛盾均较为突出,探讨居住、工业、服务业空间的关联性,可揭示该类城市的产城融合轨迹,找出产业、城镇空间的优化路径。本研究以扬州
学位