【摘 要】
:
精准、快速地从复杂场景中提取关键内容和感兴趣目标在军事侦察、城市安全监视和国家安防监控等应用中具有重要意义。然而,海量视觉信息的快速分析与智能理解对算法性能提出了更高的要求,尤其是面对包含杂乱背景、低对比度、多种类别和多尺度目标的复杂场景时,常规的算法或机器学习模型难以发挥有效作用。作为计算机视觉的主流方向和基于视觉内容分析的基础研究,视觉显著性检测旨在模拟人类视觉注意力的场景感知能力和主动选择机
论文部分内容阅读
精准、快速地从复杂场景中提取关键内容和感兴趣目标在军事侦察、城市安全监视和国家安防监控等应用中具有重要意义。然而,海量视觉信息的快速分析与智能理解对算法性能提出了更高的要求,尤其是面对包含杂乱背景、低对比度、多种类别和多尺度目标的复杂场景时,常规的算法或机器学习模型难以发挥有效作用。作为计算机视觉的主流方向和基于视觉内容分析的基础研究,视觉显著性检测旨在模拟人类视觉注意力的场景感知能力和主动选择机制,以实现场景中重要内容和关键信息的快速筛选与提取。基于此,本文以视觉显著性检测为方法基础,以光学遥感、自然图像、多模态和低对比度场景图像为研究对象,从模型结构设计、监督策略优化、深度特征集成以及弱监督学习角度出发,开展了一系列基于视觉显著性的复杂场景目标检测方法研究。本文研究内容及创新总结如下:1.针对复杂场景下杂乱背景干扰与区分的问题,提出了一种基于对比度加权字典学习的光学遥感显著目标检测方法。将样本对比度引入字典学习过程中,实现了一种在线判别字典学习;基于判别字典,结合稀疏表示系数和重构误差设计了一种新颖的显著性度量准则,以提高对遥感影像中显著目标的判别能力。本方法解决了基于稀疏表示的显著目标检测算法受限于错误的背景区域采样对非高斯噪声敏感问题。在构建的遥感数据集和公开的自然图像数据集上的实验表明,所提方法能更好的抑制背景干扰,突出显著目标的完整性。2.针对高分辨率遥感影像显著性检测存在目标定位不准确和边界粗糙的问题,提出了一种基于语义引导和注意力细化的光学遥感影像显著目标检测方法。设计的语义引导解码器通过聚合高级特征来实现粗略但准确的目标定位,集成的语义信息通过自顶向下的方式来引导低层次特征的融合并逐步细化目标边缘;构建的检测模型以端到端的方式进行监督学习并输出高质量的预测显著图。与主流的14种先进方法的实验结果表明,提出方法在主要性能评价指标上均取得了最佳结果。遥感目标检测的实验示例进一步证实了方法具有在对地智能监视的应用潜力。3.为增强光照变化或云雾干扰情况下场景显著目标检测能力,提出了一种多层次交互学习的多模态场景显著目标检测方法。设计的跨模态细化模块集成多模态(深度影像图、红外影像图)特征;采用多级别融合模块以自低向上逐级特征层集成与反馈特征修正的方式实现特征细化和复用;以金字塔检测方式将不同层次的跨模态特征融合输出最终预测。本方法构建了RGB-D和RGB-T数据场景的统一显著目标检测架构,取得了与主流的14种方法相比的主要指标性能优势。同时,在利用RGB-D的开放水域船舶检测和RGB-T的场景玻璃区域检测的实验示例进一步展现了所提模型的泛化能力。4.分析显著目标检测和伪装分析任务的内在联系,提出了一种用于伪装分析的视觉Transformer显著目标检测方法。采用视觉Transformer对伪装物的全局上下文进行编码与建模;通过非局部操作和图卷积构造非局部token增强模块,以增强Transformer的局部表示;在解码器中通过逐层收缩的金字塔结构聚集成对的token,以挖掘和累积有效的细节和语义特征。本方法解决了基于Transformer方法的局部建模效率较低和解码器中特征聚合的局限性问题。实验表明,所提方法在典型的伪装分析数据集上实现了超过23种先进方法的卓越性能。在遥感和自然图像显著目标检测数据集上的实验表明所提方法具备良好的模型泛化能力。5.为了从稀疏标注中实现光学遥感影像的显著目标检测,提出了一种基于涂鸦注释的弱监督光学遥感目标检测方法。通过带类激活映射的分类网络生成可靠的边界(伪)标签;设计从浅层特征和输入图像中提取目标边界信息的边界感知模块;将边界信息与密集聚合策略生成的初始显著图相结合,以引导解码器网络中的显著性预测。为解决数据集的缺失,构建了涂鸦标注的遥感影像显著目标检测数据集,并实验验证了在主要性能评价指标上取得了领先现有算法。本方法首次采用基于涂鸦标注的弱监督方法来解决目标边界预测模糊问题,突破了通常采用全监督进行遥感的显著性检测方式。
其他文献
早春类短命植物是林下草本层片的重要组成,也是整个森林生态系统结构中一个重要的组成单元。早春类短命植物有性繁殖过程,包括花器官漫长的地下发育过程和越冬后的开花过程。猪牙花(Erythronium japonicum)地上生长周期非常短,在春季短时间内迅速完成开花、传粉、受精,产生种子,待地上植株体全部枯萎,花器官在地下的球茎、鳞茎或根状茎内开始发育,至秋季花的形态全部建成,越冬后,翌年早春迅速开花。
利用微波辐射测量技术进行卫星遥感观测是监测冰冻圈、大气圈和水圈等动态变化的有效方法。连续长时间序列的星载被动微波观测不仅可以提供环境现状参考信息,也可用于研究与气候变化有关的发展趋势。然而,利用星载被动微波监测积雪信息的主要挑战之一在于传感器观测的空间分辨率较低导致的混合像元问题,通常指像元内因土地覆被类型不同引起的空间异质性问题;挑战之二在于森林覆盖的影响,即森林覆盖显著衰减下垫面积雪的上行微波
类风湿关节炎(rheumatoid arthritis,RA)是一种全身性、慢性自身免疫性疾病,除造成关节滑膜增生、软骨和骨破坏外,可累及心脏、肺等全身各个重要脏器。RA的主要病理特征为滑膜炎、血管翳形成、滑膜增生、骨和软骨损伤。增生的滑膜组织中有2/3的细胞为成纤维样滑膜细胞(fibroblast-like synoviocytes,FLS),它是RA的关键效应细胞,不仅能产生免疫应答、刺激炎症
白菜是两性花异花授粉作物,具有显著的杂种优势,雄性不育系的利用是其理想的杂交制种途径。1992年,本团队发现了一份复等位基因遗传的大白菜核不育材料,测交筛选到了具有100%不育株率的雄性不育系,并提出了“大白菜核基因雄性不育复等位基因遗传假说”,实现了奶白菜、紫菜薹、乌塌菜和白菜薹等多种白菜类蔬菜的定向转育。本研究前期开发了多个与核不育基因Ms连锁的分子标记,将Ms基因定位在A07染色体上。通过对
垂体腺瘤(pituitary adenoma,PA)是神经外科的常见肿瘤,占所有颅内肿瘤的10~15%,约1/3垂体腺瘤患者表现为恶性生物学行为,例如,肿瘤压迫周围组织,可能导致患者出现神经及内分泌症状,侵袭性垂体腺瘤还能浸润周围硬脑膜、海绵窦、脑组织及骨组织,海绵窦及颈内动脉的侵袭是垂体腺瘤预后不良的重要因素。海绵窦等重要组织的肿瘤侵袭给手术切除肿瘤带来巨大挑战,增加了脑脊液漏及颈内动脉损伤风险
恶性肿瘤严重威胁人类生命和健康,根据恶性肿瘤的细胞类型,它主要分为癌症和肉瘤两种类型。与正常细胞相比,恶性肿瘤细胞内基因结构和功能都发生了改变,并且其发生和发展通常不符合孟德尔遗传定律。此外,恶性肿瘤还具有多基因协同性、疾病异质性和个体特异性等特点。大部分恶性肿瘤本质上属于多基因遗传易感性疾病,其发病机制是多基因协同调控的结果。因此,从基因分子水平角度研究恶性肿瘤基因调控模式、生物过程、信号通路和
我国是世界上重要的农业大国,却不是农业强国,农业产业水平低、产业结构不合理、农业生态环境等问题突出。传统农业正在加速向现代农业转变,农业逐渐全方位参与国际竞争。吉林省中部粮食主产区既有良好的农业生产基础,又是城市群发展的重要区域。本研究以城乡关系理论、人地系统理论、区位理论为基础,从生产布局、产业集聚、农业发展等多角度,深入探究吉林省中部粮食主产区农业发展时空演变、动力机制和提升路径。结合空间计量
太赫兹波拥有众多优良的特点和巨大的应用价值,其在天文探测、大气遥感、材料科学、安全检测、生物医学、雷达系统、无线通信都有广阔的应用潜力。随着半导体技术和固态集成电路的发展,越来越多的研究者将目光投向了太赫兹固态技术,而单片集成是今后太赫兹固态电路发展的主要形式。平面肖特基势垒二极管具有器件寄生少、集成度高、可靠性好、可室温工作等优点,被广泛应用于太赫兹单片集成电路之中。然而,工作频率的升高和器件电
目前,平顶山矿区已经进入深部开采。深部巷道地应力高、围岩岩性差、巷道变形量大,巷道支护困难,维修费用高。当前深部工程软岩巷道支护理论与围岩控制技术,已成为矿业工程领域研究的热点和难点。针对平顶山矿区典型煤矿深部巷道围岩工程地质条件,论文采用实验室试验、理论分析、数值计算以及现场工业性试验等方法,研究了煤矿深部巷道围岩变形破坏基本特征,提出了深部工程软岩巷道“拱壳组合拱”支护模型,分析了“拱壳组合拱
电磁技术的用途非常广泛,目前已经应用在雷达系统、电子对抗、卫星定位以及小型化电子设备等众多军用及民用领域。电磁数值模拟技术可以有效节约电磁技术研究的成本,并缩短研发周期,因此其在电磁研究中的地位已经愈发重要。然而,由于实际工程领域的电磁问题的种类繁多,且具有复杂的几何结构和材料结构,电磁数值模拟技术在实际应用方面面临着诸多挑战。因此,针对复杂电磁问题,研究高效数值算法,减少计算机内存需求并提高仿真