基于多特征融合的遮挡关系推理研究与系统实现

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:jieyses1023
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
从单目图像中推理物体的遮挡关系是计算机视觉基础任务之一。从观察者的角度看,遮挡关系反映了场景中物体之间的相对深度差异。因此,遮挡关系推理也是感知和理解场景的重要步骤之一,可用于物体检测、分割和3D重建等。遮挡关系推理用遮挡边缘来描述物体,并用方向值描述物体之间的遮挡次序。然而前人的方法中,遮挡边缘存在较多误检和漏检,并且遮挡关系推理的误检率较高。其原因是他们忽视了遮挡边缘和遮挡次序之间同时存在着关联性和差异性,并且其特征没有被充分提取。针对以上问题,本文设计了基于多特征融合的遮挡关系推理系统。本系统输入单目图片,输出遮挡边缘图以及物体之间的遮挡关系图,并分为三个部分:特征提取模块、语义融合模块和分流预测模块。首先,在特征提取模块中,针对遮挡边缘漏检、不连续的问题,本文设计了简单而有效的边缘精炼子模块来获取空间线索,并设计了边缘监督子模块实现更精确的边缘定位。为了获得物体级别的遮挡边缘,本课题采用了轮廓注意力增强子模块,用以对高语义的上下文特征进行学习,增强系统中物体的轮廓感知。针对方向值回归不准确的问题,本课题使用场景学习子模块对物体轮廓两侧信息进行有效感知。接着,本文设计了语义融合模块,来解决多层次结构特征的差异问题。该模块将遮挡关系推理任务的两个子任务——遮挡边缘检测和遮挡方向预测分别进行语义融合,得到统一的自适应特征图。最后,在分流预测模块中,对遮挡边缘和遮挡方向分别进行检测和预测。该模块使用了两种损失函数联合监督学习,注意力损失函数解决了遮挡边缘检测中正负样本极度不均衡问题,而L1损失函数有效地处理遮挡方向连续值预测问题。本文方法在PIOD和BSDS ownership数据集上,从定量和定性的角度对本方法进行实验的验证和评测。本方法在显著提升遮挡关系推理效果的同时,保证了较低的算法复杂度。
其他文献
世界上致密油资源非常丰富,经济价值巨大。我国致密油藏所占比例逐渐增大,高效开发这类油气藏是石油领域的一项重要任务。渗吸采油作为致密油藏高效开发的技术手段之一越来越受到人们的重视。本文选取新疆地区致密砂岩储层天然岩心,在室内条件下,总结以往渗吸实验设备的基础上,自主设计渗吸实验装置,更好的减少实验误差和干扰因素。通过模拟地层温度、压力、长度、裂缝等条件,进行动态渗吸物理模拟实验,研究裂缝密度、基质渗
党中央根据十九大提出了全面推进依法治国的总方略,以便监督所有行使公权力的公职人员,深入开展反腐败工作,深化国家监察体制改革。本文在梳理我国监察权运行机制历史变迁的基础上,结合最新的监察体制改革热点及难点,对新时代国家监察权运行机制展开论述。本文分为七个部分。第一部分介绍本文使用的核心概念、理论基础与分析框架。核心概念包括政治权力、行政监督与运行机制等内容;理论基础包括分权制衡理论、制度变迁理论和马
目的本研究将壳聚糖/羟基磷灰石支架与载辛伐他汀的PLGA微球相复合(SIM/PLGA/CS/HA),以期构建一种具有局部缓释辛伐他汀功能的仿生组织工程支架。该SIM/PLGA/CS/HA支架在体内
当前,各种腐败现象正伴随着我国经济的一步步增长以及改革开放、全面从严治党的深入进行而凸显出来,严重的影响着社会,成为人们所普遍关心的热点、焦点问题。在我国全面从严
中国传统山水画和古典园林都是我国最具有代表性的艺术形式,二者都是以自然美学的观点作为基本出发点,并在历史发展过程中相互影响、相互促进,逐步形成相对一致性的联系。研究中国传统山水画审美意识的形成过程和表达形式,深刻的领略、感受古人对生态环境、自然环境、居住环境的态度以及中国传统文化的博大精深,探索传统山水画对园林艺术空间审美的影响。通过研究中国传统山水画与古典园林在表现内容、审美表达、风格手法以及呈
随着对网络安全的不断重视,人们已将网络入侵检测作为维护网络安全的主要技术之一,也是保护计算基础设施免受恶意攻击的重要对策。入侵检测系统是一种软件或者硬件组件,用于监控计算机系统并分析其中发生的事件以发现入侵迹象。目前常用的入侵检测技术包括:基于模型的技术、基于机器学习的技术、基于数据挖掘的技术等。其中基于机器学习的入侵检测技术是当前的研究热点,但当前网络攻击流量比较多,数据采集是比较困难的,因此针
隧穿电离是原子和分子强场电离的第一步,作为强场电离中最基本、最普遍的量子现象之一,一直是超快光物理基础研究领域中非常重要且备受关注的一个课题。少周期超短超强激光技术的发展与成熟,为在亚光周期时间尺度上深入理解强场物理过程提供了有力的工具。基于阿秒条纹谱技术而发展的阿秒钟(attoclock)技术,其时域测量精度可达几阿秒,为研究电子在强场隧穿电离过程中发生的超快动力学行为提供了很好的手段。本文我们
虚拟实验平台是虚拟现实的一项重大应用,虚拟手仿真技术也是虚拟现实的一类重要研究领域。虚拟实验平台中的物体形状规则,多处于受限交互中,需要更有针对性的碰撞交互和更全面的运动控制方法。此外现有的运动控制方法尚不能较好地得到控制结果的效果体现,需要能体现真实性并满足实时性的仿真方法。本文围绕着虚拟实验平台中的虚拟手受限交互和仿真展开研究。本文定义了抓取和按下这两种特定的交互动作及判定方法,通过手部接触点
猪传染性胸膜肺炎(Porcine contagious pleuropneumonia,PCP)是由猪胸膜肺炎放线杆菌(Actinobacillus pleuropneumoniae,APP)引起的以急性肺脏出血或慢性纤维素性胸膜粘连等为特征的一种呼吸道传染性疾病。Apx外毒素是APP最重要的致病因子,且有ApxI、ApxII、ApxⅢ和ApxⅣ4种毒素因子,其中ApxⅠ可引起疾病出现肺部典型病变
2019年中国成为世界知识产权组织《专利合作条约》(PCT)框架下国际专利申请量最多的国家,技术创新已成为引领国家发展的第一动力。政产学研技术创新联盟具备了技术创新的所有要素,兼顾了研发与实用,是广泛存在的技术创新合作机制。然而,社会经济活动的开展也伴随着利益分配问题的出现,不同的联盟利益主体往往对利益有着不同的诉求,生产部门的逐利性决定了企业首先要谋求中短期经济效益,而学研部门需要长期的研发支持