【摘 要】
:
近年来,视觉传感器和处理器性能的不断提升为相机阵列的研究奠定了硬件基础。与单相机采集装置不同,相机阵列拥有更大的视野范围,获取到的信息也更加丰富。作为常用的光场采集设备之一,相机阵列不仅能够采集成像平面的色彩信息,而且可以记录成像光线的角度信息。因此,基于相机阵列的算法研究打破传统单一视角算法的局限,通过融合多视角获取的互补信息,为解决复杂场景中的目标遮挡问题提供了新的解决思路。本文在相机阵列的基
论文部分内容阅读
近年来,视觉传感器和处理器性能的不断提升为相机阵列的研究奠定了硬件基础。与单相机采集装置不同,相机阵列拥有更大的视野范围,获取到的信息也更加丰富。作为常用的光场采集设备之一,相机阵列不仅能够采集成像平面的色彩信息,而且可以记录成像光线的角度信息。因此,基于相机阵列的算法研究打破传统单一视角算法的局限,通过融合多视角获取的互补信息,为解决复杂场景中的目标遮挡问题提供了新的解决思路。本文在相机阵列的基础上,针对遮挡目标的成像与跟踪问题进行了深入研究,研究内容主要包括以下几个方面:(1)搭建了一套相机阵列同步采集系统,并对基于平行视差和光束法平差的相机阵列标定方法分别进行了研究。本文采用网络相机构建相机阵列,并设计多线程并行的采集架构保证采集光场数据的同步性。此外,本文对基于平行视差和光束法平差的相机阵列标定算法原理进行了深入研究,并在采集到的标定数据上对标定精度以及成像效果进行了实验分析。(2)实现了一种基于CUDA并行计算架构的合成孔径成像算法。基于相机阵列的合成孔径成像算法需要处理的合成信息丰富、数据量大。为了提高算法的实时性,满足实际应用需求,本文采用基于查找表的图像校准方法以及多线程并行的视差消除、图像合成策略,实现了合成孔径成像算法基于CUDA并行计算架构的加速设计。为了验证该算法的有效性,本文进行了统计实验验证以及成像效果分析。实验结果证明,该方法与传统合成孔径成像算法相比运行效率提升了20.94倍,能够达到对遮挡目标实时成像的效果。(3)提出了一种基于语义驱动的去遮挡合成孔径成像算法。算法主要分为两部分:语义信息深度目标标注图的生成和数据驱动的可变孔径合成成像。首先,本文从语义信息着手提出了一种基于语义反馈的深度目标标注图生成方法。具体的,这里使用深度学习算法在合成图像上挖掘目标信息,并且将该信息和目标深度反馈到相机阵列各个视角下,得到对应的深度目标标注图。然后,基于深度目标标注图对任意指定深度进行可变合成孔径成像。可变孔径主要包含两个层次:一个是合成深度和视角驱动的自适应可变成像孔径;另一个是深度目标标注图中视觉信息驱动的光线筛选。最后,在CUDA并行计算架构上实现了剔除前遮挡信息的遮挡目标清晰成像,并在多组室内外复杂场景中对本文提出算法进行评估,证明了该方法的有效性和优越性。(4)提出了一种基于空-时关联的相机阵列协同跟踪算法。由于目标在场景中具有时空一致性,那么对任意时刻的目标进行时序与空间上的数据关联,即可得到多目标跟踪的完整轨迹。首先,使用YOLOv3网络针对行人头部建立检测模型。为了有效地解决场景中行人遮挡以及视角变化带来的检测问题,本文构建包含不同距离、不同角度的行人头部数据集对网络进行训练。然后,在检测的基础上,对目标进行时序以及空间上的数据关联。时序上,利用目标重叠模型相似度构建代价矩阵进行目标关联,从而获得单相机下目标的运动轨迹。空间上,设计了基于对极几何约束的目标相似度模型进行跨视角数据关联,并根据相机阵列空间关联信息对单相机跟踪结果进行决策,最终获得持续稳定的多目标跟踪轨迹。本文在自建相机阵列多目标跟踪数据集上对该算法进行了测试,证明了该算法的有效性和鲁棒性。
其他文献
企业员工是提升企业核心竞争力的源头,人才是推动社会经济发展的重要动力和因素,在我国激烈的市场竞争环境背景下,企业员工的流失现象比较严重,尤其是中小型企业,这类企业的规模不大,技术水平不够先进,但为了在市场竞争中占据一角,有很多企业不重视正确处理与员工的劳动关系,例如,企业管理者过多的考虑企业的经济收益,而侵犯了员工的合法权益,随意拖欠或者克扣员工的工资;加大员工的工作强度;不执行劳动安全卫生规程,
随着近年来计算机视觉技术的不断发展以及相关硬件性能的提高,计算机视觉已广泛应用于各个领域,推动了社会的发展。视觉测距作为计算机视觉的一个重要研究方向,在无人机视觉定位、机器人自主导航、非接触测量等方面已经发挥了巨大的作用,利用计算机视觉技术进行测距逐渐成为测距定位技术的研究热点。基于深度学习的目标检测算法从2014年开始发展迅速,在精度和速度上都有了长足的发展,已经开始逐渐在监控、物流、交通、识别
为解决中小企业融资难问题,改善国有商业银行“一统天下”的金融格局,化解金融危机,我国政府采取了一系列政策引导民营银行走向法律化。2013年7月国务院办公厅正式下发的《关
目的:检测汉族和新疆哈萨克族食管鳞状细胞癌(esophageal squamous carcinoma,ESCC)、高级别上皮内瘤变(HGIN)、低级别上皮内瘤变(LGIN)以及癌旁正常组织中Profilin2蛋白的表达情况
随着区块链的诞生与快速发展,诸多领域逐渐产生了基于区块链技术的应用,包括区块链技术在金融领域的跨境支付、物流和农业领域的追踪溯源、公共服务领域的公共管理、数字版权领域的确权管理等。区块链系统是一个去中心化的共享数据库,因此,确保区块链系统的一致性和安全性是至关重要的。共识机制是区块链系统的核心技术,它通过特殊节点的投票,在短时间内对交易进行验证和确认,解决了如何在一个缺乏信任、完全自由开放的网络中
自训练是半监督分类中最常用的算法之一,该算法通过自主迭代的方式训练分类器,简单有效.但是,在自训练算法训练分类器的过程中,容易对无标记样本分类错误,而且这些错误标签会用于后续迭代训练,造成错误累积,从而降低算法的分类准确率.本文从处理错误标记样本的角度出发,对自训练分类算法展开深入研究,主要工作如下.本文提出了一种基于密度峰值和切边权值统计的自训练(ST-DP-CEWS)算法.在每次迭代训练时,首
“兴”是东北方言口语中的常用词,有动词、语气副词和类词缀用法。东北方言动词“兴”包括三个子类:谓宾动词、状态动词和能愿动词。谓宾动词“兴”,意为“准许、允许”,在句中作谓语,其后接成分为谓词性成分,“兴”可用于肯定句与否定句中,具有[+准许]的语义特征,语用功能为增强情感表达和心理表达。状态动词“兴”,意为“流行”,在句中作谓语,后接成分为代词、动词短语、状中短语和定中短语,“兴”表示的是不受人的
丝网版画是一种独具魅力的绘画表现形式,其特有的表现力受到了广泛应用。本文主要阐述的是丝网版画《梦境》系列的创作与研究整体过程,其中包括创作的目的与意义,以及创作的经过。丝网版画《梦境》系列作品主要是探究人们关于“梦境”这种奇妙的生理现象。每个人都会做梦,千奇百怪的梦。梦是睡眠中最有趣又神秘的一部分。各式各样美好、幸福、恐惧的场景都会栩栩如生地在人们的脑中上演。人们也在不断地探究如何解释梦的出现及其
临空经济是区域经济发展的动力,吸引与航空运输相关的产业聚集。临空经济区作为一种新型的经济现象,在促进区域经济发展中发挥着重要作用,特别是在大型机场地区,人员和物流密集使得临空经济区的发展与影响更为显著。在20世纪90年代,中国的临空经济开始萌芽,国内各省市也开始规划临空经济,政府在临空经济的发展中具有不可替代的作用。政府正确的政策导向可以为临空经济区的发展提供良好的投融资环境和市场秩序,通过协调各
21世纪,随着全球化深入推进,各国间经济联系日益增强。柬埔寨自1998年全国大选以来,经济发展迅速,然而受历史因素影响,柬埔寨工业依旧落后。2015年,柬埔寨政府出台了《柬埔寨工业发展政策2015-2025》,描绘了柬埔寨未来十年工业发展蓝图。这份文件对中国读者了解柬埔寨国情、促进中柬经贸关系发展将起重大作用。笔者于2019年10月至2020年1月翻译了这份英文文件“总论”至“策略框架”六章的内容