基于无人机的轻量化目标检测系统设计

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:szoysj
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
当前目标检测作为计算机视觉的基础性任务受到了广泛的关注。伴随着现代计算机计算能力的提升,目标检测的方法也从传统的手工特征输入向采用深度神经网络进行特征提取的方法过渡。同时无人机在各个行业的应用逐步深入,基于无人机的目标检测领域成为了当下研究的一个重要方向。无人机的目标检测系统有其独特应用场景需求,其中主要体现在硬件系统和算法支持两个方面。由于无人机本身的体积重量和能耗的限制,因此对基于无人机的目标检测系统存在严格的资源和功耗的要求。无人机的应用场景一般都有较高的实时性指标,这对机载目标检测系统的算法复杂度和计算速度上都提出了挑战。综合以上的问题,本文提出一种基于无人机的轻量化目标检测系统,在实现高实时性的同时减少资源的消耗。本文采取专用的高清晰度多媒体接口(High-Definition Multimedia Interface,HDMI)进行视频或图像数据的输入和输出,并采用专门设计的深度神经网络处理器加速对图像的特征提取的计算过程。系统的目标检测算法是基于Siamese的目标匹配网络算法,通过计算模板图像与待检测图像的相似度从而实现目标的定位和检测。其中神经网络处理器采用了类似传输触发结构(Transport Triggered Architecture,TTA)的处理器体系架构,该架构基于控制数据传输的简洁指令及规则的二维阵列并行计算结构,可以非常便捷的实现定制化应用电路及简单易用的高级编译器设计,通过二维的执行单元阵列与存储资源的紧耦合连接实现特征图卷积加速过程的高带宽计算,且系统电路和应用程序设计高效、简单,使之能够方便地应用于诸如无人机目标检测等嵌入式应用领域。系统在Xilinx公司Kintex7系列FPGA芯片上使用Verilog HDL进行电路设计。通过使用物理层视频编解码芯片Si I9013和Si I9134实现了完整的视频数据采集,卷积特征提取计算,预测框坐标计算和视频驱动输出的流程,并对无人机拍摄的视频进行了实际的测试验证。系统将由无人机航拍的1080P的视频图像进行下采样至256×256的灰度图像后通过深度神经网络处理器进行目标预测框的计算,对目标舰船的检测准确率最高为84%,系统对单帧图像的检测速度为3.4ms,理论上可以实现每秒294帧的检测速度,系统存储资源仅使用2.3MB左右的FPGA片内存储资源,系统板的总功耗约为4.8W基本满足无人机舰船目标检测的资源和功耗要求,对于在体积重量和资源有严格要求的目标检测工程应用场景有一定的借鉴意义。
其他文献
大多数机器学习问题可以描述为数据项加约束项的形式。当约束项是稀疏约束,即需要求解的稀疏或在某个域内稀疏时,则问题转变为稀疏约束问题。稀疏约束问题具有广泛的研究意义,如图像去噪、信号恢复、超分辨率、压缩感知和神经网络剪枝等任务都属于稀疏约束问题。稀疏约束问题的求解越来越受到学者的重视。本文的目的是寻找性能优良的解决稀疏约束问题的方法,重点研究以下三个具体问题:1.近年来,可学习迭代收缩阈值算法(Le
学位
随着人流量的不断增大,出行需求的不断加深,出于安全的考虑,安检X光危险物检测方法需要不断更新不断改进才能满足人民日益增长的出行需求和安全保障,但目前的安检工作还是主要依托于人工检测,以人为主,智能检测为辅,安检的效率和速率一定程度上取决于安检人员的精力和经验,这样很容易发生错检和误检,安全隐患很大。如何实现高效快速的自动化检测是本文研究的重点。本文探索了YOLOV4目标检测方法在安检X光危险物检测
学位
遥感目标检测技术旨在对遥感图像的目标实现定位和识别,在民用和军事等领域发挥着重要的作用。然而,实际场景下的遥感目标检测面临着诸多问题和挑战。比如,如何解决由于样本标记工作专业性强、成本高导致的标记样本缺失的问题;如何有效挖掘遥感图像中复杂场景下的目标特征,在不影响检测效率的情况下提高检测精度;如何更高效地训练检测器,让特征层提取出的特征更好地发挥作用。针对上述问题,本文深入分析了人脑高效认知目标的
学位
[目的]分析慢性鼻窦炎患者的变应原谱、血清总IgE和血清特异性IgE的特点,探讨变态反应在慢性鼻窦炎中的作用机制。[方法]收集2016年7月-2018年10月期间收入本院耳鼻咽喉头颈外科的变应原检测阳性的慢性鼻窦炎患者160例,根据《慢性鼻-鼻窦炎诊断和治疗指南(2012)》分为79例慢性鼻窦炎伴鼻息肉组(CRSwNP组)和81例慢性鼻窦炎不伴鼻息肉组(CRSsNP组),同期91例变应原检测阳性的
学位
高光谱图像相比于自然图像具有更加丰富的空间信息和光谱信息,能够用于对地物目标进行更准确的识别,近年来得到了越来越广泛的研究和应用。高光谱图像数据丰富,但是标记样本难以获取,因而应用更少的标记样本得到更高的分类精度是重要的研究方向。随着深度学习技术的发展,许多基于神经网络的高光谱图像分类方法取得了很好的分类效果。但是这些分类方法大多从邻域块内提取特征信息,忽视了地物目标在空间上更大区域内的匀质性。图
学位
随着高光谱遥感成像技术的不断发展,高光谱图像在现实世界中的应用已经成为遥感领域中的重点研究方向并受到越来越多学者们的关注。区别于自然图像和多光谱图像,高光谱图像具有更多的光谱波段和更多的光谱信息,便于研究者对地物目标进行更好的分类。深度学习方法可以有效提取高光谱数据中的光谱-空间信息,已经在高光谱图像分类任务中取得了很好的效果。但是,现实世界中的高光谱数据集往往是开放集,即由于时间成本和人力成本等
学位
视觉目标跟踪是计算机视觉中一个基础而又具有挑战性的研究课题,应用场景越来越广泛,主要包括视频监控、人机交互、自动驾驶以及军事制导等。视觉目标跟踪的主要任务是,给定视频第一帧图像中待跟踪目标的位置,通过跟踪器推断出该目标在后续帧图像中的位置。近年来,越来越多的研究人员致力于基于深度神经网络的视觉目标跟踪研究,跟踪的性能也在不断地被优化,但是由于存在背景相似干扰、目标形变、光照变化、尺度变化、运动模糊
学位
随着虚拟现实、自动驾驶和机器人等智能技术的发展,在相关的定位、建图与导航任务中,视觉SLAM(Simultaneous Localization And Mapping)成为了其理论的核心支持技术。目前大多数落地的视觉SLAM方案,主要由传感器、视觉里程计、后端优化、回环检测和建图几个模块组成,其用于视觉跟踪的视觉里程计模块依赖于手工设计的特征点而非真正的地标,这将导致SLAM系统在光照变换等复杂
学位
目的:宫颈癌是妇科最致命的恶性肿瘤之一,主要由持续的高危型人乳头瘤病毒(high-riskhumanpapillomavirus,HR-HPV)感染引起,近年来宫颈癌的发展趋势逐步趋于年轻化,严重影响着患者的生活质量及身心健康。早已有研究表明,宫颈病变过程需长达10余年的时间,所以治疗和预防宫颈癌的最好方法就是阻断和干预HPV感染,寻找到一种转阴率高、副作用小、复发率低的治疗方法已经成为当前预防宫
学位
遥感技术可以帮助人们更直观地了解世界,研究人员通过遥感技术可以从空中监测地球上的物体,这对资源勘探、地物监测以及海、陆、空导航意义重大。深度学习是一种新的遥感数据信息提取方法,也是处理大规模遥感数据的工具。目前遥感技术与深度学习的结合已经取得了显着的效果,提升了分类任务、语义分割任务、目标检测任务、变化检测任务等诸多问题的精度,在实际的应用落地过程中,已经有很多的成功经验和方向可以借鉴。本文将视觉
学位