基于深度信息的三维目标检测及优化

来源 :上海工程技术大学 | 被引量 : 0次 | 上传用户:strongstrongqiang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目标检测是计算机视觉领域最基本的问题,其主要任务是对任意一张给定的图像,采用某种搜索策略和目标识别算法,确定特定目标在图像中的位置和大小。目前基于二维图像的目标检测技术已经发展成熟,该研究大多基于RGB相机获取的二维光学图像,而现实世界是一个三维的空间,当涉及到自动驾驶、虚拟现实、机器人等三维领域时,二维目标检测由于缺少深度信息,无法得到场景的高维特征,即无法描述目标在现实场景中的位置、尺寸和方向。同时,卷积神经网络日益增长的深度和尺寸为设备功耗和运行速度带来巨大挑战。因此结合深度信息进行三维目标检测并对其进行网络模型的优化显得尤为重要,也将促进人工智能技术的发展。本文针对三维目标检测问题,调研相关应用领域的各类方法,总结其优势与不足,并在此基础上,从提高先验信息的利用率和压缩与加速网络模型两个方面入手,主要内容包括以下几部分:(1)三维目标候选框的先验方向角估计。针对现有方法得到的三维目标候选框的先验方向角为统一的预设值的问题,本文提出一种新的基于二维检测和分割信息提取三维目标候选框的先验方向角的方法。首先通过颜色信息和深度信息得到二维目标检测框和分割实例,并在分割实例上提取计算先验方向角的关键点;然后根据关键点的条件限制排除不确定点和修正误判点;最后通过深度信息进行点云重建得到关键点的三维坐标,以确定候选框的先验方向角。(2)融合消失点和先验方向角提取三维目标候选框。针对现有方法依赖模板的信息提取三维目标候选框的问题,本文通过欧拉角和透视投影原理以先验方向角计算三维坐标系下三个相互正交的消失点,并投影到像素坐标系;然后对二维检测框的顶边采用预设的采样间距进行顶点采样,得到像素坐标系下三维目标候选框的第一个顶点;随即通过三个消失点和顶点的线性关系计算候选框的其余七个顶点,再转换倒三维坐标系下,得到完整的三维目标候选框信息。(3)基于2.5维信息的三维目标检测。基于3维信息的三维目标检测方法存在计算量大和信息利用率不高的问题,本文采用2.5维信息进行三维目标检测,即利用RGB-D摄像头获取颜色图和深度图,并将颜色图和深度图分别通过神经网络计算特征图;再通过算法得到的二维目标检测框和相应的上下文信息框映射从ROI pooling层中提取的特征并进行通道融合;最后,根据融合的特征对三维目标候选框进行分类和精细回归。(4)网络模型压缩与加速。针对三维目标检测的网络模型参数多、计算量大、运算速度慢的问题,本文提出一种“无损”方法,在不损耗精度的情况下将Batch Norm层和Scale层合并到相邻卷积层;同时结合“有损”方法,即通过信道裁剪的方法对神经网络进一步压缩,采用LASSO回归选取特定层中具有代表性的神经元,并通过神经元重构该层原本的输出。
其他文献
任务型教学法(Task-based Language Teaching,TBLT),是在交际教学法基础上发展起来的一种新的教学法,强调以学生为主体,从做中学,注重培养学生的综合语言运用能力。自国家《
目的:通过比较深刺腰夹脊配合热敏灸与普通针刺配合热敏灸对于腰椎间盘突出症的临床疗效,优化治疗腰椎间盘突出症的方法。方法:本研究将纳入60名LDH患者,随机分成试验组(深刺腰夹脊配合热敏灸)与对照组(普通针刺配合热敏灸)的人数各30人,试验组采取腰夹脊深刺配合热敏灸的方法,对照组采取普通针刺配合热敏灸的方法,针刺的方法1天1次,10次为一个疗程,热敏灸1天1次,10次为一个疗程,1个疗程结束,整理V
晚成鸟中亲本递食策略直接影响幼鸟存活和亲本的繁殖成功。本文以分布于青藏高原上的灰喜鹊(Cyanopica cyana)为研究对象,明确其繁殖生态和行为生态特征,进而探讨其递食策略
高山离子芥(Chorispora bungeana Fisch. et Mey)是高山冰缘植物的一种,是研究植物低温适应机制的理想材料,本论文在前期比较蛋白质组学研究的基础上发现一个S-腺苷甲硫氨酸
党的十九大的召开,正式宣告了形成习近平新时代中国特色社会主义思想,这是马克思主义在中国发展的又一次伟大尝试。作为其中的重要内容和组成部分,全面依法治国是新时代坚持和发展中国特色社会主义的十四条基本方略之一。新时代中国特色社会主义思想既总结了党的十八大以来法治实践和理论基础,更是对全面依法治国进行系统阐述,使其理论思想更加成熟。习近平关于全面依法治国重要论述始终坚持全面依法治国的战略思想,保障了新时
伴随着中国云计算和大数据的迅猛发展,这几年国内数据中心的建设规模越来越大。而UPS作为数据中心的核心设施也迎来了全新的发展机遇。整个行业的发展异常迅速,技术进步越来
目的:本课题通过观察升降散加味穴位贴敷联合常规西药对痰热型原发性高血压患者用药前后的降压水平、中医证候、血脂、同型半胱氨酸等指标的影响,客观评价其临床疗效及安全性,为临床治疗原发性高血压提供新思路。方法:选择2018年10月至2019年10月期间就诊于石家庄市中医院心病三科门诊及住院的符合纳入标准的62例患者。随机分为治疗组和对照组,对照组给予苯磺酸氨氯地平片口服,治疗组给予苯磺酸氨氯地平片口服联
在医院的各项诊疗服务中,通过各种医疗设备对患者进行常规医技检查是临床医生对问诊患者病情准确判断的重要依据,也是医生提供给患者准确医疗方案过程中较为关键的步骤。目前国内大型三甲医院普遍采用传统医技检查模式,从医生接诊患者后开具检查单、到检查科室进行检查登记,缴费确认并执行检查,检查科室执行检查,患者等待取检查结果后返回医生处进行问诊,在常见的医院医疗诊疗过程中,重要的医技检查有:普通超声、CT平扫、
真菌有着特殊的遗传背景和生物合成途径,使其次级代谢产物极为丰富,是生物活性物质的重要来源。真菌种类繁多,数量庞大,全世界真菌种类约有150多万种,被人类正式描述的不到10%,而来
背景与目的:结直肠癌(Colorectal cancer,CRC)已成为消化系统最常见的恶性肿瘤之一。结直肠锯齿状息肉(SPs)曾经被认为是良性病变,随着内镜技术的发展、分子遗传学技术的进步、病理诊断标准的改变,越来越多的证据表明SPs与结直肠癌发病密切相关。2010年世界卫生组织(WHO)将锯齿状息肉分为三种类型:增生性息肉(HP)、广基锯齿状腺瘤/息肉(SSA/P)和传统锯齿状腺瘤(TSA)。