基于深度学习的单视角三维物体识别及位姿估计方法研究

来源 :东北大学 | 被引量 : 0次 | 上传用户:zx385213
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
深度传感器的廉价化让人们越来越容易接触到三维数据,也使得服务机器人、无人汽车及工业机械臂能够从更高维度感知周边工作环境,进而提高工作能力与效率,深度相机也因而成为智能机器的必备品之一。在机器获取物体的三维数据后,就需要利用该数据对目标物体进行识别与位姿估计,以便进行下一步操作。本文主要研究基于深度学习的单视角三维物体识别与姿态估计方法。本文首先针对深度传感器采集到的原始数据,分别从图像层面与三维点云层面进行了数据预处理,采用时域滤波的方式增加了深度图像数据的稳定性,利用数据统计滤波的方式去除了物体边缘处的干扰点,保证了后续三维感知任务数据的质量。接着针对基于深度学习的三维物体识别及位姿估计方法存在采集数据集困难,缺少数据易导致过拟合的问题,本文设计了利用物体三维模型生成仿真数据集的方案。首先利用廉价的深度相机设计并实现了基于人工标记圆的物体快速三维重建方法。利用随机采样一致性来去除平面提取目标物体点云,利用关键点之间的相对关系设计特征,利用特征匹配后关键点的空间变换关系,完成不同视角下的目标点云配准。通过多视角虚拟采样生成仿真数据集。之后实物验证该方法的简洁可靠性。其次阐明了神经网络提取点云特征可能存在的问题。本文采用池化操作解决点云排列的无序性问题。针对视角旋转会影响点网络在物体单视角局部点云识别任务中的识别率,本文设计了方向矫正模块,该模块可以在识别任务进行之前矫正点云的旋转角,进而提高点云识别率。之后进行了空间变换网络预测物体位姿的研究,并通过实验证明了迭代策略可以提高物体位姿估计准确率。然后针对仅仅利用物体的几何特征以及迭代策略并不能很好估计物体位姿的问题,本文采用了纹理特征与几何特征融合的方法来提高物体位姿估计的准确率。本文使用金字塔场景解析网络提取图像特征,依据彩色图像与深度图像的映射关系,结合点网络结构,从不同特征维度上融合物体的纹理特征与几何特征,最后通过实验发现,基于置信度的点特征物体位姿方法可以大大提高位姿估计的准确度。最后对本文的工作内容进行了总结,并对今后的研究工作做出规划。
其他文献
人教版必修二《赤壁赋》和选修教材《湘夫人》都有"骤得"一词,在学习中,我对以上两处的注释有所疑惑,提出了一些粗浅看法。一、《赤壁赋》中"骤得"苏轼《赤壁赋》中"知不可乎骤得,托遗响于悲风"中的"骤得"一词,注解为"屡次得到"。但是联系前后文来看,却并不通顺,前面的句子是"挟飞仙以遨游,抱明月而长终",意思就是想要像神仙那样永世长存,但显然这种愿望是不可能成为现实的,故而接着说"知不可乎骤得,
期刊
作业起着巩固学生所学,深化学生理解的重要作用.在当前注重培养学生核心素养的背景下,高中化学作业的设计应注重呈现多元化,满足各水平学生学习需求的同时,顺利的完成核心素养培养目标.结合自身教学实践,探讨如何从培养学生核心素养角度进行作业的多样化设计,以供参考.
目前,特殊儿童随班就读主要存在学校和教师对随班就读认识不足、随班就读师资力量薄弱、管理不到位和资金投入相对不足等问题。为了提高随班就读的教育质量,从学校、教师、家长到社会都要转变理念,提高认识;加强随班就读师资力量;严格落实个别化教育计划;借助外力,形成教育合力;利用活动挖掘潜能,增强信心。只有这样,才能切实改善随班就读特殊儿童的教育问题,使他们都能接受良好教育,提高教育质量。
文章以“二次函数”教学为例,提出初中数学建模素养的培养路径,即培养学生的观察能力,用数学的眼光审视世界;培养学生的表达能力,用数学的语言表达数学问题;培养学生的思考能力,用数学的思维去分析解决问题;培养学生的应用能力,尝试在现实背景中解决实际问题.
融合教育的理念是让有特殊需要的幼儿和同龄幼儿一起在常规幼儿园接受教育,使他们适应幼儿园生活,发挥潜能,身心均能得到全面的发展。在幼儿教育过程中,我们会遇到各种特殊的幼儿,他们在生理、心理或行为上异于正常的幼儿,给我们的教学带来一定困难。我们要采用不同的融合教育手段关爱特殊幼儿,培植互相关怀的园所文化,促进家庭与幼儿园合作,共同为不同能力的幼儿提供优质教育。使他们的身心得到全面发展。
期刊
“双减”背景下,教师对学生作业减量增效可谓刻不容缓。新课程、新教材和新高考背景下的课堂教学已发生重大变化,基于单元视角的大单元教学正当其时。由此,当前中学教育就产生了一个结构性矛盾:学生的作业仍然是基于过去零散教学而编写的,根本无法适应新的教学形式。要解决这一问题,需要从单元视角出发,建构起高质量的作业体系,在减轻学生作业负担的同时,切实提升育人品质。
采用CFD方法对超声微反应器内的Taylor气液两相流的传质过程进行了模拟。针对传质过程中主要的介尺度结构,包括气泡表面波、空化声流、液相内的局部浓度,分析了其空间分布和时间演化规律。模拟结果有效捕捉了实验难以观测的液膜区域,并将液膜厚度与气泡表面波振动进行了关联,阐释了气液界面附近的空化声流对传质过程的强化作用。根据超声微反应器内Taylor流的传质特点,分别研究了不同流动和超声条件对液弹内和液
教学设计既要理念支撑,又要策略落实.本文以“二次函数图象与性质”为例,探讨了“点全、线联、面融式”教学设计理念下的课堂教学设计和教学策略的思考.
机械臂抓取是服务机器人与环境进行交互的主要途径,其成功的前提是对目标物体抓取位置的准确估计。非结构环境中的物体具有种类繁多、形状各异及缺少三维模型等特性,对抓取位置检测算法的性能提出了很高的要求。针对服务机器人在非结构化环境中的实际需求,本文研究了基于深度学习的未知物体抓取位置检测算法,并搭建机器人抓取系统,具有很强的理论和现实意义。在目标检测问题研究中,基于深度学习的方法通常具有更高的准确率。因
近年来随着人工智能和深度学习技术的不断发展,各类室外的智能类产品变得司空见惯,例如在无人驾驶、无人机、智慧城市交通等多个方面都有着广阔的发展前景。其中基于深度学习的语义分割技术更是在视觉感知方面有着举足轻重的地位,它可以从像素级别上对物体进行识别分类,还原识别物体形状,非常适合那些不使用框图标识的物体,例如街道、人行道、房屋、路灯杆等物体。同时与传统方法对比它还具有精度高,泛化性好等特点。但是高精