基于深度相机的物体模型重建方法研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:aaajane
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着消费级硬件的性能提高、高质量的深度传感器被植入移动设备和人工智能技术的迅速发展,3D人脸识别、人脸模型重建及AR/VR等人工智能产品逐渐在移动设备上得到应用,促进了三维重建技术的普及。针对于轻量级的特定场景模型(如物体、人体、人脸)重建算法的研究是当前3D视觉领域的研究热点,在不依赖高配置硬件前提下实现对物体建模可促进物流、机器人抓取及互娱等领域的发展,商业价值大,因此本文基于深度相机的物体模型重建方法研究具有十分重要的意义。本课题以深度相机Real Sense D435和树莓派4B为硬件平台,基于Linux系统设计并搭建了针对物体建模的重建算法框架。以静态物体为重建对象,以实现快速、高效的模型重建为研究目标,提出了一种基于稀疏帧融合的物体稠密模型重建方案,在不依赖于高配置显卡加速且保证重建效率的前提下,快速构建出物体的稠密模型。文中研究了基于深度相机和人工棋盘格特征相结合的方法,获取相机的6D运动状态信息;通过分析相机的运动状态,确定参考坐标系及参考点;引入筛选帧环节,剔除位姿不正确的数据,筛选出有效的待融合帧。以提高重建效率为目标,在进行融合与重建前,使用深度学习中Yolo V2算法对待融合帧进行目标检测,得到物体在图像中的位置信息;结合深度图,提取有效的待融合的点云信息。以提高显存利用率为目标,设计了点云融合与重建模块。采用基于Voxel Hash结构的点云融合,融合方式使用截断距离方程(TSDF);采用DDA算法实现对哈希块的创建与更新,并通过Boundingbox信息约束Volume的尺寸,减少显存的浪费;采用移动立方体法对融合后的网格化模型进行插值运算,生成具有拓扑结构的三角面片模型。以提高生成模型的精度和质量为目标,设计了网格模型精细化处理模块,主要包括背景分离、平滑、泊松重构等,对生成的网格模型做进一步的精细处理。本文的最后将所设计的算法模块整合成为一个针对物体的模型重建系统,并通过多组数据测试验证了整套方案的可行性和模型重建精度。
其他文献
经颅磁刺激(Transcranial Magnetic Stimulation,TMS)是一种针对脑相关疾病的物理治疗方法。该技术由于治疗效果显著,具有无创、选择性刺激等优点,近年来被越来越广泛地应用
随着移动互联网的飞速发展,功能多样的互联网在线应用丰富了人们的生活,深刻改变了人类的生活方式,促进了社会的发展。然而,移动互联网的广泛应用也带来越来越多威胁用户信息
本文主要研究特征p>2的代数闭域上无限维Cartan型李超代数H和SHO的阶化模.利用伸张和混合积实现的方法,确定了无限维模李超代数H和SHO的阶化模.进而,讨论了无限维模李超代数H
互联网时代的今天,人们每天通过各式各样的网络应用产生海量的多媒体数据,其中包含语音、短视频、图片以及文字等。随之而来的是人们对于多样化检索的需求,比如图文检索、音频——视频检索等。为了满足人们的实际需求,提供更好的检索服务,广大研究者们致力于跨模态检索领域相关理论、方法以及实践的研究。由此可见,跨模态检索方法具有广泛的应用场景和研究意义。如何挖掘这些多模态数据中的有效信息,是多模态数据研究领域的重
光晶格与冷原子的结合给冷原子领域提供了丰富的量子现象。与固体晶格相比光晶格系统纯净,调节激光束的波长就能实现对晶格常数的控制;相应的,控制光强可以改变势阱深度。而
传统股权投资方式存在着融资成本高、额度设限等瓶颈,加之信息的不对称,因此传统股权投资的效率不高,无法满足中小型企业的融资需求。新兴股权众筹融资模式具有门槛低、成本
随着自动驾驶汽车的安全问题日趋严峻,车路协同感知系统受到了学术界的广泛关注。行人重识别技术作为车路协同感知系统的核心技术之一也因此备受关注。现有基于分布式视觉的
中国是生态文明制度创新的最大实验室。继排污权交易制度之后推出的排污权担保贷款制度,既是排污权交易制度的拓展,更是非典型担保和绿色金融制度的创新举措。实证考察发现,
紫外单光子探测技术近年来得到了迅猛的发展,得益于对微弱光子信号的高灵敏传感检测,紫外单光子探测在漏电排查、激光雷达、军事侦察、视觉成像领域有着非常广阔的前景。图像
对于X图性能的研究,通常是假定过程标准差已知,或者是在建立控制图之前,标准差能够被准确的估计出来.然而,在实际问题当中,这种假定并不总是能够成立.研究发现,X型图在过程标