基于单幅花朵图片的三维重建技术研究

来源 :西北农林科技大学 | 被引量 : 0次 | 上传用户:kcl770514
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着虚拟技术的发展,人们对数字化、可视化提出了更高的要求,三维花朵模型在场景设计与计算机游戏等方面都有着非常重要的应用。花朵因为其复杂多变的结构面临更多的挑战。传统的基于单幅图像的三维重建技术,尽管输入数据仅需采集物体的一张图片,但无法处理被遮挡视角的信息缺失等问题。而基于多幅图像的物体三维重建需要建模人员提供多张不同视角的图片,通过运动恢复法、立体视觉法等方法综合多张图片信息重建出物体的三维模型。伴随着近年来深度学习的发展,从单一视角图片推断其余视角图片成为可能。本文将利用深度学习方法弥补缺失视角的信息,方便快捷的实现单幅图像的花朵重建。论文主要研究内容和结论如下:(1)构建用于深度学习的花朵三维模型数据集针对现有三维重建研究中缺少花朵三维模型数据集的问题,本研究使用3ds Max工具对网络上收集的三维场景模型中的花朵进行分割,共提取出4106个单独的花朵模型。随后将每个花朵模型进行预处理后使用Panda3D对其进行渲染,获得不同视角下各个花朵模型的真实的RGB图以及真实的深度图各24张,构建了可以用于深度神经网络学习的花朵数据集。(2)基于单幅花朵图像预测生成花朵多视角RGBD图像针对已有基于单幅图片进行花朵三维重建的算法中的单视角图片自遮挡和缺失深度信息的问题,本文实现了一种基于卷积神经网络预测生成花朵不同视角的图像与不同视角的深度信息的算法。输入真实的单视角RGB花朵图像与目标视角信息,通过编码器-解码器网络结构生成花朵的多个不同视角下的RGB图与深度图。实验结果表明,对于结构简单,对称性强的花朵,该方法生成的深度图与真实深度图像之间的平均互信息(Mutual Information)为0.6743,基本推断出了被遮挡的部分,较好的反映了花朵的结构与轮廓。(3)基于生成多视角RGBD图像后的网格三维模型重建针对(2)中生成的简单花型花朵多视角RGBD图像相机位姿不统一的问题,本文研究基于点云的ICP配准方法,将不同角度的点云进行配准,得到了整体的点云信息。得到配准后的整体点云后,使用贪心投影三角化算法生成网格。实验结果表明,本文算法重建出的三维网格模型可以较好地保持简单花朵模型的全局特征,重建精度较高,与真实花朵模型点云之间的平均倒角距离(Chamfer distance)为0.2703,能够忠实地反映目标花朵结构。
其他文献
作为椭圆曲线密码体制(ECC)的推广,超椭圆曲线密码体制(HECC)的代数结构更加复杂,安全性更高,应用前景更加广阔。然而,HECC仍存在一些瓶颈问题亟待解决,其中尤为突出的问题是
车辆检测在辅助驾驶、交通管理、遥感图像等方面都有着重要应用,随着近些年车辆的不断增多,和人们对于车辆检测技术需求的不断提高,车辆检测已经成为目标检测领域的重要研究
神经元信息传递机制的研究,是脑科学领域内的重要研究课题之一,是人类对大脑的认知过程的重要环节,并且对于治疗脑神经疾病也具有极其重要的意义。近年来,关于神经信号传递机制的相关研究引起了相关领域研究学者的广泛关注。神经信号的传递机制研究尤以研究神经元的电信号为主,因此神经电信号的采集成为了重点研究问题之一,针对这一问题,本文提出并研发一套基于微电极阵列(Microelectrode Array,MEA
目前在工业生产线上,工业机器人对固定位置目标物体的抓取及搬运控制较为成熟,但是实际工业生产线上的目标物体的位置和姿态并不总是固定或规则的,当前对于这种位置和姿态不
近年来,随着人工智能技术的发展与成熟,其应用越来越广泛,自动驾驶则近几年国内外研究团队对人工智能技术的一个重点研究方向。车辆检测是自动驾驶需要完成的首要任务,使用多
多进制相位调制是无线通信中的一种主要调制方式,具有抗干扰性强、频谱利用率高、电路实现简单等优点,被广泛应用于卫星通信、民用移动通信中。其子类信号二进制相移键控信号、四进制相移键控信号和八进制相移键控信号的识别一直是调制识别领域中的热点问题。传统调制识别算法方法需要强大的专业知识和工程技巧来设计特征提取器,难以实现信号特征的自动提取。因此,本文将卷积神经网络应用到调制信号识别领域中,对多进制相位调制
工业机器人技术的发展日新月异,随着市场对机器人需求的加大,同时也让我国发展为世界最大的工业机器人应用市场,并为中国制造业的转型发展提供了巨大推动力,极大提升了该行业
“云计算”的概念由谷歌最早于2006年提出后,该技术当前在全球蓬勃发展,由最初简单的“数据共享”到如今的“应用共享”,改变了人们的生活。云计算技术同样应用在了政府的政
涡扇发动机是一种高度精密的热力机械。这种机械系统结构复杂,经常在极端环境下工作,极易发生故障造成不可挽回的损失。为了保障系统安全可靠运行,降低事故发生概率,预测它的
藏文现代印刷物是藏文化资源的重要组成部分,藏文现代印刷物的版面中文本行包含了许多重要的信息,有效的检测出藏文版面中的文本行区域是实现藏文化资源数字化保护的重要一步