基于深度学习的单视图物体三维重建

来源 :河北工业大学 | 被引量 : 0次 | 上传用户:girl_wang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于深度学习的单视图物体形状重建是三维重建领域的新兴研究方向,通过深度学习技术从图像中学习形状先验,然后根据先验从单幅图像推断出目标物体的三维形状。隐式表示的形状具有占用内存小,可表示任意拓扑结构的特点,本文研究隐式表示的形状单视图三维重建,主要工作内容如下:(1)在使用3D监督数据重建时,当前单视图重建方法通常仅利用简单的图像编码器提取特征,难以捕捉到准确细致的三维结构,针对其不足之处,提出基于注意力机制的隐式表示形状重建模型。利用注意力机制改进图像编码器,在编码器的不同特征提取阶段添加注意力模块,捕捉特征图中不同层次的形状结构特征;同时引入位置编码进一步改进解码器,位置编码首先将3D点映射为高维特征,然后再输入到解码器。通过模块有效性实验,注意力机制的引入使图像编码器更有效地提取重要的形状信息,进而更准确地重建出目标形状,配合位置编码的使用进一步提升了解码器对复杂形状信号的拟合能力;与当今具有代表性的基于3D监督单视图重建算法对比,在定性和定量方面均取得更好的结果。(2)获取3D监督数据具有较高成本,在不易获取3D监督数据时,可充分利用2D监督数据。为了在2D监督下能重建更多的细节,当前算法通常将位置编码引入到网络中,但容易导致网络产生过拟合的不平滑表面。针对这个问题,提出一个基于残差学习的符号距离函数重建模型。首先设计了像素对齐的特征提取网络提取稀疏特征,并利用图像编码器管线输出全局特征;然后提出基于Hypernetwork的两分支符号距离测网络,SDF预测网络以稀疏特征和全局特征为输入,通过两个分支网络分别预测符号距离函数的低频部分和高频残差,这两部分通过权重因子构成最终的符号距离函数。通过对符号距离预测网络的频谱分析证实两个浅头能够分别预测符号距离函数的低频和高频分量;与不同平滑表面重建方案对比,提出方法可有效重建出平滑表面,同时保留足够细节;与其他先进的基于2D监督单视图重建方法进行定性和定量比较,表明所提算法的优越性。
其他文献
自润滑关节轴承因其结构简单、免维护、高可靠性等优点,在航天飞行器中逐步取代了传统油/脂润滑轴承。目前我国应用较多的为衬垫自润滑关节轴承,但衬垫自润滑材料易受到原子氧侵蚀、紫外辐照而快速失效,新近发展起来的涂层型自润滑关节轴承,以其优秀的性能在空间运动部件中展现出良好的前景,但其在空间苛刻环境下的寿命演变规律尚不明确。为此,本文开展了空间苛刻环境因素对含氢类金刚石涂层标准样品及自润滑轴承样件的寿命影
学位
在传统化石能源日益枯竭的当下,充分利用清洁可再生能源已成为当务之急。地热能作为一种重要的清洁可再生能源应该受到更为广泛的关注。而地源热泵技术作为开发利用地热能的热门技术,利用该技术可以加快我国开发利用地热资源的进程。地埋管换热器作为地源热泵系统中与外部土壤进行换热的主要部件,研究什么因素可以强化地埋管换热器的传热特性对于更好地利用地源热泵技术具有重大的意义。本文利用数值计算的方法对土壤源热泵地埋管
学位
钙钛矿因其优异的光电特性而被开发用于光吸收层制备太阳能电池。近十年来,钙钛矿太阳能电池(PSCs)认证效率发展迅猛,从3.8%发展到最近的25.7%。然而目前基于溶液法制备的PSCs内部存在不可避免的缺陷,主要存在于钙钛矿内部(晶界和表面)和各个功能层之间的界面处。这些浅能级和深能级缺陷会成为载流子的捕获和复合中心,影响载流子的传输机制和动力学。同时这些缺陷也会成为水分和氧气的侵蚀通道,加速钙钛矿
学位
在凝聚态物理的量子材料研究领域中,拓扑半金属这种新型量子的材料逐渐成为了研究工作者的重点关注对象,它与拓扑绝缘体一样,拓扑能带结构特殊且能带中存在非平庸的带交叉,因此,会具有许多优秀的性质,比如拓扑绝缘体体内绝缘,而表面存在传导电子,这使得拓扑半金属有望在电子器件领域得到广泛应用。本论文利用第一性原理计算方法进行理论计算,我们研究了type-Ⅱ节线的Sn2Co S合金化合物费米能级附近的电子结构,
学位
现行服役陶瓷/金属复合装甲的防护能力虽然较传统的金属装甲等有了大幅的提升,然而作为迎弹面的陶瓷面板脆性较大,导致其抗多发弹性能难以达到防护要求。传统的陶瓷增韧/增强手段成本高且工艺复杂,而在陶瓷面板上制备多层或梯度复合陶瓷涂层可得到多种异质界面,提高动态冲击下的能量吸收和反射,同时减少弹体撞击中陶瓷贯穿性裂纹的出现。该方法不仅工艺简单、成本低,而且能够有效提升陶瓷的抗冲击性能。本文以钛粉和石墨作为
学位
平流层飞艇作为临近空间长期浮空飞行器已经成为航空航天探索的新热点。飞艇蒙皮材料易受临近空间多种环境作用而发生性能退化。本文以典型的Vectran和Kevlar纤维作为蒙皮研究材料,利用地面模拟加速方法开展地面模拟试验研究,包括单一环境因素和综合环境因素。分析了临近空间环境对飞艇蒙皮材料力学性能的影响规律。采用SEM、XPS等对纤维的微观形貌、微观结构进行表征,并利用蠕变方程预测了纤维的蠕变寿命。研
学位
传统太阳能荧光集光器(luminescent solar concentrator,LSC)的荧光材料以有机染料以及碳点为主,具有稳定性差、斯托克斯位移小、自吸收大、成本高以及合成方法复杂等特点,导致有机染料制作的荧光太阳能集光器的效果并不让人满意。近些年来,以钙钛矿量子点和铜碘配合物为代表的金属卤化物材料由于具有发射波长可调性、高量子发射效率、合成方法简单、成本低廉、斯托克斯位移大等明显优势,成
学位
随着市场经济高速发展及新兴品牌的冲击,老字号品牌自身的弱点逐一显现,品牌活化能够将战略发展方向、品牌定位、品牌设计与应用做到有机地结合,为老字号品牌复兴提供强有力的理论支撑。随着新媒体时代的到来,动态图形的出现及应用为学科研究提供了新的方向,是老字号品牌活化中不可忽视的应用方式。经过研究得出品牌故事、品牌精髓、品牌形象、品牌社群四大方法能够有效促进老字号品牌发展,且动态图形中的时空、动态、图形与声
学位
GaN基紫外光电探测器广泛应用于空气净化、火灾监测、通信及成像等众多领域,因此大量研究致力于制备高效的紫外光电探测器。迄今为止,研究者们已经设计并制备了多种用于探测紫外光的光电探测器结构。其中,基于金属-半导体-金属(Metal-Semiconductor-Metal,MSM)结构的GaN基紫外光电探测器也逐步实现商业化。然而对于GaN基紫外光电探测器,载流子输运效率低是限制探测器光电流和响应度进
学位
肺结核作为常见的传染性疾病,其复杂的病症和较高的筛查成本是肺结核检测领域的难题。通过CT影像技术能够进行初步检查,然而繁重的CT影像资料会造成医师误诊或降低诊断效率,况且仅依靠医师的主观判断和经验性解读不利于肺结核的检测。因此,本文重点研究基于CNN(Convolutional Neural Network)与CT影像的肺结核检测方法,提出了一套肺结核检测模型,包括数据集、胸廓分割网络和病灶检测网
学位