基于二维图像的三维模型深度学习分类算法研究

来源 :厦门大学 | 被引量 : 0次 | 上传用户:shuang9988
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
三维模型分类是三维研究领域的一个重要研究课题,本课题的研究依托于国家自然科学基金“3D形变体的保测变换与稀疏流形嵌入识别方法研究”。本文以三维模型为目标,重点探究不同类别三维模型的分类算法,我们改进了基于全景图的DeepPano[36]和PANORAMA-NN[37]以及基于多视角二维渲染图的MVCNN[39]深度学习算法,在基准数据集——ModelNet10和ModelNet40上均提高了分类准确率,具体工作有:·基于全景图的三维模型分类。全景图能够很大程度地表现整个模型的外围信息,因此利用全景特征进行分类是不可缺少的实验环节。本文在DeepPano和PANORAMA-NN算法基础上,通过改变输入方式和整体网络结构,提升了算法的分类准确率。我们先通过全景图生成算法,得到每个模型基于X轴、Y轴、Z轴和XYZ轴结合的全景图,然后分别送入修改过的网络,最终发现XYZ轴拼接的全景图效果最好,所以以此方式用于分类研究。·三维模型点云上采样与关键点检测。关键点的选择对三维模型分类准确率起着决定性因素,它能够反映模型的关键信息。本文先将原始模型转化成一定大小的体素形式,然后再转回网格,以实现点云的上采样,最后结合三角面片和曲率两个因素,生成了模型的关键点。·基于Spin Image的三维模型分类。Spin Image是局部特征描述子,它依据点和法向量获得,因此关键点的选择与Spin Image的生成效果息息相关。本文运用了数据增强技术,即对每个模型任意旋转一定角度。然后通过生成算法,根据每个模型的N个关键点,得到对应的N张具有旋转不变性的Spin Image,最后将这N个特征描述子当作N个视角,在MVCNN的基础框架上进行训练,并分析了不同参数组合下的结果,以获得最佳分类准确率。·基于多特征融合的三维模型分类。本文采用多种特征结合的方式来实现分类任务。我们将每个模型的深度图、灰度图和上述的全景图、Spin Image以不同的组合形式作为网络的输入,获得了每种情况下的分类效果,然后通过多特征融合网络结构,并经过详细分析得出了本文最好的结果。根据实验可知,此融合方法使得三维模型的分类准确率得到了很大提升。本文主要采用TensorFlow框架,Python、Matlab、C++语言及OpenGL实现上述研究中的算法,并进行了大量实验分析以验证算法的有效性。训练与测试样本来自普林斯顿大学提供的基准数据集——ModelNet10和ModelNet40,其中ModelNet10经过了配准处理,而ModelNet40未经过处理。我们将三维模型转换成了四种输入形式:全景图、Spin Image、灰度图和深度图。全景图表征三维模型的外围信息;Spin Image体现内部信息;灰度图展现亮度信息;深度图表示深度信息。这样就可让网络获得许多不同类型的信息,从而大大提高分类准确率。实验结果表明,基于全景图的三维模型分类算法在ModelNet10上的准确率为94.71%,在ModelNet40上为91.37%,均高于DeepPano和PANORAMA-NN算法;基于Spin Image的三维模型分类算法在ModelNet10上的准确率可达90.64%,在ModelNet40上可达86.63%;基于多特征融合的三维模型分类算法在ModelNet10上的准确率最高为95.59%,在ModelNet40上最高为92.14%,均高于MVCNN算法,且为本文最好的分类效果。
其他文献
<正>一个时代已经结束,一个时代即将开启。在第三方移动支付领域,支付宝和财付通占据了半壁江山,两大巨头相互角力,不断扩张势力版图。仅在今年,先是微信支付宝炒热了"无现金
预埋钢管能量桩是一种新型桩埋管形式的地源热泵技术;然而针对其特殊埋管形式下的承载特性的研究相对较少。针对预埋钢管单U型埋管能量桩的承载特性开展模型试验和数值模拟研
最近,常跟几个教师朋友坐下来聊天,聊得最多的就是工作上的辛苦劳累。有对学校领导分配工作不匀的愤愤不平,有对学生不能听从自己劝导的抱怨指责,有对自己工作上百思仍有一疏的感慨遗憾,更有为迎接检查而加班加点的叫苦连天,听起来怎一个“累”字了得?聊到最后,纷纷表示要“偷得浮生半日闲”,可刚一离开,就又各自忙碌依旧、劳累如昔。细细想来,我们每天要面对很多莫名其妙的焦躁和烦恼,不快乐的情绪随时会塞满脸上的每一
<正>一、问题的提出我国加入WTO后,日趋发达的国际贸易竞争加之不断下降的关税水平、逐渐减少的非关税壁垒,平行进口引起的纠纷愈演愈烈,尤其表现在商标领域。与此同时,平行
昆虫杆状病毒表达载体系统(Baculovirus expression vector system,BEVS)已成功应用于多种蛋白的表达,并为疫苗开发提供了充足的原材料。相比其他表达系统,BEVS具有许多优势:
<正> 缘情写景,指作者带着自己的主观感情去观察和描写景物,客观景物的描写完全取决于作者主观的心情,作者描写的客观景物无不染上其主观感情的色彩。杜甫的《春望》中有这样
期刊
近日,学校对课间操进行了改革,将自创的12式太极拳和校园集体舞《青春舞曲》代替原有的健美操,促使学生在强健体魄的同时,感受中国武术和艺术之美,尤其是校园集体舞学习和演练的全面铺开,激活了广大师生,让每一名同学走过了“抗拒——害羞——尝试——接受——大方——娴熟”的演练过程,陶冶了师生情操,提升了他们的审美情趣。在校园集体舞历时两年的推广过程中,学生在思想认识、人际交往、青春期心理、言谈举止、精神面
那个夏天,是我一生的眷恋2002年暑假,我在家带带孩子,变着花样改善生活,偶尔翻翻书,兴致来了七拼八凑些文字,也玩玩牌,过着自在逍遥的日子。
这个故事,写的是爱——小男生和小女生之间的。这是一个关于爱的故事。虽然主人公男生本,还不到10岁,他还被哥哥称作“小矮人”呢。本。连自己都不知道是怎么回事,就中招了。他感
煤矿内部漏风容易造成井下用风地点的有效风量减少,增加风量调节的困难,使矿井通风系统稳定性和可靠性受到一定程度的影响,并可能把采空区冒落带的有害气体带入工作区,引起有