基于注意力和深度网络的三维点云形状分类和语义分割方法研究

来源 :东南大学 | 被引量 : 0次 | 上传用户:sqs1989
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
三维点云形状分类和语义分割等三维点云处理技术在计算机视觉领域有着重要的研究价值和广泛的应用前景。基于深度学习的三维点云分类分割网络是当前三维点云处理的热门研究方向之一。由于无序的点云数据具有非结构化、数据量大、存在噪声干扰等特点,使其特征提取较为困难,因而提高三维点云深度网络的性能仍然存在挑战。注意力机制作为一种特征筛选手段,广泛应用于自然语言处理、二维图像处理等领域中,能够极大地提升模型性能,因而设计基于注意力机制的模块成为近年来模型构建时常用的手段。本文在对注意力机制和深度网络深入学习分析的基础上,针对基于注意力和深度网络的三维点云形状分类和语义分割方法进行研究。本文的主要工作内容和创新点如下:1)为提高点云形状分类网络抵抗噪声干扰的鲁棒性,设计了一个可以灵活迁移至不同点云网络架构的独立模块,即竞争性注意力融合模块。该模块通过竞争性融合2种不同的注意力权值,提升点云网络中间特征的表征能力。该模块包含2个独立的子模块,以获取不同的注意力权值:其一,多层级特征挤压激励子模块,源自二维图像处理中的注意力机制,用于关注不同层级中间特征的全局影响力;其二,特征内在关联自注意力子模块,引入自然语言处理中的自注意力机制,旨在度量中间特征的内在相似度。2个子模块从不同的角度诠释各个特征通道的重要性,并通过竞争性融合机制实现网络对特征通道的筛选。最后描述了嵌入竞争性注意力融合模块的点云分类网络的结构。在Model Net40数据集上进行了形状分类实验、鲁棒性实验、对比试验和消融实验,结果显示竞争性注意力融合模块可以嵌入经典网络Point Net++和先进网络Point ASNL,并在取得更高分类精度的同时,显著提升网络面对多种不同噪声时的鲁棒性,与传统抵抗噪声方法相比具有更好的抗噪性能和更小的时间复杂度。2)为提高点云语义分割网络的特征提取能力,设计了一个点云Transformer单元。该单元基于机器翻译领域Transformer模型中使用的注意力机制,旨在学习采样点坐标空间和特征空间之间的关联,实现不同特征子空间注意力特征的融合。将该点云Transformer单元嵌入语义分割网络的集合抽象层与特征传播层中,提取层内全局和局部特征,并与层内其他特征进行融合,增强特征上下文语义信息之间的联系,提高特征表征能力,进而提升点云语义分割网络性能。最后,构建集成了点云Transformer单元和竞争性注意力融合模块的点云语义分割网络。在Shape Net Part数据集上进行零部件语义分割实验,在S3DIS数据集上进行大规模室内场景语义分割实验,结果表明融合点云Transfomer单元和竞争性注意力融合模块的点云语义分割网络,在不同语义分割任务中均取得了良好的效果,在多项语义目标上的分割性能超过了基准网络Point Net++。并通过两组消融实验证明了所提出的方法能够提高点云网络特征提取能力,提升网络对多项语义目标的分割精度。最后,通过可视化结果直观地展示了所提出的方法在语义分割任务上的优越性。
其他文献
广泛的阅读、开阔视野是提升小学生语文能力的重要组成部分。在平时的语文教学中,我们应该巧妙地将课本知识与课外积累紧密"链接",让小学生在课堂知识学习的同时与古诗词、历史典故、社会生活等亲密接触,感受到语文学科的综合性、开放性,让语文教学尽显活力。如何结合课堂教学,引导学生触类旁通,感受学习语文的"无限大空间"呢?
期刊
背景与目的:21世纪以来,随着全球经济的持续发展以及人们对健康要求的不断提高,环境污染问题日渐凸显,环境污染与人群健康的关系受到公众和政府的普遍关注。我国目前也积累了大量的环境卫生的监测数据,丰富的数据资源为环境健康风险评估和预测提供了重要的信息基础,但是目前这类数据并没有得到充分的挖掘和分析。研究者或卫生工作者关注的均是选定参考水平的监测指标的超标情况分析,从数据的分布角度,关注其极端值更加具有
学位
阿尔茨海默病(Alzheimer’s Disease,AD)是一种进行性的神经退行性疾病,也是最常见的痴呆类型之一,其特征是渐进性记忆丧失、语言能力下降和其他认知障碍。研究表明,AD有多种致病因素,包括淀粉样斑块(Aβ)聚集、tau蛋白过度磷酸化、胆碱能不足、氧化应激、神经炎症、Ca2+诱导的神经毒性、基因突变、脑损伤等。由于AD病因的多样性,多靶点定向配体策略(MTDLs)逐渐被认为是一种很有前
前苏联教育家苏霍姆林斯基提出:促进学生的脑力劳动最有效的手段,就是扩大阅读范围。这里提到的"语文"是语文课本,而"大语文"就是语文这个博大的世界,美丽的文字精神之旅。我们的语文教育越来越趋向工业化思维。符号化、技术化、标准化的教学和考核,泯灭了语文这个学科中特有的千变万化的魅力和它的丰富性。进入现代社会,科技进步了,可是居然越来越不会学自己的母语了。更多的人会觉得学语文就是学语文课本。从许多
期刊
学位
学位
学位
学位
学位