基于单目图像序列光流的三维重建关键技术研究

来源 :南京航空航天大学 | 被引量 : 5次 | 上传用户:A2335767
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
单目图像序列光流不仅包含了物体或场景的运动参数,还携带了丰富的三维结构信息,因此由单目图像序列光流重建运动物体或场景的三维运动与结构是计算机视觉研究领域的一个热点问题,研究成果被广泛应用于机器人视觉、航空航天、军事、医学研究等领域。本论文主要针对基于单目图像序列光流的三维运动估计与结构重建理论与技术进行研究,以提高计算效率、改善重建算法鲁棒性、拓宽重建算法适用范围等为研究目标。从改进变分光流计算模型、降低邻域误差影响、改善亮度突变情况下像素点漂移现象、减少特征直线光流重建模型的约束条件、建立点线光流对应关系等方面入手,提出基于单目图像序列光流的三维重建新思路与新方法。主要研究工作与成果如下:1).从变分光流计算基本理论出发,通过添加局部约束和图像梯度守恒改进变分光流能量函数的数据项,设计基于图像梯度的各向异性扩散平滑项改变运动物体或场景边缘区域的光流扩散方式;针对光流计算的时效性问题,采用细胞神经网络对变分光流估计模型进行优化,提出基于自适应细胞神经网络的各向异性扩散光流算法。实验表明该模型能够较好地应对图像中包含的噪声,具有计算精度高、时间消耗少等优点。2).为了减小局部邻域内光流估计误差对三维重建结果的影响,预防“边缘扩张”现象的产生,根据图像像素点光流与三维运动的对应关系构造基于稠密像素点光流的三维运动估计与结构重建线性模型,并通过范数定理对该模型的鲁棒性进行了分析证明。实验证明,该模型能够减少边缘区域光流扩散对重建结果的影响,保留物体或场景的边缘信息。3).为避免光流计算对重建结果带来的误差影响,通过光流计算亮度守恒假设和像素点光流与三维运动的对应关系推导出基于图像亮度的三维运动守恒假设,构造基于变分光流的三维运动估计与结构重建模型,为了应对图像序列中包含的大位移运动,在运动估计过程中采用图像金字塔分层的方法。针对纯旋转运动物体的三维重建问题,利用三维点的空间位移代替其运动轨迹,提出了纯旋转运动情况下的三维运动估计与结构重建模型。实验表明该模型能够较好地应对图像序列中光照变化和大位移运动等情况,部分解决了运动遮挡情况下重建算法的鲁棒性问题。4).对基于直线光流的三维重建技术进行研究,阐述了直线光流的概念及计算方法,根据直线的表示方式和3D直线与2D直线的对应关系构建了基于直线光流的三维运动估计线性模型,由三维运动估计结果能够重建直线特征的三维结构。实验证明,该模型最少只需两条直线光流就可以分步计算出运动物体或场景的三维旋转和平移参数。5).针对复杂场景下直线特征的跟踪、匹配问题,首先推导点、线光流基本约束方程,然后确定直线光流与直线上点光流的对应关系,提出基于点光流的图像序列运动直线筛选、跟踪和匹配方法;根据运动直线跟踪结果计算直线光流,由直线光流估计运动物体或场景的三维运动参数,并重建其表面稠密结构和稀疏直线特征,建立基于点、线光流的三维重建模型。实验表明该方法能够准确筛选出图像序列中的运动直线,并对连续两帧图像中的运动直线进行跟踪、匹配;重建结果既能够描述物体或场景的表面细节信息,又保留了其表面直线拓扑结构。
其他文献
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
会议
评价理论是功能语言学对人际意义研究的新发展。通过对最高人民法院提审刘涌案后所作的刑事判决书的判决理由和判决结果部分进行态度研究,从法学角度阐述了最高人民法院对刘
2017年2月8日,由向华电子科技有限公司成功招商的全球最大的被动组件制造商、知名电子企业台湾奇力新股份有限公司入驻沅陵,两家公司成功签约,项目总投资6.5亿元,奇力新公司计划投
目的调查上海市学龄儿童青少年体育锻炼现状,为学校体育卫生工作提供依据。方法对上海市6个区参加2014年上海市学生体质健康与调研的9~18岁中小学生共12 646名进行体育锻炼行
世界各地的科学家们正在利用新的科技,以更有效的方法来收集各种蝙蝠的叫声,建立一个储存中心,用来辨认识别这种在夜间飞行的哺乳动物的语言.这样可以帮助研究人员对这种相当
通过6个复合箍筋约束高强混凝土短柱在高轴压比下的低周往复水平加载试验,研究了其破坏过程、破坏形态、抗剪性能以及各个受力阶段箍筋应力的变化,并通过与普通强度箍筋混凝
结合电视和电影的特点,将影像和文学联系起来,从声画、构思、抒情方面论述了电视散文的文学特性。
步态是指人行走的方式和风格。由于生理特点和行走习惯的差异,不同的人有不同的步态。步态识别技术在智能假肢、临床医学、康复治疗、运动分析等众多领域得到很好的应用,成为