基于FPGA的双目视觉系统设计与实现

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:n4fc561v4
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
立体视觉系统能获取真实场景的深度信息,对特定场景实现三维重建,进而完成视觉测绘、视觉导航、视觉避障和路径规划等功能,广泛应用于诸如无人机、机器人和无人驾驶等嵌入式场景。立体匹配是双目立体视觉的关键一环,其匹配精度和匹配速度至关重要,然而立体匹配算法复杂,常常难以同时满足实时性和精度要求。由于FPGA(Field Programmable Gate Array)具有并行性高、灵活性强和功耗低等特性,目前很多应用于嵌入式场景的视觉算法适合在FPGA平台实现。Xilinx公司的Zynq拥有FPGA+ARM的架构,融合了FPGA的并行优点和CPU核的强大功能,因此使用Zynq平台完成视觉系统算法的实现具有广大的应用前景。本文基于Zynq平台设计和实现了双目视觉系统。本文详细分析双目相机模型,完成了双目相机标定,获取了相机内外参数矩阵和畸变系数,并离线完成了极线校正,获取了校正前后的坐标映射关系。然后分析了立体匹配原理,其可分为如下四个步骤:匹配代价计算、代价聚合、视差计算和视差优化,本文使用Census变换结合汉明距离计算初始匹配代价,运用多方向扫描线优化算法实现代价聚合,采用赢家通吃算法获取视差,并使用中值滤波进行视差优化。本文在Vivado开发环境下设计了双目视觉系统硬件逻辑部分,随后将硬件工程配置导入SDK,对其中使用的各模块进行驱动配置和寄存器配置,将采集的左右相机图像同时写入SD卡,为立体视觉IP(Intellectual Property)核设计提供了验证平台,实现了双目采集、传输、存取和显示系统。然后使用HLS软件,结合标定所得参数和极线校正前后的映射关系,实现相机畸变校正、立体校正、立体匹配和视差优化等算法,使用优化指令完成算法加速,并将其封装为立体视觉IP核。最后,在上述Vivado设计的硬件平台中使用立体视觉IP核,实现了双目图像采集、图像处理、图像存取和显示的双目视觉系统。最后,对本文设计的双目视觉系统进行实验评估。实验结果表明,本文设计的双目视觉系统实时性高,算法加速效果明显,系统整体功耗较低,适用于对实时性和功耗要求较高的嵌入式视觉应用场景。
其他文献
2007年2月,在Netflix推出了在线影视流媒体播放服务一个月之后,Efe Cakarel低调发布了一项和Netflix类似的电影点播服务MUBI。如今十多年过去了,Netflix成为影视流媒体播放行
文章报告在肢体肿瘤切除以后,采用吻合血管的游离组织移植及带血管蒂的组织移位术修复其缺损,在25例中,随访1~9年的20例,无死亡病例。文章讨论了彻底切除肿瘤及缺损的修复方法
关于新冠肺炎疫情的报道中,财新等媒体的一系列报道被认为是新闻专业主义的胜利,然而新闻专业主义究竟是什么?从哪里来?又将到哪里去?在新媒体、移动传播时代更需要新闻专业
目的:探讨基于IVIM-MRI、DKI-MRI参数图(Standard ADC、D、D*、f、MK、MD)预测STSs组织病理学分级及Ki-67表达水平的影像组学模型的可行性及其应用价值。材料与方法:一、临床资
【摘要】为小学语文教师,首先要在思想上重视语文的阅读教学活动,对学生进行有效的阅读训练,提高学生阅读兴趣的同时,帮助学生开阔语文学习的视野,通过阅读,让他们获得自己想要的知识和经验。教师要重视阅读的质,也要重视阅读的量,让学生大量的阅读。而且在阅读水平方面,随着年级的升高,阅读读物的质量也要不断获得提升,让学生通过阅读获得语文综合能力的提升。  【关键词】小学语文阅读教学阅读兴趣  在小学语文教学
以$195柴油机为试验机型,在柴油中掺入10%、20%和30%体积比的葵花籽油配置成混合燃料,进行台架试验,测量并分析排放试验数据。试验表明葵花籽油一柴油混合燃料能改善缸内燃烧,降低NO
语调是一种重要的韵律特征,在人际言语交流中发挥着重要作用。在日常人际会话中语调具有各种交际功能,例如表达不同句类的语气、表达不同情感等。语气包括对陈述、疑问、祈使、感叹这些语法范畴进行表达;情感包括高兴、愤怒、厌恶等等。本文研究这两种交际功能的语调实现形式,尤其考察两者共存时的交互方式。通过本研究,一方面可以加深我们对汉语普通话语调内在规律的理解,另一方面可以为汉语国际教育、汉语语音合成等提供参考
2020年4月7日,齐鲁晚报·齐鲁壹点重磅推出专题视频策划《决战之时,决胜之势——山东脱贫攻坚收官战微记录》,用微纪录片的形式向社会大众讲述了山东脱贫攻坚战中的点滴
谱牒,或曰家谱、宗谱、族谱,系同宗共祖血亲集团以特殊形式记载本族世系、人物和事迹的历史图籍,与正史、方志一起被称为中华民族历史的三大支柱。近年来,在共建"一带一路"的
本文以《挪威的森林》中刻画直子的感情心理动词为研究对象,依据人称指示语和语用视点理论等语用学理论,考察了与直子相关的感情心理动词在《挪威的森林》文本中的语用特征和