基于生成对抗网络的交通场景视觉显著性区域预测

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:jwz1270
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
交通驾驶场景是一个复杂多变的环境,其中包括车辆位置及其运动趋势、行人和交通标志的空间位置等重要信息。视觉选择性注意机制是人的视觉系统在复杂环境中将多余信号过滤掉,并提取重要信息的一种神经机制。根据该注意机制,有经验的驾驶员能够有效地搜索和处理驾驶任务中的目标信息。近年来,随着智能驾驶的研究和发展,越来越多的研究人员通过行为学眼动实验来模拟驾驶过程中的认知活动,并根据实验中采集到的驾驶员眼动数据来研究交通场景中的视觉注意机制和检测模型。本论文利用眼动数据来研究交通驾驶场景中驾驶员的视觉信息处理特征,建立了基于生成对抗网络的交通场景显著性预测模型。该模型可以比较准确地预测交通场景中驾驶员在模拟驾驶过程中的视觉显著性区域(包括主要注视区域和次要区域)。论文内容主要分为以下两部分:第一部分,介绍了眼动数据的来源以及眼动数据的预处理流程,建立了可供深度学习方法训练和测试的数据集。我们采用基础的生成对抗网络(GAN)和循环一致性生成对抗网络(CycleGAN)对本文数据集进行处理和分析,发现这两种基础方法存在欠拟合现象,其显著性评价指标也较低。CycleGAN与GAN相比,前者的预测效果较好,但生成损失的设计方式还有待改进。第二部分,基于CycleGAN的生成损失及其判别方法,本论文提出了一种图像尺度逐渐生长、生成网络多步判别的渐进式训练判别网络模型。本模型主要包含生成模型和判别模型,并设计了合适的生成损失和判别方式。生成模型采用U型的镜像结构,包含渐进式结构的编码器和解码器,其中每个尺度的网络结构都设计成残差网络单元。判别模型对生成图像的各个尺度进行多步判别,逐渐校正生成图像质量。本论文提出的神经网络模型可以生成交通驾驶场景的显著性图,即显著性预测结果。本论文基于自顶向下的视觉注意机制,提出了基于生成对抗网络的交通场景视觉显著性预测模型。本论文的模型可以有效地估计交通驾驶环境中驾驶员视觉搜索的显著性区域和环境周边突发情况,同时也能指出驾驶员注视的主要区域和交通标志等次要目标,可对未来的智能驾驶车辆和辅助驾驶系统等提供有用的理论依据和相关技术支持。
其他文献
蔡元培先生是我国著名的民主主义革命家、教育家,是现代中国知识界的卓越先驱,他一生重视教育,尤其重视大学教育,为发展中国教育文化事业做出了卓越的贡献。毛泽东同志曾高度
作为一名长期从事城市基础设施建设和管理工作的专业人士,在代表履职中,为本市城市精细化管理出谋划策是我义不容辞的责任。由于国企改革的“吸收合并”引起了一系列问题,如
营养支持治疗作为一种基础治疗手段,对新型冠状病毒肺炎患者的治疗和预后都具有重要的意义。本文针对不同类型的感染患者,结合营养支持治疗的五阶梯法则,推荐个体化营养治疗
设施选址是物流研究的热点,合理科学的布局能有效的提高物流运行效率、降低物流成本。生鲜农产品网络节点的设计是否科学、网络布局是否合理,不仅直接关系到整个生鲜农产品供
目的探讨应用眼内窥镜治疗屈光间质混浊的伴有眼内异物的眼内炎的效果。设计回顾性病例系列。研究对象8例角膜混浊的伴有眼内异物的眼内炎患者。方法对上述患者应用内窥镜引
<正>随着人民生活水平的提高,社会对农产品品种、质量、安全、功能等提出了更高的要求。目前我国农产品发展迅速,特色农产品品种齐全、总量不断增加,质量不断提高,但市场竞争
我国已进入了城市化加速发展的时期,而通过土地征用来实现城市扩张发展的模式已成为城市化进程的主要方式。城乡一体化战略顺利实施的一个重要保证是妥善解决集中出现的失地农
河钢塞钢管理团队荣获“时代楷模”称号,可喜可贺!$$他们的成功,源自“一带一路”伟大倡议所开启的筑梦空间,源自习近平总书记“言必信、行必果,承诺的事情一定要兑现”的殷切嘱托
报纸
慢性阻塞性肺疾病是一种以气流受限为特征的疾病,气流受限不完全可逆,呈进行性发展,慢性阻塞性肺疾病的病情常表现为周期性的加重和缓解,研究表明,每次的急性加重均会造成病人肺功
本文研究用双位组合四探针测量硅材料薄片电阻率的新技术,提出新的计算公式和厚度修正原理。用双位组合法测量不同厚度硅样品所得结果与常规四探针法测得的结果相比较表明,用双