基于无监督域自适应的城市场景语义分割方法研究

来源 :南昌航空大学 | 被引量 : 0次 | 上传用户:ooniono
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
语义分割是计算机视觉领域的一个重要研究方向,是场景理解和分析的基础,广泛应用在自动驾驶、人机交互、计算摄影学、图像搜索引擎、增强现实等领域。近年来,随着深度学习的不断发展,语义分割取得了较好的成就。基于无监督域自适应的方法无需大量标注样本,所以在语义分割领域应用更广泛,但现有的无监督域自适应方法,对于域差异较大的数据集,仍不能很好地对齐两域之间的分布,且对于物体边缘的分割不够平滑,分割精度和泛化性能都仍有待提高。针对上述问题,本文主要在如下两个方面做了部分工作:(1)AdaptSegNet(域自适应分割网络)在语义分割中取得了较好的结果,但该模型直接使用游戏数据集GTA5和真实数据集CityScapes进行对抗训练,容易导致训练中的对抗损失在反向传播过程中发生梯度爆炸,使模型的性能退化。针对该问题,提出了结合FPS(Fast Photo Style)风格转换模型的域自适应对抗分割网络,并将其应用于城市场景的分割。算法首先采用FPS模型对GTA5数据集进行风格转换,得到新的合成数据集FPS_GTA5,它与真实数据集CityScapes在颜色和纹理上更接近,并用FPS_GTA5数据集代替AdaptSegNet中的源数据集GTA5;其次为了证明FPS模型的有效性,使用CycleGan模型代替FPS模型进行了相同的操作得到Cycle_GTA5数据集,并对比和分析了FPS_GTA5数据集、Cycle_GTA5数据集与CityScapes真实数据集的视觉效果和相似性度量;最后为了验证本文提出方法的有效性,选择GTA5和SYNTHIA作为源数据集,CityScapes作为目标数据集进行实验,并与目前几种主流的无监督分割算法进行对比。实验结果证明,对于GTA5到CityScapes实验,本文的模型相比AdaptSegNet模型,在Wall、Pole、Sign、Terrain、Car、Bus的分割精度提高了7%以上,mIoU(mean Intersection over Union)提高了2.7%。对于SYNTHIA到CityScape实验,本文的模型相比AdaptSegNet模型,在Road、Sidewalk、Car、Bus的分割精度提高了3%以上,mIoU提高了1%。(2)AdaptSegNet是采用源域和目标域之间的分割图进行对抗学习的训练方法,若源域和目标域存在较大的域差异时,则训练过程中由于对抗损失较大从而导致模型在反向更新时产生梯度爆炸,模型的分割性能退化,所以模型的分割性能仍有待提高。针对此问题,提出了在AdaptSegNet基础上添加自训练模块的域自适应对抗分割网络。算法将自训练模块引入对抗学习中,可以提升分割模型对目标域分割的能力;由于引入的自训练模块采用的是交叉熵损失,容易忽略低概率类别的分割,从而导致概率不平衡的问题。本文使用最大均方误差损失代替交叉熵损失,可以有效缓解低概率损失类别被忽略的问题,进而有效地提高分割精度;此外,为了进一步平衡高概率与低概率的类别,我们在最大均方误差损失中引入了类平衡权重因子,从而能更好地缓解概率不平衡问题,使模型的精度进一步提升;最后使用真实数据集CityScapes的500张验证集图片进行测试,我们进行了消融实验,并与目前几种主流的方法进行对比。实验结果表明,本章的方法相比AdaptSegNet模型,在Road、Sign、Car、Bus等目标精度分别提高了3.1%、7.8%、8.8%、2.8%,并且mIoU提高了1.1%。
其他文献
厚规格钢板作为重要的钢铁品种,广泛应用于国民经济建设各个方面。如何克服连铸坯内部组织疏松、晶粒粗大和偏析等问题在较小压缩比条件下生产高质量的厚规格钢板产品,保证其产品质量与性能,尤其是特厚板产品的内在质量,是一直困扰各中厚板生产企业和轧制工艺研究需要着力解决的一个重要问题。本论文提出采用差厚轧制技术来改善厚规格钢板轧制条件,克服厚坯轧制时的咬入限制,减小头部冲击造成力矩峰值的影响,增加单道次压下量
土壤重金属复合污染现状日益严峻,在金属冶炼、化工制造和电镀等行业场地,镉(Cd)、铅(Pb)、铬(Cr)三种重金属的复合污染严重程度不容忽视。当前,碳酸盐、磷酸盐、Fe(Ⅱ)等常用修复材料在同步稳定土壤中Cr(Ⅵ)、Cd和Pb上均存在不足,新型的修复材料还有待进一步发展;FeS纳米颗粒(FeS NPs)在单一Cr(Ⅵ)、Cd或Pb污染水溶液和土壤的修复中能达到较好的效果,但在同步修复Cr(Ⅵ)、C
好氧颗粒污泥(Aerobic granular sludge,AGS)是一种高效的污水生物处理技术,被认为是21世纪最有前途的生物废水处理技术之一。与传统活性污泥(activated sludge,AS)相比,AGS具有高污染物去除能力,良好的生物质沉降能力,强大而紧凑的微生物结构,可以回收资源等特点。但由于启动时间长、颗粒运行不稳定等因素,AGS在污水处理中的应用受到限制。促进AGS形成对于AG
并联式混合动力汽车(Parallel Hybrid Electric Vehicle,PHEV)通过机械连接将发动机和电动机接入驱动系统,并且可以根据汽车行驶工况的需要,两者分别驱动或者进行一起驱动汽车行驶。本文以选取的某型PHEV为研究对象,在选取的工况的基础上对其动力系统与传动系统的参数匹配优化和其控制策略的制定进行了分析研究。本文首先根据混合动力汽车的零部件总类和连接方式对其进行分类,然后对
随着人口老龄化进程的加速以及人们生活方式的改变,糖尿病已逐渐成为了严重威胁着人类生命健康的慢性非传染性疾病之一。末梢血检测血糖是应用最广泛的方法。但相比之下,持续血糖监测(CGMS)因能提供更加全面的血糖浓度和波动信息,对于治疗和预防糖尿病有着重大意义。葡萄糖传感器作为决定CGMS核心性能的重要组成部件,存在着监测性能及稳定性较差的问题从而限制了其在我国众多糖尿病患者中的推广使用。因此,本文研究并
随着近年来污泥产量的剧增,如何对其进行合理的处理处置成为一个亟待解决的问题。同时,不可再生磷资源的锐减,也迫使我们必须重视对于污泥这一“第二磷源”的资源化利用。污泥热解过程中磷迁移转化特性是目前研究的热点。本文通过standards,measurements,and testing protocol(SMT)方法,确定不同热解温度下污泥中各种形态磷的迁移转化特性,系统地研究了钙基添加剂对磷的含量以
Nomex蜂窝复合夹芯板材具有高刚度、高强度、高疲劳、质量轻、绝缘、耐压、稳定性好等诸多特点,目前已经被广泛应用于航天航空、列车等领域中。但同时蜂窝复合夹芯板材也是一种典型的难加工材料,普通切割加工会出现蜂窝芯纸张开裂、蜂窝芯毛刺多、蒙皮毛刺多、蒙皮和蜂窝芯脱胶的现象,影响蜂窝复合夹芯板材结构件的质量,难以满足实际使用需求。超声切割加工技术是近20年兴起的一项工艺技术,相比于传统切割加工方法,由于
钛及钛合金以其优异的力学性能、良好的耐腐蚀性以及优良的生物相容性在医用金属材料领域得到广泛应用,其中Ti-6Al-4V合金是当前医用钛合金中使用量最大的钛合金。但是Ti-6A1-4V合金因其耐腐蚀磨损性能方面存在缺陷,在使用中容易产生磨屑,可导致无菌性炎症。同时磨损可促进合金的腐蚀,加速合金中的Al和V进入人体,降低钛合金植入体的使用寿命,并给患者带来健康安全隐患。传统的表面改性中在Ti-6Al-
随着城市化进程的推进,我国作为世界城市化的主要阵地,在取得了伟大建设成就的同时,城市与自然之间的矛盾也逐渐凸显出来,在此背景下我国先后提出了园林城市、生态园林城市、森林城市等响应措施,在缓解城市与生态之间的矛盾起到了很大的作用,但仍存在许多突出的问题。以往的园林城市建设重视绿化指标而轻质量,只着眼于绿地数量的提升,对于绿色空间的品质、城市形象魅力的塑造以及居民生活品质的提升这些方面则较少涉及。本文
当前电力设备缺陷文本信息存在数据丰富,利用率较低的情况,电力公司现有的缺陷文本信息管理系统对缺陷文本信息的分类方法不够完善,系统仅能实现对缺陷文本简单的单一分类,无法完成对缺陷文本的精确分类,同时缺陷文本填写不规范的情况也影响着缺陷文本的分类正确性与精确性。由于对缺陷文本信息的利用不足,常出现同一缺陷在不同地区重复发生的情况,且随着我国电网规模的扩大,设备使用年限的增加,该问题变得越来越突出。因此