深度神经网络中的对抗样本攻防技术研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:zjzjzj13
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着人工智能技术在近些年的飞速发展,以深度神经网络为核心的人工智能模型在各种领域被广泛部署,如图像识别、自动驾驶、语音识别、文本识别、视频处理等。然而,深度神经网络的模型却容易受到对抗样本的攻击,攻击者在输入中加入一些人眼不易察觉的轻微扰动,却可以使模型以较高的置信度输出错误的预测结果。对抗样本的发现使得人们对深度神经网络应用的安全性产生忧虑。为了更好地将其应用于实际场景中,针对深度神经网络的鲁棒性问题逐渐成为研究热点。对抗样本攻击与防御技术是评估和提高深度神经网络鲁棒性的重要手段。因此,研究深度神经网络中的对抗样本攻防技术具有重要的学术研究意义和商业应用价值。本文针对现有深度神经网络中的对抗样本攻击和防御技术中存在的攻击成功率低、攻击效率不高、防御泛化性差和鲁棒性低的问题展开研究。首先对现有的对抗样本攻击原理和防御方法进行了全面的总结。然后深入探讨了在不同设定和不同情况下深度神经网络中的对抗样本攻防技术,并围绕自动语音识别任务和图像分类任务两个深度神经网络应用最为广泛且关键的领域作为目标领域,分析它们在攻击和防御研究中存在的问题,并给出相应的解决方案。本文的研究内容和贡献如下:(1)现有最小化扰动的白盒对抗样本攻击需要同时优化两个目标,存在攻击效率低、扰动太大的问题。本文以自动语音识别任务为载体,提出了基于动态范数的快速有目标语音对抗样本攻击算法,根据攻击过程中样本是否攻击成功动态调整扰动预算,并逐渐减小攻击步长以避免在最优解附近震荡。实验结果表明,本文所提攻击方法可以在非常少的迭代次数下对主流自动语音识别模型DeepSpeech实现100%的有目标攻击成功率,并且所添加的扰动也非常小。(2)现有黑盒对抗样本攻击主要分为迁移攻击和查询攻击,存在迁移攻击成功率低、查询攻击效率不高的问题。本文将迁移攻击与查询攻击相结合,以图像分类任务为载体,提出具有迁移先验的贝叶斯优化黑盒对抗样本攻击方法。该算法利用生成器学习具有强迁移性的扰动作为先验并利用贝叶斯优化方法在生成器的低维嵌入空间进行搜索,充分利用了扰动先验和每次查询的先验知识。经过在三个数据集和六个模型上和当前最先进的黑盒对抗样本攻击方法的对比实验,本文的黑盒对抗样本攻击方法能够以平均个位数的查询次数实现98%以上的攻击成功率。(3)基于预处理的主动防御策略通常只对一些简单的攻击或包含在训练集中的攻击具有防御效果,存在泛化能力差、防御效果弱的问题。此外,预处理防御方法还会降低干净样本的分类准确率。本文设计了一种新的残差连接图像重构网络来防御对抗样本攻击,并使用感知损失来消除误差放大效应。实验表明,本文所提的基于残差连接的图像预处理防御方法几乎不会影响干净样本的分类准确率并且具有很强的泛化性,在Inception-ResNet-v2模型上对十种主流的对抗样本攻击的最低防御准确率达到69.44%以上。(4)基于正则化的对抗训练被动防御策略在白盒攻击下依然能够保持一定的鲁棒性,但却存在鲁棒过拟合以及自然精度和鲁棒性之间存在权衡的问题。本文首先经验性地验证了一致性正则化能够有效缓解对抗训练中的鲁棒过拟合。随后进一步提出了基于指数平均移动的教师模型一致性正则化对抗训练方法。在三种不同数据集上的实验结果表明,本文所提的对抗训练防御方法能有非常有效地缓解鲁棒过拟合并且提高鲁棒性,可以将CIFAR-10上的ResNet18模型的PGD-10攻击的鲁棒准确率提高4%,AA攻击鲁棒性提高3.79%,同时,鲁棒泛化差距可以减少24.64%。
其他文献
电磁波是当今时代信息传递与信息获取的重要工具。然而,各种辐射源、散射源构成的现今极度复杂的电磁环境,使得频谱资源和信号安全问题越来越受到人们的关注,因此信号参数测量技术被广泛应用于各种场景。电域信号参数测量系统由于电子瓶颈限制,存在工作频带窄、易受电磁干扰、体积重量功耗大等技术问题,难以满足现今不断提高的系统指标和逐渐复杂的应用场景。近年来,随着微波光子技术的迅猛发展,基于微波光子技术的信号参数测
学位
空间嵌入式操作系统是空间飞行器必备的基础软件,决定了空间飞行器是否能够可靠安全地完成空间飞行任务。目前已经采用多种手段来保证其可靠性和安全性,但是仍然存在一些难以发现的缺陷。形式化验证方法在一些工业领域中得到了很好的应用,被验证过的系统的可靠性和安全性都远远高于未验证的系统。因此,采用形式化方法来验证空间嵌入式操作系统势在必行,保证其正确性,从而使其更加可靠安全。存储子系统是空间嵌入式操作系统的重
学位
入射光照射纳米材料表面激发自由电子的集体振荡产生表面等离激元现象,并随之出现一系列产物比如局域场增强和热载流子。目前,基于表面等离激元的实践应用还存在诸多局限性:传统贵金属材料中强烈的朗道弛豫衰减和散射效应导致表面等离激元的高传播损耗,并且贵金属的稀缺性也不利于可持续发展;目前在可见光波段响应的等离激元材料非常少,极大限制了基于太阳能转换利用的光电系统发展。因此,探索具有低损耗和宽带强响应的替代贵
学位
随着我国经济的快速发展,我国对能源的需求日益增加。目前,我国油气能源的供给与需求呈现明显的逆向分布。大力建设能源输送网络对于优化我国能源分布,推动经济稳定发展具有重要意义。高压输电线路与长输油气管道在路径的选取规则上极其相似,二者共用“公共走廊”。高压交流输电线路通过电磁感应作用对长输管道产生交流干扰,交流腐蚀问题日益严重。随着我国输电线路的发展,电压等级逐步提升,我国标准缺少相关等级下高压输电线
学位
随着科技的快速发展,电子技术已经普遍应用于人类社会的各个方面,电子器件已成为生产生活中必不可少的重要工具。而电子器件也在朝着多功能、高集成、小型化的趋势不断演进,这对相关材料提出了更多的要求。而与此同时,低维材料由于其丰富且优良的特性恰好可以满足器件发展的需求,其中低维铁电材料更是因其内部存在自发铁电极化且极化可随外电场翻转的特点,在传感器和非易失性存储器等器件应用方面具有重要的价值。低维铁电材料
学位
目标识别是现代智能机器和系统的重要组成部分,在许多现实应用中起着至关重要的作用,如交通监控、安全监控、自动驾驶车辆、自主移动机器人、人类行为分析、医疗成像等。三维目标识别是智能体感知和理解场景的关键技术,是机器与世界交互的基础。目前深度学习是三维目标识别研究的主流,然而,传统的深度学习方法如卷积神经网络忽略了三维数据之间的高阶相关性,不利于特征的有效融合。超图是建模高阶、复杂数据关系的有效工具,超
学位
作为机器学习领域的一个重要分支,度量学习被广泛应用于信息检索、目标识别、姿态估计等实际应用中。近年来,随着深度学习的迅猛发展,与其相结合的深度度量学习逐渐发展成为度量学习中的主流方法。尽管现有的深度度量学习方法已经取得了较好的性能,但其性能严重依赖于大规模高质量标注的训练数据。然而,在诸多实际应用中所面临的开放环境下,这些在实验室环境下使用的大规模高质量标注的训练数据往往难以获取。面对开放环境下训
学位
传统的配电网三相自动重合闸在线路故障发生且断开后经整定延时盲目重合,不对故障性质进行识别,如果重合于永久性故障将导致对系统短时间内的二次短路冲击,损坏断路器等设备甚至影响系统稳定性。尤其是当前配电网系统愈发庞大和复杂,电缆线在配电线路中的使用比例逐年增加,导致自动重合闸的重合成功率越来越低,甚至一些供电公司规定只要含电缆线的配电线路一律退出自动重合闸,严重影响了供电可靠性。因此,针对自动重合闸盲目
学位
在油气田开采过程中,直接从井口采出的天然气一般需要经过脱水以及一系列净化处理后才能进行长距离的运输,通常将未经处理过的天然气称为“湿天然气”。湿天然气广泛存在于天然气的开采及运输过程中,其含水率是气井产出、生产情况的重要指标之一,它能够反映气液两相流的流体基本特性,还能够帮助分析两相流中各相流体的流量、密度等信息。本文以射频技术理论及电磁场相关理论为基础,重点研究了适用于湿气含水率测量的方法以及适
学位
长输油气管道作为国家重要能源输送通道,在工业发展中起着极其重要的作用。为确保管网安全运行,对长输管道所处风险等级进行高效准确的预测是必不可少的环节。论文深入分析了管道失效模式、失效原因、完整性管理理论,可知失效压力是决定管道安全运行最关键的指标。根据失效压力的计算公式和现场可准确获得的参数,确定了影响管道失效的7个主要因素:管道外径、壁厚、缺陷长度、缺陷宽度、缺陷深度、屈服强度和拉伸强度。按照失效
学位