紧致化神经网络的鲁棒性分析

来源 :中国科学:技术科学 | 被引量 : 1次 | 上传用户:echoifanfan
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
深度神经网络(deep neural network, DNN)目前已经在很多视觉识别任务中达到了超越人类性能的表现.然而,将深度神经网络部署到真实场景的终端设备面临着两个挑战:首先,目前的深度神经网络模型非常耗费计算资源和内存,很难直接应用在资源受限的终端设备上;其次,真实场景的数据往往受到各种各样噪声的影响,因此部署在真实场景的模型应该拥有良好的鲁棒性(robustness).近年来出现了很多对深度神经网络进行压缩和加速的方法以适应真实场景的资源受限终端,而对这些压缩模型的鲁棒性分析也得到了越来越多的关注.本文首次对神经网络剪枝、量化及知识蒸馏等常用的压缩算法进行对抗鲁棒性及噪声鲁棒性分析,总结了不同压缩算法对神经网络鲁棒性的影响.并对目前同时解决神经网络鲁棒性及模型大小问题的一些方案进行了整理与分析,展望了该领域未来研究的技术挑战与可能的发展方向.
其他文献
绩效评价结果应用是预算绩效管理的落脚点,是提高财政资金使用效益、改进完善预算决策的内在要求。党的十八大以来,我国在大力推进政府购买公共服务的过程中,绩效评价也取得了长足进展,但政府购买公共服务绩效评价结果应用仍存在一些难点,笔者从绩效评价结果与预算安排的联动机制、事后责任追究的制度框架、绩效评价公正公开程度、公共服务提供方式的转换、绩效评价指标体系的科学性五个方面剖析了政府购买公共服务绩效评价结果
期刊
学位
<正>数学作业可以沟通课堂内外的学习,沟通知识学习与实践应用,并促进学生直接经验与间接经验的统整、内化。作业设计的质量对实现学生的全面发展有重要的影响。因此,反思并优化作业设计是“提高作业设计质量”的有效途径,可以使作业布置更加合理,也可以更好地促进学生“学会自我监控和学习管理,探索个性化的学习方法”。
期刊
2060碳中和目标是经济绿色低碳转型及可持续发展的重要推动力,也是平衡经济增长与碳减排的双重目标。随着碳中和目标的提出,低碳理念已经全面融入经济社会发展中,碳金融成为促进低碳经济发展和实现碳中和目标的重要手段。商业银行在金融体系中扮演着至关重要的角色,承担着对国家宏观经济稳定运行、经济增长的支撑、金融风险的控制等重要职责,商业银行的经营绩效直接影响金融体系的稳定和发展。因此,在碳中和目标下,商业银
期刊
目的:提高万寿菊花中叶黄素的纯度。方法:以葵花籽油微乳液作为提取剂提取万寿菊中的叶黄素。利用KOH-C2H5OH溶液对叶黄素粗提物进行皂化,再用大孔树脂进一步纯化。结果:静态试验中,HP-20型大孔树脂对叶黄素的吸附及解析效果最好,以80%乙醇溶液作为吸附溶剂,无水乙醇溶液作为解析溶剂,上样质量浓度为0.01 mg/mL,最佳静态吸附条件为温度30℃,吸附时间2.0 h, pH 7.0;最佳静态解
期刊
目的 探讨自拟方补肾健脾通络方对宫颈癌术后下肢淋巴水肿的临床疗效。方法 将自拟补肾健脾通络方用于35例入组的宫颈癌术后下肢淋巴水肿患者,观察患者治疗前后临床症状的改变以及人体成分指标的变化。结果 治疗后临床疗效显效12例,有效22例,总有效率为97.1%(34/35)。治疗后中医疼痛、肿胀、麻木、活动不利症状缓解与治疗前比较,差异有统计学意义(P <0.01)。治疗后患者身体总水分和下肢节段水分明
期刊
文章选用2018年“中国老年健康长寿影响因素跟踪调查”(CLHLS)数据,以逻辑回归模型和倾向得分匹配法综合分析社会参与对老年人健康的影响及其城乡差异。研究表明,社会参与能够提高老年人身心健康水平。在自评健康与身体健康方面,相比于农村老年人,社会参与对城镇老年人自评健康和ADL的提升作用更大,但在IADL方面的影响较弱。社会参与能够更有效缓解城镇老年人的抑郁,对农村老年人的认知功能有更积极的影响。
期刊
From the perspective of COVID-19’s prevention and control, to test effectiveness of existing control measures for shopping center buildings, taking Weilaishi Shopping Center of Handan City as an examp
期刊
为了保障服务组合优化过程中的QoS数据的真实性,提出了一种基于超级账本平台的可信框架;同时为了提高服务组合的优化效率,提出了一种蚁群因子的差分进化算法的服务组合优化方法(ACOF-DE)。首先,在超级账本平台上部署相应节点,构建可信框架,保障候选服务的真实性;然后,将所提出的算法以智能合约的形式,在区块链上对服务组合的优化问题进行求解,使组合过程在可信的环境下执行。该算法通过引入多种蚁群因子,比如
期刊
<正>主持人按我国的刑法教义学在理论与实践这两个方面都取得了长足的进步,刑法教义学从一种理论范式到法学方法,对推进我国刑法的学术发展起到了重要作用。在一定意义上可以说,刑法教义学已然成为我国刑法学的主流学说。然而,我国刑法学界对刑法教义学还存在种种误解与误读。
期刊