【摘 要】
:
深度神经网络中过多的参数使得自身成为高度计算密集型和内存密集型的模型,这使得深度神经网络的应用不能轻易地移植到嵌入或移动设备上以解决特殊环境下的实际需求。为了解
【机 构】
:
中国科学院新疆理化技术研究所,新疆民族语音语言信息处理实验室,中国科学院大学
论文部分内容阅读
深度神经网络中过多的参数使得自身成为高度计算密集型和内存密集型的模型,这使得深度神经网络的应用不能轻易地移植到嵌入或移动设备上以解决特殊环境下的实际需求。为了解决该问题,提出了基于网络删减、参数共享两者结合的神经网络压缩方案。首先通过删减掉权重小于阈值的网络连接,保留其重要的连接;然后使用K-means聚类算法将删减后每层的参数进行聚类,每簇内的各个参数共享该簇的中心值作为其权重。实验在MNIST数据集上完成手写数字识别功能的Le Net-300-100网络和修改得到的Le Net-300-240-180-100网络分别压缩了9.5×和12.1×。基于网络删减、参数共享两者结合的神经网络压缩方案为未来在特殊环境下更丰富的基于深度神经网络的智能应用提供了可行方案。
其他文献
目的观察针刺配合灯盏细辛对周围性面瘫恢复期的临床疗效。方法将142例面瘫患者按就诊先后顺序随机分出观察组72例和对照组70例,两组同时使用针刺常规治疗,观察组加用灯盏细
<正>在邓小平等的支持下,胡耀邦组织和领导了规模空前的平反冤假错案关于真理标准问题的讨论打碎的是人们的精神枷锁,使党实现了思想路线的拨乱反正。然而,在历史转折的重大
<正>回顾2010年中国信用卡市场从第一张信用卡诞生至今,中国信用卡市场已经走过25年的长足发展历程。从市场发展水平、征信环境、消费者意识以及信用卡行业助推经济发展等情
当今世界能源日趋紧张,科学技术发展迅速,但我国在石油化工暴露出诸多问题,企业压力增大,目前人们对于石油化工设备及管道的保温性愈发重视,强调以节约能源为目标,创造出节能
<正> 气雾剂、喷雾剂都是借助压力将药物喷出直接到达作用部位或吸收部位,具有准确定位、快速起效的特点,广泛应用于烫伤、气喘、耳鼻喉等,并在外形上很相似,故人们常将它们
采用PMSAP分析软件,对一地下室顶板出现错层的工程实例进行弹性反应谱分析,对比无错层、错层未加强、错层加强3种模型的周期、振型等动力特性,以及顶点位移、层间位移角、层
目的观察人甲状旁腺激素相关蛋白(PTHrP1-34)对去卵巢的骨质疏松大鼠股骨、腰椎骨密度(BMD)的影响。方法80只4月龄Wistar健康雌性大鼠,其中60只行双侧卵巢摘除术,20只做假手
中小学理财教育 ,就是根据社会发展的需要和趋势 ,从中小学生身心发展特点和成熟水平的实际情况出发 ,由学校实施的旨在使学生养成正确的理财意识 ,具备理财的基础知识、初步
针对特高压直流输电工程的联网,研究交直流系统的最优潮流具有重要意义。建立一种大规模特高压交直流系统最优潮流联立求解的数学模型,将交直流系统统一求解,并提出了应用现
目的:探讨替罗非班应用于急性脑梗死支架取栓术中的临床疗效及安全性。方法:回顾性分析2014年1月至2016年12月因急性前循环脑梗死行Solitare AB支架取栓治疗患者的临床资料,