卷积神经网络的多层并行算法研究

来源 :扬州大学 | 被引量 : 0次 | 上传用户:fdiskhotmail
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人工智能是近年来研究热点,卷积神经网络(CNN)是机器学习算法中解决模式识别问题的强有力的方法之一。同时高速计算设备和高速网络的发展为卷积神经网络的进一步研究和实践应用提供了可能,大数据时代带来的海量数据为卷积神经网络的训练提供了足够的数据来保证算法的精度和预测的准确性。卷积神经网络的训练和预测时长阻碍了算法的进一步发展,算法并行化是提高算法运行效率的一个有效方法。为了在不改变模型框架影响算法精度的前提下,尽可能的提高卷积神经网络的运行速度,本文提出一种新的多层次卷积神经网络的并行算法。本文所做的主要贡献如下:1、利用单指令多数据流(SIMD)实现卷积运算向量化。采用CPU中的SIMD指令实现向量化卷积运算,消除并行计算的同步开销,同时复用寄存器中数据,减少内存读写次数,提升高速缓存(cache)命中率。2、利用多核CPU实现卷积层运算的并行化。采用分块矩阵方法划分输入数据,根据CPU核心数目及cache大小等多个因素划分矩阵分块的大小,并根据多核CPU上计算核心的亲和性分配给不同核心,实现卷积层运算的并行化。3、在Hadoop平台实现CNN的并行。对原始输入数据进行分组,分配给不同数据节点组,实现数据并行;对于每个数据节点组的数据,采用流水线并行;将上述过程采用JNI封装后,移植到Hadoop云平台。采用上述层次并行策略后,实验结果显示取得非常高的加速比。在采用SIMD指令向量化结合寄存器复用,划分数据考虑到Cache容量的并行算法中,实验结果均出现了超线性的加速比。在移植到Hadoop平台时,如果不存在多机通信,且数据可以在内存中容纳时,JNI可以充分发挥C程序的性能,且加速比与原始的C语言程序处于同一个数量级。在尽可能不损失计算效率的同时,向用户提供一个便于使用的接口。
其他文献
国际商事仲裁作为解决国际商事纠纷的主要手段被广泛运用于当今国际商事纠纷解决机制中,临时措施作为国际商事仲裁制度的重要组成部分,对保护当事人利益、保障仲裁裁决可执行起到了重要作用。由于世界各国司法传统及文化背景的差异,各国国内对于国际商事仲裁临时措施的规定也各不相同,主要体现在了临时措施的概念、种类、发布主体等问题上。在国际商事仲裁实践中,上述规定的差异为临时措施的域外执行带来了一系列问题,如因临时
在湿法炼锌电解液中,氟氯离子含量高,导致目前工业使用的纯铝阴极腐蚀消耗严重,从而导致整个体系成本增加。研究开发力学性强、耐腐蚀性好和电化学性能良好的阴极材料是目前急需解决的问题;同时深入研究在电积锌过程中阴极表面锌的沉积机理有助于阴极材料的选择和设计。本文选用工业应用废旧1070纯铝阴极为原料,分别添加Mn、RE、Zn元素等进行熔铸、轧制,制备铝合金阴极。主要研究内容为:(1)通过电化学特性研究,
二十世纪九十年代,中国互联网用户第一次接入互联网,实现了人类沟通体制的革命。21世纪,随着互联网技术的越来越成熟和形式多样化,线上社会与线下世界逐渐弥合,呈现出了虚实共生的网络社会形态。近几年,网络社会的发展和“互联网+”等国家战略的实施,网络社会日益成为社会治理的焦点场域之一。在多样、复杂的网络社会问题之中,诸多矛头都指向了网民的网络媒介素养。在5G从概念体转化为真实技术之前,移动通信技术经历了
随着互联网深入发展,催生了新的竞争方式,随之而来的新型不正当竞争亦愈演愈烈,对互联网产生重大影响。但在反不正当竞争法修订前缺乏相应的具体条款,所以对于互联网新型竞争
2008年汶川地震后的十年里,受灾地区及四川境内地区仍然发生了多次不同震级的地震。灾难发生时需要立即进行紧急疏散,专家一致认为这是居民最安全、最有效的应对措施。在灾难发生后,是否选择返回建筑或在什么情况下返回建筑才会更安全,这也同样成为居住者在面对地震灾害的行为选择问题。而且,在之前的研究中表明,这两种行为均直接受到居民风险感知和周边建成环境的影响。为了探究地震疏散行为和返回行为与建成环境和风险感
本研究采集了华东沿海四个典型港湾包括福建漳州东山湾、福建宁德福宁湾、浙江宁波象山港及江苏盐城大丰港52个站点表层沉积物样品,对沉积物中生源要素包括总有机碳(TOC)、总氮(TN)、总磷(TP)、生物硅(BSi)、有机质(OM)、含水率(MC)进行了测定,分析了有机质的来源,并进行了环境污染评价,为华东沿海典型港湾海域海洋环境提供背景资料。同时在各港湾挑选7-9个代表性站点,对30个沉积物样品中的甲
并购是我国房地产行业的常见现象,其中有的企业在短时期内连续进行了多次大型并购,连续并购往往给企业带来更大的财务风险。国内房地产龙头企业之一的融创中国近年来进行大规模连续并购,本研究以融创中国为研究对象,基于并购及财务风险的相关理论,对房地产行业财务风险管理的特点以及行业并购决策进行了分析与总结,并采用定性与定量相结合的研究方法,在对融创中国目前存在的整体财务风险以F分数模型进行判别之后,分别从并购
“漂绿”(greenwashing)一词是“绿色”(green)和“漂白”(whitewash)两个词的混合体,是指企业不真实的环保行为(Bowen,2014)。或者说是组织内部的关于环保方面的象征性信息,而不采取实质性行动。作为企业的绿色行为响应策略,漂绿行为已经变得越来越普遍。然而,我国关于漂绿的研究尚未稚嫩,漂绿行为的动因研究更为欠缺。当前所面临的一个紧迫任务就是如何减少企业漂绿行为推动我国
我国自1994年实行分税制以来,财政收入与财政支出在央地之间一直呈现出显著的结构性不对称。在财政收入占比大体相当的格局下,财政支出责任过度下放给地方政府,地方政府承担
根据相关的统计数据,从计划生育政策的颁布实施以来,人口基数虽得到有效的控制,但却带来了中国社会正愈发的走向老龄化这一新问题,老龄人口在总人口中所占的比重越来越大,在