神经网络中处理鞍点的LMBP改进算法

来源 :计算机工程 | 被引量 : 0次 | 上传用户:zd013wyt
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对目前神经网络中的Levenberg-Marquardt反向传播(LMBP)算法在训练过程中有可能迭代到鞍点的问题,提出一种能有效克服鞍点的LMBP改进算法。计算鞍点处雅克比矩阵的正特征值对应的特征向量并将其作为新的搜索方向。通过实例对比传统LMBP算法与改进LMBP算法的效果,证明改进的算法能有效地脱离鞍点并进一步收敛到极小点处。
其他文献
数据采集的速度不断的需要提高,为了满足对频率和分辨率技术上的要求,利用DSP、CPLD及单片机技术构建一种高速采集装置。下面就以这些电器元件为核心设计了一个高速信息采集装
针对无线传感器网络导航中出现的拥塞问题,提出一种拥塞检测和缓解算法。每个节点周期检测其导航的用户数量,根据用户数量是否超过上限判断其所在路径是否发生拥塞,若发生拥
针对复杂海洋环境下水面无人艇(USV)的危险规避问题,介绍一种基于局部环境信息感知的避障算法——近域图(ND)法。结合USV高速的特性及ND法在速度控制上的跳跃性,采用模糊理论
微波频段由于金属接触非线性引起的无源互调可对系统性能造成严重影响.本文讨论了微波频段金属接触非线性的主要机理和简化模型,推导了双正弦输入时任意奇数阶无源互调幅度的
随着社会的发展,科技的进步,企业对工科大学生的要求也越来越挑剔了。他们已不再单纯用高学历、高分数的标准来衡量大学毕业生了,而是用是否具有良好的动手实践能力、创新能
位于珠江三角洲的粤港澳大湾区是全球第四大湾区,在中国经济发展中占有非常重要的地位。受全球气候变化影响,珠江河口环境正面临海平面上升带来的严峻挑战。开展珠江河口盐水入侵和物质输运对海平面上升响应的研究,对保证粤港澳大湾区能在气候变化背景下持续健康发展具有重要的现实意义。本文建立了基于EFDC(Environmental Fluid Dynamic Code)模型的珠江河口河网—河口—近海一体化的三维
随着互联网的高速增长,越来越多的网络教育平台随之增长,在线教育平台的使用极大地方便了学生的学习和老师的管理,鼎新了教育理念和教育思维,但如何在教学平台中做好个性化推荐、提高学生学习效率依然是个值得研究的问题。面对教育平台中数据的种类和存在方式多种多样,本文在基于大数据的高效组织与处理技术的基础上,提出了异构多源数据的组织与处理,通过异构数据自动收集、异构数据融合技术和异构数据校验技术,建立了异构多
数据结构是计算机科学中一门专业基础课,本文根据数据结构课程特点,结合作者多年教学经验,分别对理论教学和实践教学中教学内容与教学模式进行改革与探索。让学生在学习中获得成
采用电子枪软件EGUN对C波段多注速调管的电子光学系统进行了初步设计,得到的电子枪发射电流密度均匀,电子注轨迹层流性好并且在收集极发散均匀。应用此电子枪分别研究阴极表面
现有Web服务自动发现方法中存在服务匹配程度区分不明显、服务发现精度不高等问题。为此,提出一种基于服务簇的空间信息服务自动发现算法。对发布的空间信息服务进行聚类分析