【摘 要】
:
非凸优化问题广泛存在于实际工程应用中,如稀疏优化、机器学习、机组组合等.基于Peaceman-Rachford(PR)分裂算法及其衍变版本在凸优化和非凸优化的研究,本文主要探究PR分裂算法求解带不可分结构的非凸优化问题.首先,本文考虑一类带线性约束的非凸不可分优化问题,其目标函数为两个可分结构和一个不可分结构之和.将PR分裂算法思想用于设计此问题解法,在子问题中加入Bregman距离,提出一个Br
论文部分内容阅读
非凸优化问题广泛存在于实际工程应用中,如稀疏优化、机器学习、机组组合等.基于Peaceman-Rachford(PR)分裂算法及其衍变版本在凸优化和非凸优化的研究,本文主要探究PR分裂算法求解带不可分结构的非凸优化问题.首先,本文考虑一类带线性约束的非凸不可分优化问题,其目标函数为两个可分结构和一个不可分结构之和.将PR分裂算法思想用于设计此问题解法,在子问题中加入Bregman距离,提出一个Bregman型PR分裂算法.在常规假设条件下,包括对于乘子更新项中松弛因子的估值区间以及算法迭代点列的有界性假设,获得算法全局收敛性.在效益函数满足Kurdyka-?ojasiewicz(KL)性质时,证明该算法的强收敛性.另外,当KL性质关联函数具有特殊结构时,分析获得相应收敛率结果.初步数值试验说明两次乘子修正技术的有效性.进一步,将线性近似思想运用到Bregman型PR分裂算法中,得到一种线性近似Bregman型PR分裂算法.该算法扩大了上述算法中松弛因子的阈值范围.在一般假设条件下,得到算法的收敛性和收敛率结果.最后,数值试验验证算法的数值有效性.其次,为求解更宽泛的带有线性约束及可分闭凸集约束的非凸不可分优化问题,在对该问题进行等价处理的基础上,改进传统分裂算法中拉格朗日乘子更新技术,提出一种改进的Bregman型PR分裂算法对其进行迭代求解.在适当的基本假设条件下,证明算法的全局收敛性以及强收敛性.初步试验结果表明改进算法的数值有效性.
其他文献
纵向数据(集团数据或面板数据),是对同一个个体进行多次观察,所得数据是相关的,不同个体观测所得的数据是独立的.广义线性模型是经典线性模型的推广,即可用于分析连续数据,又可用于分析离散数据,特别是分析离散数据(属性数据和记数数据)或非负数据的常用方法.广义估计方程(GEE)是广义线性模型的推广,是纵向数据下的广义线性模型.GEE的一个显著特点是只要均值函数假定正确,即使相关阵(或协方差阵)假定不正确
本世纪初,自德国学者Raff与Allg¨ower提出脉冲观测器理论以来,基于观测器的输出反馈控制已成为控制工程领域中重要的控制策略之一.脉冲观测器旨在利用系统离散时刻的输出信息,联合其修正项获得受控系统的状态估计.在基于离散化的网络化控制背景下,系统状态受通信时滞、外部干扰等因素影响,如何设计其相应的脉冲观测器估计系统状态以及如何研究基于脉冲观测器的输出反馈控制问题具有重要意义.本文分别研究了Li
在日趋严峻的能源与环境问题的大背景下,超细晶铝合金作为一种轻量化材料快速地进入了航空、汽车、机械制造等各个领域;而细化晶粒作为实现材料强韧化的传统手段之一,已经在提升材料使役寿命方面展现出巨大的潜力。随着超细晶铝合金在一些工程实际领域例如螺栓、铆接接头、键槽联轴器以及轴承等中的广泛应用,由机械构件的接触表面间一种振幅极小的相对运动产生的微动疲劳失效将会极大地降低构件的服役寿命。因此,为了保障铝合金
生物炼制主要以木质纤维素为原料,经过预处理和植物生物质降解酶酶解产生单糖,再进一步将单糖发酵转化为生物燃料,是一种绿色环保的生物工艺。微生物酶对木质纤维素的高效酶解是生物炼制过程的限制步骤,草酸青霉具有完整的植物生物质降解酶系和高β-葡萄糖苷酶活性而受到关注,但仍存在酶产量较低、成本高的问题。在弄清草酸青霉基因表达调控机理的基础上,分子遗传改造草酸青霉是提高其植物生物质降解酶产量的有效方法。然而,
最优化设计在实际生活中的应用非常广泛,我们可以通过数值最优化中的基础知识和计算方法来解决实际生活中的问题,运用科学的计算方法和网络编程来使我们的工作变得更加效率、科学,所以研究无约束最优化问题的计算方法是意义重大的.拟牛顿法是解非线性方程组及最优化计算中最有效的方法之一,如今,优化软件中包含了大量的拟牛顿算法用来解决无约束、约束和大规模的优化问题.因此,更进一步地研究拟牛顿算法的性质和应用显得尤为
本学位论文研究非线性互补约束优化问题,该问题是一类特殊的均衡约束优化问题,在力学、金融、工程设计、交通运输等领域有着很强的实际背景和广泛应用.因此,研究非线性互补约束优化问题稳定、高效的算法有着重要的理论意义和应用价值.在本学位论文中,我们提出了一个求解非线性互补约束优化问题的无罚函数无滤子的QP-free算法.首先,通过Fischer-Burmeister函数将原问题转化为非光滑约束优化问题,再
非光滑优化问题是一类应用背景广泛,理论研究深刻的优化问题.领域内的优化理论和数值算法在大数据,工程应用,社会服务等诸多领域有着广泛的应用,长期以来一直受到国内外学者的广泛关注.非光滑优化领域的优化理论和算法被广泛应用于机器学习、工程设计与优化、图像去噪、图像恢复、发电机组优化以及金融等领域.Minimax问题考虑目标函数为多个分量函数极大化的情形,具有分解式的特殊结构以及非光滑的特性,此类问题产生
许多现实应用中的问题实际上是非凸非光滑的,例如稀疏信号恢复,图像处理、矩阵分解等.因此,研究求解非凸非光滑优化问题的算法具有重要的应用价值.本文考虑一类目标函数为三个函数和的非凸非光滑优化问题.求解此类问题常用的方法为交替极小化算法.惯性技术能有效改进算法的数值效果.本文结合惯性技术提出用于求解非凸非光滑分块优化问题的Bregman惯性交替极小化算法.首先,在邻近交替算法的基础上结合惯性技术与Br
采样是模拟信号与数字信号转换(A/D)的基本工具.经典的Shannon采样定理表明,带限信号可以由它的均匀采样以及sinc函数的平移基底来重构.对于非带限信号是否存在类似的采样定理自然地成为人们关注的热点.近年来,研究者们在其他基底张成的空间上,讨论了非带限信号的采样定理.在这些基底中,由广义sinc函数sinca生成的基底是一种特殊例子.另一方面,在一些光学工程问题中,通常利用信号的傅里叶采样重
乘子交替方向法(ADMM)是求解可分离优化问题的一类有效方法,凸优化问题的ADMM研究已相当成熟.但大部分实际模型都是非凸优化问题,利用ADMM求解非凸优化问题仍在探索中.另外,惯性思想与许多一阶算法结合可以有效改进算法的数值表现,这已被很好的证明.故本学位论文考虑一类非凸优化问题,运用乘子交替方向法及惯性思想提出新的改进算法以求解此类问题.首先,将惯性思想与邻近乘子交替方向法结合提出求解非凸优化