基于log正则化的卷积变换学习算法及其应用研究

来源 :广东工业大学 | 被引量 : 0次 | 上传用户:judehui01
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在信号处理领域,信号的表示是最基本的问题之一,有效地对信号内容进行表示是信号处理的关键与信号应用的基础.在数字化信息时代,人们每天都在处理着海量的数据信息.寻找数据的有效表示是信号处理领域一直努力的方向,特别是高效地对信号进行稀疏简洁的表示,即稀疏表示.稀疏表示领域的核心思想在于用尽可能少的非零元素对原始数据信号进行表示,即通过稀疏编码用少量的数据来高效表示原始目标信号数据的关键信息,减小了信号的表示冗余并提高了信号的处理效率.卷积变换学习(Convolutional Transform Learning,CTL)是一种新兴的稀疏表示方法.它结合了无监督学习与卷积神经网络的优点,通过无监督的方式学习一组平移不变卷积核组直接从原始信号提取特征,被证明了比传统的稀疏表示方法具备更强的稀疏表示性能.并且与卷积神经网络相比,卷积变换学习模型通过无监督方式学习得到卷积核,不存在对数据标签的依赖问题,克服了卷积变换学习在面对无标签或标签稀少数据时的瓶颈,同时通过对卷积核组的正则化约束其多样性,可以从输入信号提取更具多样性的特征,避免造成特征提取的相似冗余.然而,现有的卷积变换学习算法所使用的稀疏约束方法仅有基于l0范数与基于l1范数两种:l0范数通过约束特征中的非零元素数量来达到稀疏约束的效果,但是其求解是一个NP-hard优化难题,通常采用贪婪算法选择局部最优值求近似解,难以得到精确度足够理想的稀疏特征;l1范数是l0范数的凸松弛解,通过采用软阈值法可以简单求得封闭解,但是l1范数存在稀疏度不足和大元素过度惩罚的缺陷,同样容易导致模型获得的稀疏解精确度不足的问题.此外,单层的卷积变换学习稀疏编码模型对于信息丰富复杂的输入信号,难以有效提取信号的深层语义信息,获取更具鉴别性的深层稀疏特征的能力受限.因此,针对现有卷积变换学习存在的问题,本文对卷积变换学习算法及其应用展开研究.具体内容如下:首先,针对现有的基于l0范数与基于l1范数卷积变换学习算法提取稀疏特征存在提取稀疏特征精确度不足的问题,本文提出了一种基log正则化的卷积变换学习算法,使用稀疏度强且偏差性小的非凸log正则化方法作为卷积变换学习的稀疏约束,提升卷积变化学习的稀疏特征提取精确度.其次,针对单层卷积变换学习难以提取信号深层信息的问题,本文提出了多层log化卷积变换学习框架,将单层log化卷积变换学习模型进行层次拓展,构建多层稀疏编码结构提取输入信号深层次更具鉴别性与丰富语义的特征,提升对输入信号的稀疏特征提取质量.最后,针对log正则化函数的非凸优化问题,本文使用近端凸差分算法对模型目标函数的非凸优化问题进行求解优化,首先使用凸差分分解将目标函数的非凸log函数转换为两个凸函数的组合,从而将非凸非光滑的目标函数优化问题转换为非光滑优化问题,然后继续使用近端梯度法求解优化求解非光滑的凸优化问题,开发基于近端凸差分方法的log卷积变换学习算法.通过在多个公开的人脸图像数据集的特征提取分类实验结果表明,本文提出的基于log正则化稀疏约束的卷积变换学习算法在稀疏特征提取精确度实现了对现有的基于l0范数与l1范数稀疏约束的卷积变化学习算法的突破,并且,通过层次拓展实验,验证了基于log正则化函数的多层卷积变换学习在单层的基础上进一步提升了稀疏特征的提取质量.
其他文献
科创板是我国主板的一种补充,主旨在于帮助高成长的科技型和创新型企业进行资本运作,为成长型企业提供上市途径,帮助企业进行融资发展,上市门槛相对较低。本文以金山办公的IPO发行价的确定为研究对象,对公司的盈利状况、负债情况和运营情况进行分析,详细解析金山办公在上市之前的财务状况,并做好后续预测工作。还分析了多种IPO定价模型,在进行综合比较后,最终选择现金流折现和经济附加值折现的IPO定价模型进行应用
学位
随着科技的发展与时代的进步,现在房地产企业的发展速度以及企业规模与数量逐年递增,房地产企业之间的市场竞争日趋激烈,公司之间的产品差异也不大,在品牌竞争中,房地产公司必须树立自己的品牌并实施有效的营销策略。根据国内和国外房地产公司的市场研究策略,分析了房地产公司品牌管理的特点。在开发过程中,房地产公司应及时发现并解决自己的问题。房地产公司必须在其品牌发展过程中保持产品和服务的质量,合理利用品牌优势来
学位
进入21世纪以来,勘探、抢险救灾等场景的任务需求变得愈发复杂,传统移动机器人已经无法满足救援人员的需求,因此,四足机器人因其具备优异的越障能力而受到关注并迎来蓬勃发展。目前,虽然国内外研究学者在仿生四足机器人移动控制领域取得了一定的研究成果,但针对复杂未知环境中四足机器人的移动控制研究仍有诸多不足,其原因包括:第一,机器人本体不具备感知环境的能力,无法动态调整移动控制策略;第二,机器人移动控制通常
学位
近几年,在国家经济实力不断提升以及医疗行业政策利好频传的大背景下,医疗器械产业整体发展势头迅猛,为医疗器械专业物流带来了广阔的发展机遇。但是,由于医疗器械设备的专业性、产品及流通渠道的特殊性以及发展历程的短时性,医疗器械专业物流发展还存在成本高、效率低、管理差、难以满足客户需求等问题。此时的医疗器械物流管理人员已经越发的感觉到,要想解决这些问题,必须要引入先进的物流管理理论和方法,秉持以客户需求为
学位
5G时代对网络的吞吐量、时延和可靠性提出了更高的要求,以支持多种业务场景并满足垂直行业差异化需求。融合了软件定义网络(SDN)和网络功能虚拟化技术(NFV)的网络切片已经成为5G网络服务多样化的关键性技术之一。通过网络切片,网络运营商可以在同一个物理网络基础上构建出多个相互独立的逻辑网络,以满足不同服务的特定需求。然而,5G网络在扩大服务范围的同时,也面临着更广泛的攻击威胁,增加了网络受分布式拒绝
学位
中国民航业正处于民航强国转型的重要时期,建国以来民航建设也进入高峰期。伴随着建筑与航空技术的发展,机场设计的规模、工艺以及技术手段的选用日益复杂,建筑工程的使用安全性能对设计院进行设计工作中的质量管理水平提出了更高的要求。本文通过A机场实际工程项目在推进过程中存在的质量问题和变更的梳理,总结出设计院在进行机场项目中,设计管理尤其是质量管理方面,经营部门及生产部门应承担的职责及在设计质量管理方面存在
学位
机器视觉技术在产品表面质量检测中有着广泛应用。随着深度学习在图像、文字识别中表现出的优异性能,以深度学习为核心的新一代机器视觉技术引起工业界和学术界的广泛重视。但是,面临着工业缺陷种类繁多、缺陷特征难以提取以及数据标注工作量大等问题,因此本文研究基于弱监督的表面缺陷检测框架,即仅用图像级标签实现缺陷检测并且还能够预测分割图像缺陷区域,主要工作内容如下:1)通过大量调研缺陷检测领域的相关文献,深入了
学位
近年来,宏观经济下行压力持续加大,各行业聚焦稳增长。国家积极推进供给侧结构性改革,推动经济转型升级,全力确保行业经济持续稳定发展。交通运输业作为国民经济的基础性产业,是经济和社会其他行业发展的纽带和连接,衡量“因城施策”下的交通运输业的结构调整和服务能力,建立一个能够反映和评价城市交通运输生产发展状况的代表性总量指标具有重要意义。本文围绕构建大城市交通运输服务能力评价指数体系,首先通过对城市中各运
学位
众所周知,随着计算机科学技术的发展,人工智能领域的相关研究近年来一直在进步。当人们开始尝试使用计算机解决更复杂的任务时,深度学习算法随之诞生。截至目前,深度学习算法已经在多个领域为人们解决了诸多问题,其中,人脸识别是深度学习最重要的应用领域之一,近年来,随着深度学习算法的发展和大量数据集的积累,人脸识别取得了关键性的研究突破。然而,大规模人脸数据集中通常含有大量噪声标签,这会降低模型的鲁棒性并使训
学位
随着当今半导体产业不断地发展,半导体设计和制造的工艺也愈加复杂,这其中MCU作为半导体行业中一种热门的芯片种类,具有应用广泛性和通用性极高的特点,其芯片内部系统设计的集成度和复杂度也在不断提高,对于MCU功能验证的要求也是在不断攀升,如何设计出尽可能真实的激励,从而将设计中不符合规范的地方找出来,成了MCU验证工作所面临的重要挑战。而激励的产生和作用又依托于一套功能验证平台,因此,构建一套具有高完
学位