深度超球支持向量机

来源 :云南财经大学 | 被引量 : 0次 | 上传用户:packey80
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
异常检测是检测与大多数观测偏离的数据的一类任务。深度混合模型在当前的异常检测任务中拥有良好的表现。然而,由于浅层模型的理论性质问题,现有深度混合模型缺乏精确的求解方法。这严重影响了这些深度混合模型的分类性能和求解速度。针对上述问题,本文提出了完全深度超球支持向量数据描述(Complete deep hypersphere support vector data description,CDH-SVDD)和完全深度超球多类支持向量数据描述(Complete deep hypersphere multi-class support vector data description,CDHMC-SVDD)两种深度混合模型,分别适用于正常数据单峰分布与正常数据多峰分布的情形。本文中统称其为深度超球支持向量机(Deep hypersphere support vector machine,DH-SVM)。该模型拥有精确的求解算法,从而能够拥有更强大的分类性能和更快的求解速度。同时,该模型理论性质优良,具有很好的可解释性。针对正常数据单峰分布的情形,本文对ν-SVDD进行改进,提出了改进的ν-SVDD模型。改进模型对应的优化问题为凸优化问题且满足强对偶性,这使得模型参数在引入神经网络后可以被精确求解。之后,本文基于改进模型提出了CDH-SVDD及该模型的精确求解算法,并证明了模型中超参数ν的上下界性质。本文在CIFAR-10等7个数据集上同5种模型的对比实验结果表明,CDH-SVDD通常拥有比其他模型更高的AUC值和F1分数。同时,CDH-SVDD通常拥有比其他深度混合模型更快的收敛速度和求解速度。针对正常数据多峰分布的情形,本文对MS-SVDD进行改进,提出了改进的MS-SVDD模型。改进模型解决了原模型对应的优化问题非凸且强对偶性无法保证的问题。这使得该模型的参数在引入神经网络后能够被精确求解。之后,本文基于改进的MS-SVDD模型提出了CDHMC-SVDD及该模型的精确求解算法,并证明了模型中超参数ν的上下界性质。本文在MNIST等3个数据集上同7种模型的对比实验结果表明,CDHMC-SVDD通常拥有比其他模型更高的AUC值。同时,该模型的收敛速度明显快于其他深度混合模型,这也弥补了在该模型参数更新过程中求解凸优化问题所带来的时间花费。即使模型参数在更新时需要使用全部数据集,CDHMC-SVDD的求解速度与其他模型也并无明显差异。
其他文献
海因兹·霍利格尔([瑞]Heinz Holliger,1939-)作为欧洲当代重要的双簧管演奏家、作曲家、指挥家与钢琴家,他的创作数量庞大、形式丰富,涉及室内乐、管弦乐、歌剧等多种体裁。这些作品的织体与音响都颇为复杂、且总体质量甚高,体现出他精湛的作曲技术与极高的艺术水准。本文以他的三部管弦乐作品《呼吸之弧》(Atembogen,1975)、《音响九阕》(Tonscherben,1985)、《哀辞
学位
中国劳动力短缺和工资增长的现象引起了众多学者对中国剩余劳动力是否消化完毕,“人口红利”是否消失的思考,然而对于该问题经济学界对此却没有形成统一的结论,原因在于传统的二元经济理论无法解释工资增长与剩余劳动力并存的现象,对于该问题经济发展两阶段理论构建了工资增长的动态模型,将工资增长率与就业率的关系作为分析剩余劳动力是否消化完成和划分经济发展阶段的标准,由此对二元经济理论进行了发展。基于此本文采用经济
学位
当前世界正处于百年未有之大变局,新一轮产业变革深入发展,世界动荡变革也呈现新趋势,使得经济发展面临新挑战。为应对我国发展阶段、环境、条件变化,2020年中共中央首次提出,构建国内大循环,国内国际双循环相互促进的新发展格局。2022年党的二十大报告再次重点强调,并突出国内大循环内生动力目标,可见推动国内大循环的重要性。我国社会主要矛盾已转化为人民日益增长的美好生活需要和不平衡不充分的发展之间的矛盾,
学位
合作行为的产生及演化是极具挑战的科学问题之一。作为一种常见的利他行为,合作利他的产生及演化吸引了诸多经济学家的关注,个体利益最大化与集体利益最大化的社会困境却依然存在。依托博弈模型的合作行为决策理论作为定量刻画群体合作过程及个体利他行为表征的方法,是有效分析、预测与控制群体行为的基础与前提。随着演化博弈论和行为经济学实验的发展,经济学家通过分析经济人的行为发现了众多利他倾向的合作行为,利用多学科交
学位
在党的二十大报告中指出,我国全面建设社会主义现代化国家的首要任务是“高质量发展”,并再次强调了新发展理念中“创新是第一动力”。我国在发展的过程中,需要全面贯彻新发展理念,那么如何进一步落实创新,这就需要推动创新驱动发展战略的深入实施。在二十大报告中最新指出“深入实施创新驱动战略”和“加快实施创新驱动战略”,也就说明了当前创新驱动发展战略的实施尤为关键,但是在实施创新驱动发展战略过程中又亟需创新理论
学位
近年来,我国经济蓬勃发展,国民收入持续增长,旅游业也迎来了前所未有的发展机遇。酒店业作为旅游业的重要组成部分,得到了国家政策的有力支持,行业发展相当迅速,同时酒店数量不断增加,酒店的个性化服务也在不断完善,酒店行业竞争日趋激烈。酒店能为游客提供更加优质的住宿体验,如果没有特色的酒店服务,旅游者的消费行为和决定也会发生改变,这对旅游业而言会产生重大影响。目前人们对酒店的消费需求已不仅仅是产品本身,而
学位
数字贸易是快速发展的数字技术作用于贸易领域而形成的一种新的贸易形态,其已成为现代国际贸易的主要形式。数字贸易蓬勃发展的同时,对现有的贸易统计提出挑战。截至目前,国际国内对数字贸易的概念内涵、行业分类、测度范围、测度方法等方面还不统一,没有确定一致的数字贸易统计体系。鉴于此,本文首先通过阐述贸易和贸易统计的发展历程,提出贸易统计滞后于贸易发展速度,数字贸易的测度面临困难的问题;然后,在现有贸易统计规
学位
城市化是在一个尺度空间内人口向城市空间定向集聚的表现。城市化既是一种资源配置机制,又是促进经济增长的系统要素。伴随人口集聚,资本、技术等生产要素也向城市集聚,形成生产函数,城市成为空间的增长极。随着城市的推进,城市群、城市圈出现,城市化在国土空间呈显著的集聚分布。在城市化的影响下,空间发展水平出现分化,区域差距随城市化呈现出扩大的态势。然而,城市化水平具有增长的极限。高城市化区域进入城市化中后期,
学位
创新决策属于投资决策,涉及企业的资本配置,公司内部治理团队包括高级管理人员、监事和董事。董事属于公司的治理层,董事组成的董事会负责制定公司的创新决策;高级管理人员属于执行层,负责执行董事会的创新决策;监事则监督高级管理人员和董事履职的合法合规性,防止企业的创新活动出现违法违规行为,维护企业的合法权益。上市公司应当保持高级管理人员、监事和董事的稳定性,以激发高质量的创新。以往的研究关注于公司内部治理
学位
2020年我国从供给、需求视角首次提出了“双循环”概念,过去40年,国内循环和国际循环双轮驱动,特别是外循环发挥重要作用,国际贸易的繁荣和国际直接投资的持续流入是我国总体经济表现优异的重要原因,以外循环拉动经济增长的现状短时间内并不会发生实质性的改变。因此厘清外循环对产出的影响效应,对推动中国产业乃至整体经济增长方式转型具有重要现实意义。传统的测算国际贸易对产出效应的方法存在一定局限性,该方法仅仅
学位