基于层级图推理的非共享不平衡的迁移学习

来源 :湖南大学 | 被引量 : 0次 | 上传用户:lqy760305
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
无监督域适应技术(UDA)被广泛用于(1)利用来自相关源域的丰富标签数据处理目标域的标记数据的稀缺;(2)降低训练下游模型的成本,使模型能够在其他网络上重用。已有深度UDA方案往往忽略或自动删除非共享大数据,达到相同共享类别下小数据分布间的最优迁移效果,无法满足大数据时代背景下快速有效学习与海量复杂数据的需求。本课题研究面向非共享大数据的小应用任务迁移学习关键技术,以食材大数据餐厅识别小任务迁移场景作为切入点,对大数据小任务迁移学习过程进行建模,致力于同时实现大数据的自动清洗、非共享且不平衡迁移学习。本文涉及的主要工作可以总结为如下:(1)针对高噪音自动清洗去噪问题,本文利用多标签分类和卷积神经网络构建AutoClean模型,建立大数据自动清洗机制;确保落地食材采购流程中,从大数据自动清洗模块、多任务Auto-Clean分类模型以及高并发Web部署进行了架构设计;详细阐述了功能需求分析、使用Caffe深度框架训练模型、使用Tornado对食材图像分类服务搭建Restful API;经过多次测试,多任务Auto-Clean分类模型的Top 1准确率达到96.3%,Top 5准确率达到99.5%,且系统压测中QPS能够达到43.6,满足高并发需求;最后对日志进行分析和提出高并发改进方案。(2)针对实验室到真实环境的迁移问题和食材数据不平衡问题,对非共享且不平衡迁移学习任务进行形式化定义;创新性的提出一种基于层级图推理的通用图对抗域适应框架GADA,目标是利用先验层次知识,以图推理增强领域对抗对齐特征表示。在对抗域自适应方法中加入了层级图推理(HGR),通过层次注意力、非线性映射和图归一化来学习直接的语义模式,HGR层通过节点预测将局部特征聚合到层级图节点,并通过所有源类的层次图推理增强域对抗性对齐特征。GADA作为一个通用的图对抗域适应模型,可以嵌入到所有基于对抗的域适应算法,且很容易扩展大多数UDA方案,并大幅提升迁移效果。在双域不平衡的设定下,Meal-300数据集下有8个迁移任务,Office-Home数据集有6个迁移任务,本文提出的GADA(HGR)在基于对抗域适应算法上(如CDAN、MDD和GVBGD),均有大幅度提升,证明提出算法模型的高效性和层级图的强大推理能力。
其他文献
以电加热卷烟为代表的新型烟草制品国内外市场潜力巨大,国内电加热卷烟研发起步较晚,市场占比小,技术上与国外产品存在一定差距。以国外某款典型电加热产品为研究对象,结合仿真分析与实验验证,获得产品在使用过程中的流场分布情况与热量传递规律。采用三维扫描技术和其他测量手段,建立用于仿真的三维模型。通过排正己烷和其他方法,测定烟草体积和质量,计算获得烟草孔隙率、骨架密度和阻力系数等参数。基于建立的三维模型与测
弧齿锥齿轮是机械传动中用于能量和动力传输的关键部件,因其重合度大,承载力强,传动平稳,噪声小等优点,广泛应用于精密机械、大型舰船、以及空天装备的传动系统。良好啮合特性的获得是高强度、低噪声等高性能轮齿传动的关键。本文以轮齿传动接触分析(Tooth Contact Analysis,TCA)与含安装误差的TCA(Error Tooth Contact Analysis,ETCA)算法为基础,从安装调
活塞式发动机作为动力装置在小型航空设备尤其是无人机领域被广泛应用。小型航空活塞式发动机主要使用航空重油(指轻质柴油或航空煤油)作为燃料,相比汽油闪点较高,不易挥发,安全性和经济性都十分优秀。但航空重油存在难以雾化的问题,目前主流解决方案为采用空气辅助喷油系统。空气辅助喷油系统引入压缩空气与燃油进行预混合,再将油气混合物喷出,利用气动力促进燃油破碎,以较低的喷射压力实现良好的雾化效果,提升发动机的动
一直以来,矩阵问题与计算机众多研究方向结合密切,其中时变矩阵问题因数据及解随时间连续变化而十分特殊。求解时变矩阵问题时,传统数值算法因时间复杂度高而不满足实时性需求,梯度神经网络因未考虑矩阵变化速率而存在不可消除的时滞误差。零化神经网络(zeroing neural network,ZNN)采用矩阵式误差指标及参数导数补偿,成为时变矩阵问题的优秀解法。针对时变矩阵问题求解,本文着重研究加强ZNN被
随着以干细胞为基础的再生医学的兴起,干细胞治疗肾脏疾病的研究已经取得了一定的进展,其中骨髓间充质干细胞(BMSC)由于其获取方便,体外培养条件成熟以及其多向分化潜能而被广泛应用。目前,干细胞再生医学的挑战是如何对进入机体的干细胞命运(包括存活性和分化情况)进行监控。本项目前期通过SELEX技术已成功筛选出特异性识别BMSC的核酸适配体,并基于此适配体构建了激活式核酸适配体荧光探针(AAP),利用多
随着人类社会的发展,人们对惯性导航系统的精度要求进一步提高。导航精度主要由惯性元件的输出精度决定,而惯性元件对温度的变化极其敏感。惯性平台作为惯性元件的载体,其温度场的分布也会影响元件的性能。因此,为了使系统满足制导与控制的要求,有必要对平台及元件的温度场进行研究,并进行温控设计。为了改善惯导平台的温度场,本文提出了一种基于深度学习的图像建模方法,并将其应用于平台的温度均匀性优化中。本文的主要研究
风电、光伏等新能源的并网装机容量持续增加,其出力的波动性和不确定性使得系统维持电力平衡的难度不断增加,对灵活性调峰资源的需求也随之增加。为保障电力系统的稳定运行,源-网-荷各环节灵活性资源亟待进一步挖掘。为此,本文针对高比例新能源电力系统,从源网荷三侧出发,研究了提高系统灵活性的方法。主要工作内容如下:电源侧,针对沿海地区装机容量日益增加的核电机组仍以基荷运行,灵活性资源缺乏的问题,提出了考虑核电
在立法上,针对逃税行为的处罚历史上经历了从宽从缓到从严从紧、再到当下的宽严相济的演变。《刑法修正案(七)》对逃税罪的相关规定进行了修订,意图通过设置初犯处罚阻却条款寻求保障国家税收与保护税源主体、促进经济发展之间的平衡,期冀通过刑法手段与行政法手段对涉税犯罪行为的综合治理,进而达到宽严相济的刑事政策内求。然而,基于当前税收执法水平整体不高、税收诚信体系还相当缺乏、公民纳税观念普遍不强的司法现状而使
十九大报告指出绿色发展将贯彻我国各项事业的发展进程中,这是我国生态文明建设的全新要求。绿色农业作为新型农业发展模式,是应对生态环境问题,实现农业可持续发展的重要课题。随着我国城镇化进程加快,农户分化现象日益加深,农户收入与职业的差异性在一定程度上影响着农户在农业生产方式上的选择,因此农户分化现象对我国绿色农业发展影响深远。鉴于该背景,本文从农户分化角度入手,分析调研地区农户分化程度,研究农户分化对
插电式混合动力汽车(PHEVs)具有比传统混合动力汽车高得多的节油率,且不存在纯电动汽车中被广受诟病的“里程焦虑”问题,因此近年来广受工业界的关注。然而,由于存在两套较大的动力系统,PHEVs的购置成本仍然较高,需进一步提升PHEVs的燃油经济性以抵消其购置成本的增加。随着车联网的发展和车辆智能化程度的提高,道路和交通信息的准确预测和车载有效利用成为可能。通过融合前方的道路和交通信息,车载控制系统