基于深度学习的多样化图像生成

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:liu1208
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像生成属于生成模型中的一种。生成模型是指以服从某种分布的样本作为训练集,学习如何表示这个分布的模型。尽管生成模型只能生成数据而不提供密度函数估计,但是依然有着重要的研究价值。训练生成模型是对操纵和表示高维概率分布的能力的有效检验。生成模型可以引入到强化学习,也可以进行半监督学习,另外还能与多模态输出结合。除此之外,许多任务本身就需要图像生成。目前在所有生成模型中,生成对抗网络是最成功的,其原理是用生成器和判别器进行对抗训练来学习训练样本的分布。尽管目前生成对抗网络生成图像的大小和逼真程度都令人瞩目,但是依然存在问题,如训练不稳定和模式崩溃等,其中模式崩溃是本文要解决的主要问题。模式崩溃是指生成器只能生成少数几种模式的样本而不能学习到训练数据的完整分布。在训练生成对抗网络时,单个样本质量逐渐提高,样本整体分布逐渐单一,即生成图像的质量和多样性相互矛盾。针对模式崩溃问题,本文提出了一个多样性量化指标,命名为感知距离比。据此提出使生成器能从先验分布中重建训练图像可以有效缓解模式崩溃。方法是建立一个与训练图像一一对应的隐空间编码集合,不断更新编码集合使这些编码可以重建训练图像并服从先验分布。于是从先验分布中随机采样时便有几率采样到该集合的编码,并重建对应的训练图像。训练集包含了生成对抗网络能观测到的所有模式,能重建训练图像也就意味着生成器学习到了其所有可见的模式。另外,本文从如何衡量两张图像的相似程度出发,提出了多样性损失,可以灵活嵌入到各种生成任务中,包括朴素生成对抗网络、图像转换、文本到图像的生成等。由于预训练的神经网络所提取特征能有效计算两张图像之间的相似程度,本文通过最大化两张图像特征的距离与输入噪声的距离之比,无需改变网络和整体框架结构即可有效缓解模式崩溃。该多样性损失理论上可以进一步改进实现特征分离的图像生成。
其他文献
板料挤压作为板料体积成形中一类典型工艺,具有广泛的应用范围。成形力作为板料挤压工艺成形过程中的重要参数,是相应模具设计和压力机选择的重要依据,其预测研究具有重要的工程意义。板料挤压力的大小与众多参数之间存在复杂的非线性关系,目前,大部分计算模型从力学分析和成形机理出发,适当的简化材料模型和工艺模型实现成形力预测,但适用范围和计算精度有所局限。深度学习技术作为一种快速发展的人工智能技术,可以直接从大
2003年7月,社会上出现了这样一些人:他们犯罪被判了刑,却不用进监狱,只需在社会中接受针对性的管理、教育和改造。这种"高墙外的改造"就是社区矫正。我有幸在北京市社区矫正试点工作之初就参与其中,成为了社区矫正工作发展的亲历者、实践者。如今,我从事社区矫正工作已近二十年,一本本工作日记记录了我与社区矫正工作的相互陪伴、共同成长,在此撷取几段与读者分享。
期刊
Nowadays,data provenance is widely use to increase the accuracy of the machine learning models and to accelerate the training model.However,these models face the difficulties in information heredity w
学位
转基因作物自其1983年诞生以来就不断地成为人类食品安全的焦点问题,鉴于转基因食品的安全性既不能在短时间内被证实,所以关于它的安全性话题注定会长期处在人类社会的争论之中。在此情形下,通过转基因食品的标识制度来保障消费者知情权显得尤为重要。但需要注意的是,法律通过标识制度赋予消费者知情权,其目的是通过法律手段对生产者施加影响来减小消费者在信息不对称性中的弱势地位1,告知消费者潜在风险的存在。但标识制
目的:分析反复电除颤成功抢救1例急性心肌梗死合并电风暴患者的护理方法,为临床该病的救治提供参考。方法:对本例急性心肌梗死心室电风暴患者频繁电除颤成功抢救后,观察护理效果,总结经验。结果:经过周密护理后各项生命体征稳定,患者病情平稳,康复出院。结论:大面积心肌梗死患者急性期应警惕电风暴的发生,期间严密心电监护,尽快实施电复律,及时静脉应用有效的抗心律失常药物是救护成功的关键。
学术创业是工科科技成果转化的一种重要方式。近年来,在“大众创业、万众创新”背景下,我国学术创业公共政策陆续出台。然而,一些大学管理者认为学术创业会影响教师的学术产出,导致大学层面相关组织制度建设较为滞后。本研究以10所国内“双一流”建设高校材料科学与工程学科的1308名教师为样本,采用量化与质性相结合的顺序解释型混合研究方法,分析了我国一流大学工科教师的学术创业现状及其对教师个人学术产出的影响,并
在“双一流”建设的背景下,高校科技人才科研评价制度亟待改进,以激发高校科技人才创新活力,优化高校科技创新生态。因此,以高校科技人才对现行科研评价制度的认同为视角,从整体制度层面考量高校科技人才科研评价,对于调整现有制度中与科技人才发展不适应的部分并寻求改革的可能路径非常有必要。本研究基于社会认同理论和政策执行过程模型的指导,以解释型序列混合研究法为主要方法,选取我国20所“双一流”建设高校,探究科
人脸表情识别(Facial Expression Recognition),通常简称FER,是人脸识别领域的一个重要分支,它同时也是一个涉及到心理学、生物学、计算机科学等多学科的交叉研究领域。虽然目前已经有很多基于深度网络框架的FER算法,但是识别准确率和实际应用效果却并不理想,主要存在以下三个问题:1)现有公开的FER数据集质量并不高,要么是标注细致但有效数据量很少,要么数据量庞大但图像质量和标
从精神病临床高危综合征(Clinical High Risk,CHR)到精神分裂症的发病过程中,认知功能受损对疾病预后有重要影响作用,成为干预的重要靶点。相比于传统的计算机辅助认知训练,手机APP进行认知训练能够更加实时和便携,在精神卫生领域有着广阔的应用前景。本研究为一项单盲随机对照试验,入组的60名CHR随机分为试验组和对照组,试验组使用记忆注意强化训练(Specific Memory Att
标准必要专利纠纷的关键是如何确定合理的许可费。标准必要专利的特殊性、FRAND原则的模糊性以及标准制定组织的中立态度共同造成了许可费困境。此前我国法院主要以“可比较交易法”作为主要的定价方案,但在选取比较的交易方案等问题上饱受争议。域外的司法实践和理论研究中,“事后仲裁法”具有结果可接受度高、能够激励许可双方进行谈判和可操作性强等优势。以“事后仲裁法”为基础,将最终裁判权赋予法院,由法官在许可费争