基于深度生成模型的多维时序异常检测方法

来源 :北京交通大学 | 被引量 : 0次 | 上传用户:kangbb
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
如今,多维时序数据越来越多地被收集到各类信息系统中,为完成各种数据挖掘任务提供数据基础。然而,该类数据维度更高,无效的信息干扰也更为严重,使得对于多维时序数据的研究面临极大挑战。其中,针对多维时序数据建立有效的异常检测模型,是当下数据挖掘研究及应用的重点。目前研究者们已对该类问题提出多种解决方案,但仍然存在一定局限性。首先,异常检测领域的数据标签稀少,人工标注成本过大,导致监督方法在现实世界的异常检测系统中难以取得预期效果。其次,多维时序数据具有高度的时序依赖性,并蕴含着大量的时序特征,现有方法未能充分考虑这些影响因素。最后,多维时序数据的不同维度间存在关联性,多个维度可能协同变化从而导致跨维度关联异常,仅考虑单维序列信息不能准确发现异常。针对以上问题,本文完成相关研究,主要贡献如下:(1)为了缓解异常数据稀疏问题,同时充分利用数据时序特征,本文提出基于时序特征的深度生成式多维时序异常检测模型。首先,该模型设计了基于变分自编码器的异常检测基本框架。利用编码器、解码器相互对称的结构与深层次的网络,获得数据在隐空间中更为抽象的表达,完成基于重构的深度生成式异常检测任务。然后应用时序自注意力机制,对数据进行时序特征方面的增强,以获得更为准确的数据隐层表示向量。最后分别对变分自编码器的编码器与解码器部分进行改进,融入门控循环单元进一步捕获数据中的复杂时序依赖性,从而获取数据的上下文信息。在三个异常检测数据集上进行实验,结果显示该模型相较于主流基准方法有更好的性能,验证了应用深度生成模型与挖掘时序特征在异常检测任务中的有效性。(2)为了将数据不同维度的关联性融入模型特征表示,本文以前一模型为基础,提出融合维度相关性的多维时序异常检测模型。该模型将图结构应用于时序数据,利用多维时序数据的维度特征作为图节点,各维度的相关关系作为边。随后通过图注意力网络提取近邻节点的相关性,学习数据真实结构的复杂关联性,从维度特征的角度进一步增强数据表示。最终,综合考虑数据的时序特征与维度相关性,从两方面对多维时序原始数据进行特征增强,提升模型异常检测性能。在三个异常检测数据集上进行实验,结果显示该模型达到了优于主流基线模型的异常检测效果,验证了在模型中融合维度相关性对于异常检测任务的有效性。
其他文献
联合用药对复杂疾病的治疗具有非常重要的应用价值。通过药物组合治疗,可以提高临床治疗效果,减少药物的副作用,甚至可以帮助病人克服耐药性。近年来,联合疗法被研究人员应用到癌症治疗中,已经成为现代癌症治疗中不可或缺的一种治疗手段。在生物学中,研究人员凭借着先验的生物知识与临床经验,通过生物实验筛选方法来确定有效的药物组合。虽然传统的实验筛选方法已经有效地发现一批药物组合,但是随着大量新药被研发出来,药物
学位
与传统的协作过滤和基于内容的推荐不同,序列推荐通过对用户与项目之间顺序行为的建模,很好地捕捉到用户与项目之间的交互以及随时间变化的用户偏好。会话是对序列的更细粒度的划分,会话推荐可以更好地捕获用户的短期兴趣;图神经网络能对非欧式数据进行向量化表示,在推荐系统中,可以很好地捕获用户项目之间的关系,两者越来越受到业界广泛关注。在研读大量相关文献后,发现目前基于会话的序列推荐仍然存在以下问题:一是关注于
学位
序数回归(Ordinal Regression,OR)是指在具有有序类别数据的基础上建立分类模型。目前,序数回归模型得到了广泛的应用,但是现有的序数回归算法主要在单视角数据上建立分类器,面向多视角数据的序数回归算法还存在一定的空白。此外,由于采样误差、传输错误等原因,多视角数据可能存在不确定信息。如何利用有序数据中的多视角信息和处理有序数据中不确定信息,是本文亟待解决的问题。针对上述序数回归目前存
学位
三维目标检测是自动驾驶车辆环境感知的关键技术之一,通过提供周围场景中丰富的三维信息,为自动驾驶的下一步规划决策提供重要依据。鉴于单目相机价格便宜、容易安装等特点,基于单目的三维目标检测在商业应用中受到广泛青睐。为此,本文重点针对车辆、行人及非机动车检测,研究基于单目的轻量化三维目标检测算法,并实现了算法在移动端嵌入式设备SE5 AI平台的部署。主要研究内容如下:(1)单目三维目标检测基准算法测试。
学位
现今的药物研发工作所消耗的人力物力、时间和资金都变得越来越多,并且每年的申报名额也在逐年减少,药物研发工作变得越来越难以开展。得益于前人的科研工作经验的总结和大数据化的数据交流的发展,人们逐渐倾向于寻找一种成本低、效率高的方法应用于药物的研发初期,为现有药物提供高置信度区间的潜在适应症,这种技术被称为药物重定位。虽然目前已有不少科研人员提出了极具研究价值的预测模型,然而,在药物相似性和疾病相似性的
学位
多标签学习(multi-label learning,MLL)是监督学习的一种,但与传统监督学习不同的是,在多标签数据中,一个示例往往与多个标签相关联。多标签学习中,一个对象往往可以通过多个方面来描述。例如,在网络图像检索中,一幅图像可以使用图像的视觉特征集或者图像周围文本的文本特征集来进行描述。在这些应用中,一个对象与多个视角相关联,并且每个视角都从不同的方面来描述同一对象。因此,如何利用多视角
学位
中医智能处方推荐指利用人工智能技术,根据患者病历信息进行学习,对候选中药进行预测,以模拟医生开具处方的过程。近年来许多学者围绕中医处方推荐开展了相关研究,但目前领域内仍存在亟待解决的问题,如现有临床诊疗数据具有“一多一少”的特点、无法对临床表型中的“未登录词”形成表示、现有处方推荐方法性能较低、现有方法推荐结果的配伍合理性不强等。为解决上述问题,本文围绕中医处方推荐开展了以下三方面研究。第一,针对
学位
资源分布情况复杂,资源指派涉及到较多的影响因素,合理划分空间以评估资源数量及利用资源,使得空间呈现出明显的多维特性,例如城市交通网络划分和物种集聚地划分等。为了在资源有限的情况下,根据服务对象的相关需求,高效利用资源,保证空间主体划分和客体资源利用的利益最大程度,本文主要研究多维空间中资源分配的指派问题,通过任务属性划分空间网络,避免资源分配和使用的效益因空间约束过度耦合而降低。合理分配相应的资源
学位
文本摘要生成是解决信息过载问题的有效方法之一,在新闻标题生成和知识科普领域有着广泛的应用。文本摘要生成是指从源文本中提取能准确代表原文内容的简短概述,主要分为抽取式摘要和生成式摘要,生成式摘要较抽取式摘要具有更高的灵活性,成为目前文本摘要生成的研究热点,但生成式摘要还存在问题,例如,未登录词、生成重复、暴露偏差等,导致生成的摘要并不理想。本文针对上述问题,基于序列到序列框架,利用指针生成网络和强化
学位
现实世界中存在各种能够用图表示的数据,图作为一种复杂的数据结构类型,能够很好地表征不同对象间的复杂关系。对图进行分类是一个十分重要且富有挑战性的问题,在生物医药等领域具有广泛的应用,如化学分子性质预测和新药物研发等。早期针对于图分类的研究,主要是通过计算图与图之间的相似度的方式来判断图是否属于同一类别,例如统计图中特定子图的数目。但是由于需要一定的先验知识来选择合适的子图结构,所以很难应用到不同领
学位