基于深度神经网络特征提取的异常检测算法优化及电路设计

来源 :东南大学 | 被引量 : 0次 | 上传用户:qiaoqiao624
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
异常检测的基本目标是检测出偏离整体数据特征的稀少数据,近年来随着互联网技术的快速发展和大数据时代的来临,数据增长速度加快,数据多样性增加,异常检测问题得到越来越多的关注,越来越多的应用在网络入侵、信用欺诈、故障检测、医疗诊断、信息安全等领域中,特别是无监督式的异常检测技术,应用场景更广泛、技术难度更大,因此对其进行研究具有重要的意义。本论文首先对异常检测领域相关技术进行了总结,比较了现有的异常检测方法,选择数据异常检测领域的两个难点问题:处理高维数据时的检测效率降低问题、异常数据占比变化时检测模型鲁棒性难以保证的问题。本论文从深度自编码器的结构上进行了改进,保留了其基于重构误差的异常检测技术优势;并利用高斯过程回归算法的高可靠性弥补了深度自编码器在异常数据比例较高时检测性能的不足,提出了一种针对高维、高异常率数据的新型无监督式异常检测算法,从而提供了一种能同时有效地缓解上述两个难点问题的方案。本论文进一步优化了深度自编码器和高斯过程回归的训练方法,给出了一种自监督式的训练方法,该方法迭代地以预测结果作为标签的方式进行训练,在20次迭代之后有效收敛。通过Python语言编写仿真实验代码并进行了仿真实验,相比较离群点检测算法、单类支持向量机、深度自编码器等传统异常检测算法而言,新型混合异常检测算法在检测性能上有明显的提升,在MNIST、CIFAR-10、Fashion MNIST、STL-10基准数据集上的异常检测性能指标AUC平均值分别达到了0.961、0.669、0.865、0.684;特别是在输入数据维度高、异常数据占比变化大的情况下,新型混合异常检测算法的检测效率更高、检测性能所受影响更小,能保持相对稳定。本论文完成了新型异常检测算法相应的逻辑设计,包括卷积运算模块、全连接运算模块、激活函数模块和指数运算模块的逻辑设计;通过编写Verilog HDL代码完成了数字电路的仿真与综合,Vivado仿真结果表明各模块功能正确;在PYNQ-Z2开发平台上进行了验证,虽然计算中精度有一定的损失,但是在MNIST数据集上的异常检测AUC平均值仍达到了0.873,优于单类支持向量机和深度自编码器的异常检测性能。
其他文献
近年来,随着地铁上盖物业的兴起和发展,我国的各大城市,包括北京、上海、深圳、杭州等进行了地铁上盖物业的尝试和开发。但是,由于地铁上盖物业的基础直接布置在振源之上,致使其振动敏感性比地铁沿线建筑更强。尽管地铁列车引起的振动一般都低于结构的破坏振级,不会造成像地震那样的直接破坏,但它能引起结构及室内设施的局部振动,产生二次结构噪声,使人明显感觉不适,造成失眠、烦躁等困扰。为了研究振动在上部结构中的传播
传统的核磁共振仪器体积庞大,难以移动,限制了其在生物标记物现场即时检测中的应用。为此,本文通过设计与制造一种便携式的Halbach永磁体结构,研制便携式核磁共振仪器探头、双工器和前置放大器等关键部件,组装一台面向生物标记物现场快速检测的便携式核磁共振仪器,以人体免疫球蛋白G(IgG)为实验对象,实验验证便携式核磁共振检测仪的可靠性和准确性。论文取得的具体成果如下:(1)便携式Halbach磁体的设
随着科技的进步,新能源汽车的发展日新月异,其安全性也备受关注。由于新能源汽车采用大量高压大功率线缆进行能量传输,从线缆辐射的电磁场不仅可能会影响车辆周围的无线电设备,还可能导致车厢内部电气设备在工作时出现故障,从而引发车辆行驶的安全性问题。为抑制从线缆辐射的电磁场对周围电子设备的电磁干扰问题,工程上常采用屏蔽线缆来传输信号,定量评估屏蔽线缆与连接器的电磁屏蔽性能是屏蔽线缆与连接器选型及线缆辐射发射
随着我国农业机械化的不断发展,国内对动力换挡拖拉机的需求越来越大。动力换挡拖拉机因其在换挡过程中动力连续且充足、作业效率高、能耗低而备受关注。变速器设计作为动力换挡拖拉机开发过程中的重要环节,一直以来也是各农业大国拖拉机技术的研究焦点。国外在这一领域起步较早,并开发了一系列优秀的变速器产品。近年来,国内对拖拉机变速器的开发研究也投入了大量资金,但大部分投入量产的产品依然借鉴了国外的技术,自主开发、
图像文本描述有很多应用场景,可以为图像自动搭配标题,也可以转化为文本帮助视障人士更好地理解生活中图像的内容。卷积神经网络(CNN)具有特征抽象提取的能力,长短期记忆网络(LSTM)能处理时序数据,将两者结合,能够自动生成图像文本描述。但是面向实际需求时,深层神经网络计算量大并且CPU串行的执行方式不能很好地利用网络并行性完成计算,对设备的性能提出了很高的要求,因此不能支持低功耗移动端的实时应用。针
AlGaN材料作为第三代半导体材料在深紫外发光二极管(DUV-LEDs)等光电子器件领域具有非常广泛的应用前景。理论上,由非极性Al Ga N材料制作的UV-LED,由于完全抑制了极性Al Ga N材料中存在的量子限制斯塔克效应,因而可以实现更高的发光效率。本论文利用金属有机化合物化学气相沉积(MOCVD)技术,对非极性(112?0)a面Al Ga N材料的n型掺杂进行了细致深入的研究。通过对外延
目标检测是计算机视觉领域的重要研究方向,广泛应用于交通、医疗等诸多领域。目前基于深度学习的目标检测算法在精度上取得了突破性进展,但是由于其存在参数量和计算量庞大等问题,仍然无法广泛应用于计算和存储能力有限的嵌入式设备。本文基于单步多框检测网络(Single Shot Multi Box Detector,SSD)设计了一套轻量级目标检测算法方案,包含网络优化、通道剪枝、知识蒸馏和存储优化四个部分,
工程招标代理机构作为招标投标过程中的重要服务机构,对保证招标投标活动的合法性,提高招标人投资的收益,促进招标投标活动公平公正有着重大意义。由于相关政策和招标人经验的缺乏,招标人在选择工程招标代理机构的过程中容易发生逆向选择问题导致挑选的招标代理机构不具备相应的能力,影响了招标投标活动的正常进行。因此,招标人应加强对选择工程招标代理机构的重视。本文以工程招标代理机构为研究对象,其主要目的是通过对历史
拉索作为现代大跨度桥梁的关键构件,对环境介质的侵害较为敏感,且防护体系破损情况不易检查,其腐蚀问题是桥梁工程运营维护的关注重点之一。目前对于服役期间拉索健康状态的检测与监测主要集中在拉索的损伤和断丝方面,而对于其早期腐蚀的检测与监测研究较少。由于电阻传感技术在金属腐蚀监测中具有较高的灵敏度,本文以拉索中含锌铝合金镀层的高强钢丝为研究对象,先后进行了基于电阻传感的钢丝腐蚀监测理论分析、相关参数标定试
近年来,随着网络社交平台的迅速发展,社交媒体也随之兴起。社交媒体每天发布海量信息,内容主题涉及各个领域。内容中隐含的情感信息对舆情监测、民意调查等有巨大的利用价值。然而,目前的情感分析技术主要针对通用文本,在社交媒体场景下存在诸多问题:社交媒体内容日益多元化、专业化,致使情感分析模型在没有先验知识支持下难以充分理解社交媒体信息;传统情感分析算法分析粒度较粗,难以深度挖掘网民情感产生的原因;社交媒体