基于深度强化学习的网络入侵检测方法研究

来源 :王君虎 | 被引量 : 0次 | 上传用户:zzggwd
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
作为一种积极主动的防御技术,入侵检测系统通过对网络攻击进行有效检测来守护网络环境的安全稳定。然而,动态且复杂的网络环境增强了网络攻击的隐蔽性和危害性,日益严重的网络攻击威胁给现有网络入侵检测系统带来严峻考验。针对当前入侵检测系统面临的关键问题,本文引入相关策略进行研究,旨在提升网络入侵检测系统的检测性能。本文的主要研究工作如下:首先,针对现有入侵检测系统对网络流量数据特征提取不完备而导致的识别能力不强问题,从提升模型特征提取能力的角度出发,结合网络流量数据的特点,将卷积神经网络、双向长短期记忆网络以及深度神经网络进行集成,提出基于空时特征融合的CBDDN网络入侵检测算法。在NSLKDD和UNSWNB15两个数据集上的仿真结果表明,该模型可以功提取到网络流量较为完备的数据特征,有效地提升了模型的检测性能。其次,针对模型对数据标签依赖程度高的问题,将网络入侵检测过程构建成一个马尔可夫决策过程,采用双重深度Q网络算法进行求解,并使用CBDNN模型对经典双重深度Q网络算法进行改进,以增强算法对环境的感知及分析能力,形成基于改进双重深度Q网络的CBDNNDDQN入侵检测算法;此外,针对数据不平衡问题,采用Borderline-SMOTE算法在数据层面对数量占比较少的网络流量数据进行过采样处理,降低数据的不平衡程度。通过仿真实验并结合国内外现有入侵检测算法在多项性能评价指标上的得分情况,验证了算法的可行性和有效性。最后,针对网络入侵检测模型部署到现实网络环境后对零日攻击检测能力不强的问题,采用主动学习算法进行求解。将DDQN算法引入主动学习算法框架,形成基于主动双重深度Q网络的ADDQN网络入侵检测模型。将DDQN模型作为样本选择策略,对关键样本进行精准筛选并标注,在提升模型检测性能的同时,尽可能减少数据的标注成本;此外,为评估模型对零日攻击的检测能力,引入了一种新的性能评价指标Z-DRz对模型的零日攻击检测率进行评估,分别进行二分类和多分类场景下的零日攻击仿真,多组实验结果验证了本文所提算法的有效性和必要性。本文的研究工作分别针对现有入侵检测算法共同面临的数据特征提取不完备、数据标签依赖程度高、数据不平衡以及零日攻击等问题,分别从数据层面以及算法层面展开研究,为现有的网络入侵检测技术提出了一种可行的建模思路,具有良好的应用潜力。
其他文献
报纸
<正>谈到高血压,大家应该都不陌生,我们常说的“三高”中就有它的身影的。我国是人口大国,相应的高血压患者也较多。相关研究显示,中国是高血压的高发国家,发病率已经达到了23.2%,也就是说,我国10个人中至少有2个高血压患者,可能是你的父母,你的朋友,也可能是你自己。高血压是多种疾病的导火索,会使冠心病、
期刊
随着教育改革的不断深入,培养高职学生成为德智体美劳全面发展的人才,将其塑造成有理想、有道德、有信仰和思想丰盈的个体,是社会主义教育的根本目标,“五育融合”视角下的人才培养工作也是高职思政育人体系建设的重要载体。高职教育应结合工作需求主动调整教育方向,按照培养社会主义接班人和建设者的思政工作要求,并通过实施途径、实施主体与实施措施三方面内容加强思政育人体系建设,促进思政育人工作地进一步落实。
期刊
以"Web of Science核心合集"中1980—2018年共计931篇文献为样本,借助Cite Space信息可视化软件及内容分析法,对国外休闲动机研究文献进行全面分析。研究结果表明,国外休闲动机研究分为起步探索(1980—2002年)和快速发展(2003—2018年)两个阶段;早期学者侧重休闲动机概念、理论、分类、量表等研究探索,21世纪以来,理论与实证、定量与定性分析相结合研究日益增多,
期刊
利用现代信息技术,计算两物块在水平面上运动的碰撞次数,证明它与圆周率的关系,并构建适合编程计算的公式及算法。
期刊
目的:确定通窍活血汤(Tongqiao Huoxue Decoction,THD)的提取工艺以及开展其治疗脑梗死病(Cerebral infarction,CI)的代谢组学研究。以体内的内源性小分子物质变化水平,探讨通窍活血汤治疗脑梗死的代谢机制。为临床应用通窍活血汤治疗脑梗死提供科学可靠的实验性数据支持。方法:1.通窍活血汤的提取工艺研究运用高效液相色谱法(High performance li
学位
初中数学教学过程中渗透数学思想让学生的综合学习能力得到全面的进步和提高,数学思想凝结了数学知识的精髓、数学的灵魂,隐藏着基础知识。在以往的学习中,初中生常常忽视了数学思想的学习以及应用,本文分析了如何在初中数学课堂中渗透数学思想,强化课堂教学环节,有效提高初中数学课堂的教学质量。
期刊
智能电网的应用能够在很大程度上提升电网系统运行的安全性和稳定性,进而促进我国电网现代化建设进程的深入发展。电网调度是保障智能电网运行效率和质量的基础,技术人员需要掌握与运用智能电网调度运行的关键技术,保证智能电网的安全运行。本文首先分析了电网调度的功能及智能电网调度存在的问题,之后阐述了智能电网调度运行的关键技术,充分发挥技术的优势功能,促进我国智能电网的稳定发展。
期刊
在初中数学教学中,我们应该认识到初中学习的过渡作用。它不仅继承了以前的小学学习内容,而且为以后的高中学习打下了良好的基础。具体来说,数学学习的内容是非常重要的内容。从难度角度看,初中数学明显高于小学数学,部分数学内容涉及相关的数学思想。
会议
初中数学思想方法教学对学生数学兴趣、思维品质、综合实践能力有深刻影响。以核心素养为导向的新一轮课程改革愈发重视数学思想方法的渗透。本文结合数学思想方法内涵、内容与意义分析了将数学思想方法渗透在初中数学教学中的三个基本方向并提出了几点教学策略,希望能为一线教师带来一些启发,仅供参考。
期刊