基于校园DNS日志数据的可视化分析研究与实现

来源 :郑州大学 | 被引量 : 0次 | 上传用户:kassilw
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着网络的不断发展和应用的普及,人们对网络的依赖越来越多,网上聊天、休闲娱乐、电子购物等随处可见。在网络应用的进行中,其中产生了大量的数据。而流量日志数据就是其中的一类,它实时记录用户在网络中的行为踪迹,数据规模比较大。这些数据中蕴含着业务需求与异常行为等比较丰富的信息,而这些信息在数据中是难以直接发现的。为了便于数据阅读者获取其中蕴含的信息,需要使用一些方法将这些隐藏的信息发掘出来,可视化就是一种很好的手段。   针对大规模网络流数据中用户与资源的业务需求和异常行为的发现等问题,本文设计了大规模流数据可视化分析的架构模型。首先,从网络中采集数据,然后对采集到的数据进行清洗,提取数据中的属性特征,最后将属性特征按照不同的关系类别使用不同的可视化展现形式表示出来并进行分析。在研究过程中,主要解决了以下几个问题:(1)对大规模流数据的索引进行优化,选择高效的方法以实现实时处理;(2)根据数据中属性特征之间的关系提取出不同的属性特征;(3)对不同的业务需求选择合适的可视化展现方式进行分析;(4)对系统的不同模块进行集成,以实现数据采集、数据处理与图形生成的实时可视化分析。   最后采用校园网DNS日志数据对可视化的架构流程进行验证,从时间区间、空间区域、属性排名和属性关联等方面对数据进行属性特征提取,通过不同的图形表现形式对数据进行可视化展现并作简单分析。达到了提供数据的直观表现形式、发现数据中隐含信息的目的,为管理者更好的管理网络提供了帮助。
其他文献
随着多媒体技术和计算机网络的发展,在数据库技术与计算机视觉的共同作用下,图像检索已经成数字图像处理的一个重要领域和研究热点。基于内容的图像检索技术优于传统的检索方法
近年来,由于互联网资源的逐渐多样化与分布式存储,基于P2P技术的分布式FTP搜索引擎已成为FTP资源搜索的研究热点,其中,索引技术一直是提高FTP检索效率的关键。针对FTP资源检
近年来,数字图像真实性的检测和判定已经逐渐成为图像自动化处理领域的一个重要分支。它非常广泛地应用于现代社会生活的各个方面,如司法取证,商标防伪,医学图像检测等。数字图像
随着计算机科学的迅速发展,笔迹鉴别技术在信息安全、刑事侦查和经济安全等相关领域发挥了至关重要的作用。我国是一个多民族国家,维吾尔族是人口较多的少数民族之一,其主要分布
随着Web服务技术的迅速发展,越来越多Web服务被发布到Internet上,但是单个Web服务因为其功能局限性,难以满足用户复杂的需求,将多个Web服务进行组合成为一条解决该问题的有效途径
互联网技术的高速发展使得在线购物得到极大普及,国内以淘宝、京东为代表的各类电子商务网站发展尤为迅猛。在线商品交易需要在网页中对商品属性信息进行尽可能详细的展示,这使
近年来随着各类信息的日益增多,人们对信息处理的需求促进了自然语言处理技术的空前发展。与此同时,人们对如何在海量的信息中及时找出有价值的信息越来越关注,语句压缩作为自然
随着计算机硬件、云计算和大数据等相关技术近年来的大力发展,数据安全已经成为广大计算机、互联网络用户的一个不可缺少的需求。人们无时无刻不与安全打交道。而随着互联网络
突触是神经元之间以及神经元与非神经细胞之间相互连接并进行信息传递的部位,也是人工神经网络中模拟的关键,而传统突触的模拟采用的是集成电路以及超大规模的集成电路,随着电路
在图像处理中,图像分割、特征提取和目标识别构成了由低层到高层的三大任务,目标识别与特征提取都以图像分割作为基础,图像分割的好坏直接影响着后续的特征提取和目标识别。阈值