基于有向图构造的数据流预测算法的研究

来源 :哈尔滨工程大学 | 被引量 : 0次 | 上传用户:qq8520963
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机技术在不同行业中的广泛应用,大量业务数据随之产生,这些数据超出传统持久关系的数据模型,以瞬时数据流的形式存在。人们希望利用这类数据的特点对其进行分析,挖掘出数据流中的趋势变化规律,进而实现对数据流的预测。然而这类数据的规模通常很庞大并且更新速度快,无法在有限的空间中对其进行完整保存,为数据流中的处理、分析和预测带来很大困难。因此研究数据流预测的相关技术和算法具有重要的理论价值和现实意义。本文针对数据流的特点,重点研究数据流预测算法,并设计基于有向图的数据存储模型,以解决数据流数据量庞大、计算复杂、实时性要求高的问题。通过研究数据流预测的过程、结合有向图存储的要求,将其分为基于有向图存储的数据流预处理、有向图的构造维护和基于有向图存储的预测计算三个过程。本文提出的算法具有以下优势:首先,利用有向图作为存储数据流状态的数据结构,设计有向图的构造与维护算法,将数据流中的无限数据映射为有限的数据状态,降低数据存储和处理的难度,节省存储空间。其次,本文在数据流预处理过程中以滑动窗口模型为基础,采用数据流聚类技术实现,并引入密度聚类的思想。其聚类结果为有向图的构造和维护提供数据输入,提高有向图描述数据流特征的精度,减少噪点。再次,根据有向图中描述的数据状态在不同步长下的迁移统计信息,得到概率并进行叠加处理,并应用中值的概念实现基于叠加马尔可夫模型的点值预测,得出数据流在下一时刻可能到来的数据项值,将预测结果由区间变为点值,提高数据流预测的准确性。实验结果表明,该数据流预测模型通过有向图构造能够高效的记录并描述数据流的变化态势,能够对数据流在下一时刻的到来数据进行有效预测。
其他文献
“高维度小样本”问题是模式识别应用中的主要障碍之一,易导致过拟合。导致这一问题的主要原因是当我们采用像图像这类数据量较大的信息时,我们所获得的样本的数量往往远小于
随着信息技术和信息服务业的快速发展,条码技术以其信息量大、可靠性高、保密防伪性强等优点在物流、自动化生产、电子商务等领域得到了广泛的应用,并在许多方面极大的推动了
移动流媒体技术是移动网络技术和流媒体技术相结合的产物,通过流媒体技术来访问多媒体对象会产生长时间、大码率的网络传输流。而代理服务器缓存技术可以有效地降低流媒体传
演化算法是一种模拟生物演化过程与机制求解优化问题的一类自组织、自适应人工智能技术。协同演化算法是在演化算法的基础上发展起来的一种新的演化机制,它基于生物学协同进
随着网络技术的日益发展,网络安全机制的研究越来越被重视。随着入侵检测技术的研究越来越广泛,未知网络攻击的异常检测技术并没有得到广泛研究。由于Web应用技术的迅速发展,
基于数据仓库技术的决策支持系统在电信、银行、金融、医疗和商业零售领域应用广泛,为企业发展提供了强有力的信息保障。图书馆作为公共服务机构,如何利用新技术为读者提供更
Petri网理论是研究离散事件动态系统(DEDS)的一种有力工具,动态模糊Petri网(DFPN)作为其重要分支,由苏州大学李凡长教授首次提出,能够准确描述系统的状态及其变化过程,有助于
信号与图像处理的应用中,正交变换的本质是把待处理的信号(或图像)用一组正交基表示,然后在“频率”域中对变换系数进行分析与处理,由于正交变换去相关能力强,变换系数的信息
随着信息和网络技术的发展,人们提出了随时随地访问信息的要求,移动计算作为分布式计算技术和无线通讯技术结合的产物应运而生。移动计算网络具有带宽窄、通讯易受干扰、结点
随着大规模信息的涌现,目前界面中的各种显示方式已很难把它们完整而连续地显示在计算机屏幕上,这给人们带来了许多新的认知困难。近年来,人们在信息可视化领域对信息的显示