一种基于深度学习的异常数据清洗算法

来源 :电子与信息学报 | 被引量 : 0次 | 上传用户:xingxingshuaige
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在物联网(IoT)中采用合适的异常数据清洗算法能极大地提升数据质量.许多研究人员采用统计学方法或分类聚类等方法对时-空相关数据进行清洗.但这些方法需要额外的先验知识,会给汇聚节点带来额外的计算开销.该文根据低秩-稀疏矩阵分解模型,提出一种基于深度神经网络的快速异常数据清洗算法,来解决物联网中时-空相关数据的清洗问题.结合感知数据的时-空相关性和异常值的稀疏性,将异常数据清洗问题转换为优化问题,并采用迭代阈值收缩算法(ISTA)求解该优化问题,再将ISTA算法展开成一个固定长度的深度神经网络.实际数据集的实验结果表明,该方法能够自动更新阈值,比传统的ISTA算法收敛速度更快,精度更高.
其他文献
通过分析建立基于岗位的大型军工电子国有企业员工职业发展通道建设策略,探索如何拓宽各类人才职业发展通道,并遵循人才成长规律,促使人才具有更加多元的职业发展机会,以保障电子信息技术领域的大型军工电子国有企业对高端人才的迫切需求,建立与之相匹配的人力资源管理战略,积极将人力资源发展成为人才资源,并实现组织发展过程中智力资本的优化,让员工在各自的职业序列中有目标、有计划的发展,实现员工与组织共赢,以供参考.