物联网数据处理若干关键问题研究

被引量 : 0次 | 上传用户:muyi_wang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
信息通讯技术每一次的重大突破与演进都将带来社会发展的新飞跃。自1946年第一台计算机ENIAC诞生至今,在近七十年发展历程中,信息通讯技术的迅速发展和互联网的广泛应用改变了人类生活的各个方面。物联网的兴起被认为是继互联网信息技术革命之后在信息通讯技术领域的又一次重要发展与进步。目前,物联网已在各个相关领域开展了示范性应用,同时迅速成为世界各国的重要发展产业和科研工作者的研究热点。物联网作为互联网的重要扩展,通过搭建普适环境中的感知基础设施对物理世界进行广泛互联,在人类世界,物理世界与信息世界之间构建一个由网络、信息与服务组成的信息生态系统。在传统互联网时代,人与人之间的交流更加便捷,然而传统互联网仅仅实现了信息在人与人之间的共享。在互联网基础上,物联网进一步实现了人、机、物的信息共享,信息世界与物理世界之间形成了更加紧密的信息流动生态系统,进而改变了人们利用传统互联网进行信息通讯和资源共享的方式。本文从数据处理的角度分析了物联网的产生与演化过程。针对物联网数据处理中数据异构性,海量性与实时性等相关的关键问题提出了相应的解决方案。本文贡献主要包括以下三个方面:第一,将不同时期推动物联网发展的关键技术进行对比,归纳整理了物联网在不同阶段中数据处理发展的演化过程。目前已发表成果主要总结了在物联网中应用的相关技术,而没有对这些技术之间的关系以及在物联网形成过程中的演进过程进行对比分析,该部分工作正是已发表成果中所缺少的重要方面之一。本文对物联网中数据特征进行的梳理工作是开展物联网数据处理相关研究中一项重要的基础性工作。第二,针对在物联网中数据的异构性与海量性的特点,本文通过对比物联网、传统互联网与无线传感器网络中不同网络层次中数据含义的不同之处,总结了物联网数据的语义特征。针对物联网数据语义性的特点,设计了基于SOA的物联网数据处理中间件框架,同时在SOA中间件框架中设计了一种针对物联网异构数据语义标注的服务层。利用语义标注层提供的基本语义操作服务,提出了一种基于语义的物联网环境中异构数据的数据融合算法,从而实现物联网数据与互联网上其他资源的互联与交互。本文通过构建了室内环境监测的原型系统进行了实验验证,并利用实验结果获得了相关实验结论。第三,物联网中的数据需要利用各种类型的传感器进行实时采集,处理数据的实时性需要得到可靠的保证,因此本文针对物联网数据实时性的特点设计了相应的流计算架构与算法。与传统的基于历史数据的处理方法不同,本文提出的处理实时数据流的算法不需要花费额外的时间对历史数据进行统计分析,从而保证了计算的实时性。为了达到整个系统的实时性与高吞吐性的要求,本文构建了分布式流计算实验平台并采用了分布式的内存数据库进行数据的存储管理,在实时流计算过程中所有过程数据的计算与存储均在内存中进行。实验结果表明本文提出的算法和搭建的平台满足物联网实时“大数据”流计算处理平台对可伸缩性、系统容错、状态一致性、负载均衡、数据吞吐量和低时延等方面的要求。
其他文献
压水堆核电站主回路管道是超低碳奥氏体不锈钢大厚壁管道,在高温、高辐射的环境下服役,对焊接质量要求非常高。我国目前核电站主回路管道焊接采用宽坡口焊条电弧焊工艺,焊接
<正>早在刀耕火种的新石器时代,人们对美的体悟就已经萌发,那时的人们把兽骨和兽牙等一些天然的材料加工成珠串用来装饰自己,美化自己;在有些地区,人们还会用一种含铁的红色
"互联网+"时代对会计人才培养和职业发展提出了更高的要求。财务共享和财务机器人的出现,极大转变了会计职业的能力要求,信息技术的发展和会计从业资格证的取消,使会计就业门
<正>自媒体的迅猛发展正在改变着传媒格局、舆论生态,特别是给传统媒体带来巨大的冲击,甚至出现新浪微博大V粉丝数千万、《人民日报》发行量不足300万,两者谁的影响力更大的
俄罗斯质子M/DM03组级运载火箭7月2日在拜科努尔发射场发射3颗GLONASS-M导航卫星时失败。火箭起飞后不久即失去控制,坠毁在发射场附近。电视直播画面显示,火箭在离开发射台向
科学技术的不断发展,越来越多的电器设备进入人们的视线和生活中,给我们的生产和生活带来方便的同时,也带来了不小的影响。随着人们生活水平的逐渐提高,对于健康生活的不断追
"知人论世"的文学批评方法是儒家代表人物之一孟子提出的,要求我们在阅读作品时既要了解作者生平、家世、性格、思想,又要考察作者所处的时代背景,在中国传统文学批评中占有
<正>20亿预期票房,吊足了所有人的胃口,给人极大的想象空间。由著名盗墓题材的小说《鬼吹灯》改编拍摄的电影《寻龙诀》已宣布将于今年8月开拍,并提前确定于2015年12月18日上
<正>自进入数字化与多媒体时代以来,新闻媒体传播发生了巨大变化,传统媒体受到了新媒体的冲击,竞争日渐激烈。但是在竞争中,传统媒体出现了与新媒体相互融合的趋势,二者取长
<正> 地球内部的热在向地表传递的过程中受到地形,岩性、构造和地下水运动等多方面因素的影响,它们都不同程度地决定了地温场的形成、演化与分布特征。其中地下水运动对地温