【摘 要】
:
针对海量过车数据检索困难的问题,设计了一款基于Solr的大规模分布式数据检索系统.前端IPC采集的数据经过结构化处理之后发送到后端,数据先缓存在消息队列中,再通过Spark Str
论文部分内容阅读
针对海量过车数据检索困难的问题,设计了一款基于Solr的大规模分布式数据检索系统.前端IPC采集的数据经过结构化处理之后发送到后端,数据先缓存在消息队列中,再通过Spark Streaming实时计算框架对缓存的数据进行消费,将数据搬运到数据库HBase中,最后由Solr爬取HBase中的数据,根据用户的配置建立索引文件.查询时,用户通过点击Web界面下发查询条件,系统将查询条件解析为Solr能够识别的查询语句,从索引文件中取出相应的信息,最后从HBase中取出完整的数据,返回到界面显示.测试结果表明,系统工作稳定,可存储海量多种类型数据,索引建立速度为1 000条/s,当数据库中存储一千亿条过车记录时,对此类TB级别数据进行各种条件查询的响应时间均在10s之内.
其他文献
孙绍振先生的《杜牧〈山行〉个性解读》,以文人悲秋主题反照文本,读出了杜诗的不朽美学意蕴。
目的解析抗青光眼滤过术后眼球按摩的护理效果。方法将青光眼患者随机分为治疗组(术后进行眼球按摩的护理)和对照组(术后不行眼球按摩护理),共80例(80眼)患者,每组各40例,定期进行
近年来,随着创新活动的兴起,以及政府对创业创新的支持,许多企业高管选择了创业这条道路,2015年尤为突出,在互联网,高新技术等行业诞生越来越多的创业公司。创业企业已经成为
本文介绍了网络侦听潜在的安全隐患,阐述了侦听和侦听存在检测技术的基本原理,并结合某企业局域网的具体结构,探讨了具体的实现方法,同时用C语言程序实现了基于Windows平台的
文章结合关岭自治县关岭牛产业发展情况,从饲草饲料、加工机械、疾病防控、粪污处理、育种和销售等环节进行调查,针对存在的问题提出发展建议.
目的探讨剖宫产瘢痕妊娠的发病机制、早期诊断以及治疗方法。方法回顾分析41例剖宫产瘢痕妊娠患者的临床资料,包括患者的发病年龄,孕次及产次,剖宫产手术史及发病至剖宫产术
在现有研究成果的基础上,针对一类线性网络控制系统稳定性问题,做出进一步分析和改进。通过构造Lyapunov-Krasovskii泛函,加入增广矩阵,充分地利用时滞信息,同时使用Wirtinge