基于Hadoop与RabbitMQ的人脸识别算法测试平台的设计与实现

来源 :测控技术 | 被引量 : 0次 | 上传用户:dingyongguo
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对人脸识别算法研究过程中测试效率低下的问题,基于分布式技术,设计并实现了通用的分布式大数据测试平台。为了提高人脸识别算法的大数据测试的执行效率,提高测试结果统计计算的执行效率,基于RabbitMQ设计分布式并行执行架构,利用Hadoop集群的MapReduce框架进行分布式并行计算。利用Java语言的Spring框架开发测试平台,将测试代码与测试图片托管于Hadoop集群的HDFS文件系统,实现了测试业务与测试平台的分离,提高了平台的通用性。该测试平台不仅实现单个测试任务的分布式执行而且满足多个测试任务同时执行,对测试任务以及测试相关的代码与数据进行有效的管理。与传统测试方法相比,测试效率提高10余倍,测试图片的数量越大测试效率提升越明显。该测试平台具有业务通用性、容量可扩展性,对于其他人工智能算法的大量数据测试具有借鉴意义与参考价值。
其他文献
以热失控为本质的锂离子安全问题一直困扰着电动汽车的发展。传统的实验研究真实性和可重复性不可兼得,成本较高。COMSOL作为一款多物理场仿真软件,已经被用于各种各样的与锂离子电池有关的研究。本文根据应用场景的不同,对COMSOL在锂离子电池热特性发面的研究进展进行综述,主要分为外部不同工况、辅助散热以及内部组件设计三个方面。
目的:观察循证护理为基础的手术护理路径在腹腔镜胆囊切除术患者中的应用效果。方法:纳入100例腹腔镜胆囊切除术患者,采用随机数字表法对患者进行分组,并给予不同的护理方案:观察组50例患者予以循证护理为基础的手术护理路径护理,对照组50例患者予以常规护理,比较不同护理方案对患者的影响。结果:观察组患者肠鸣音恢复时间、术后通气时间、总住院时间及术后心理状态指标(焦虑、抑郁)评分明显优于对照组(P<0.0
共同体意识作为维系特定群体的意识形态,是与特定群体的共同物质基础密切联系的。作为人类物质和精神文明的聚合体,城镇在民族形成发展进程中扮演着重要角色。新中国成立以来,一直在探索通过现代城镇建设,建成现代化国家,实现中华民族伟大复兴。改革开放以来,特别是党的十八大以来,我国现代化不断提速,城镇建设取得历史性成就。各族群众在新型城镇的建设过程中,实现了大交往、大交流、大交融。随着“十四五”规划推进实施,
为了提升信息加密密钥敏感性以及加密加速比,提出基于大数据技术的智慧后勤信息动态加密方法.基于分层规划理念构建智慧后勤信息化系统;使用Logistics超混沌序列重组大数据结构,利用算数密码体制重新编码Logistics序列数据,动态混合加密密文和明文序列;提取结构重组后大数据的关联规则属性量,利用Rossle实现大数据的混沌映射分组加密优化处理;应用Hadoop大数据平台中的MapReduce并行
煤制烯烃行业中基于MTO技术的特殊性,反应器中的催化剂细粉随工艺气进入水系统中,并在较高水温下板结结垢,造成急冷水洗塔塔盘堵塞,同时也会堵塞急冷水换热器和空气冷却器等换热设备,致使换热效率下降,导致系统热量失衡,从而有跳车风险。MTO急冷水除固技术利用急冷水沸腾床过滤技术,大大降低了急冷水中的固含量,减少换热器清洗频次,对实现甲醇制烯烃装置长周期稳定运行具有重要意义。
针对网络流量的急剧增加,导致网络集群中存在异常节点,降低了网络的运行效率等问题,提出基于Hadoop的动态网络异常节点智能检测方法。对Hadoop的生态体系结构进行分析,并详细描述了HDFS、MapReduce和NetBASS框架。采用Zipf排名分布对网络节点总流量进行统计,通过标准差系数对节点参数的稳定性和离异程度进行评价。为了使聚类效果更加稳定,使用新的均衡化函数作为数据的收敛函数。将异常节
基于Hadoop+MPP大数据技术构建城市轨道交通线网数据中心具有明显的优势。不仅具有PB级的海量存储容量,支持多源异构数据接入,而且具备强大的实时与离线数据处理能力,能够为线网各应用系统提供全面而丰富的数据支撑;并可与云技术融合,构建完整的DaaS(数据即服务)层,支撑上层SaaS(软件即服务)的各类业务云应用。本文在实际项目需求的基础上,从软硬件架构、数据处理流程等方面全面探讨了基于Hadoo
目的:探究耳软骨联合舒铂假体(高密度多孔聚乙烯)在鞍鼻畸形矫正中的临床应用价值方法:选取2019年10月至2022年1月在新疆医科大学第五附属医院行耳软骨联合舒铂假体矫正鞍鼻畸形的患者46例,女性39例,男性7例,均为汉族,年龄范围在18到51岁,通过直接测量法获得患者的鼻部参数数据,选取具有代表性及临床意义的参数作为鼻部美学评价的客观指标,主要包括鼻尖宽、鼻背长、鼻尖角,鼻尖高、鼻唇角以及鼻额角