面向大数据应用的异构可重构平台关键技术研究

被引量 : 0次 | 上传用户:wyp154
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
互联网技术的发展,促进了全球数据的融合。网络搜索、电子商务、社交平台、物联网、基于云平台的语音和图片共享,以及现代医疗等应用每时每刻都在产生和处理海量的数据。从这些海量数据中发掘出有用的信息在现代社会的生产管理中起到了越来越重要的作用,大数据应用的时代已经来临。大数据应用具有数据量巨大,数据种类繁多,数据有待快速处理,以及数据价值不明确等特点。大数据应用的数据规模通常在太字节(TB,1012)量级,拍字节(PB1015)量级,甚至是艾字节(EB,10’8)量级,需要大量的计算工作。同时,大数据应用通常是对海量数据进行相同的分类、解析、学习、归纳的过程,计算过程中存在有大量的数据并行。现在常用的个人计算机系统以高性能通用处理器为计算核心,可进行并行计算的能力不足以充分发掘大数据应用潜在的并行能力。另外,大数据应用处理过程对数据操作的类型相对单一,造成在高性能通用处理器上一部分执行部件满载,另外一部分执行部件利用效率较低的现象。传统的高性能通用处理器平台已经不能满足大数据应用对系统计算能力和计算特征方面的需求。本文提出了一种面向大数据应用的异构可重构平台。该计算平台旨在使用异构多核可重构技术加速大数据应用的执行过程。本文主要的研究内容包括以下几个方面:1.面向大数据应用的异构多核可重构平台的硬件设计本文提出了一种由集成高性能通用处理器的个人计算机系统和集成有可重构器件的开发板共同组成的异构多核可重构平台。该平台使用高性能处理器和片上硬件加速器核阵列并行执行程序,对大数据应用能够取得可观的性能优势。在该异构多核平台中,可重构器件和高性能通用处理器之间使用板间总线相连。两者处于一种松耦合的方式,增大了系统的可移植性和可扩展性。另外,可重构器件端集成了对片外内存的虚拟管理模块,为硬件加速器核处理大数据问题提供了存储支持。同时,可重构器件端还集成了嵌入式的通用处理器、板间总线控制接口、加速器核配置接口、片上调试模块等组件,为片上大数据应用加速器核的开发和运行提供了简单实用的硬件支持。2.异构可重构平台上开发和运行时环境的研究现存的异构可重构加速平台存在着开发困难,灵活性和可移植性受限等缺点,尚缺少一种成熟的开发和运行时环境。本文提供了一套面向大数据应用的异构多核可重构平台编程模型,能够有效地解决异构平台上大数据应用开发和运行的编程墙问题。文章采用了一种分布式操作系统的运行模式,在个人计算机端和可重构器件端各自运行有操作系统,为各自的计算资源提供开发和运行时环境。其中个人计算机端的操作系统采用传统主流的操作系统;可重构器件端的操作系统是一个运行在片上嵌入式处理器上的资源管理程序。可重构器件端的嵌入式操作系统负责管理可重构器件端的数据传输、虚拟存储系统、加速器核的配置,以及硬件任务的创建和调度等工作。同时,嵌入式操作系统通过提供各个组件的调用接口,来允许系统开发人员申请片上的存储资源和计算资源,为片上系统的开发和运行提供简单易用的环境支持。3.典型大数据应用在异构多核可重构平台上的设计为了验证和说明平台的优势,文章选取了生物信息学中的基因对齐算法,数据挖掘中的数据聚类和推荐算法,人工智能中的深度学习算法等大数据应用作为示例。本文为这些典型的大数据应用,在异构多核可重构平台上进行了加速方案的设计,并且分析了本文提出的异构多核重构平台对各个大数据应用取得性能优势。
其他文献
实验实训教学是培养学生职业岗位技能的重要手段,信息化的实验实训教学是进一步推进高技能型人才培养模式的创新和保障,是加快高等职业院校现代职业教育教学的改革进程。本文
这篇文字,是赵女士新婚中的作品,赵女士在这燕尔新婚中,肯替本刊撰文,尤注意於合作问题,很是感佩.吾想阅者也一定是愿意快覩的.
期刊
音乐审美强调理解对象的价值,通过对旋律、节奏等要素的解读,使艺术作品源于生活、高于生活的特质和深层次含义得到捕捉。基于此,本文以传统潮州筝乐《出水莲》的价值作为切
在全球气候变化,极端天气增多的趋势下,旱灾愈演愈烈,严重影响了农业生产。为有效减少旱灾对我国经济的影响,根据物联网的基本原理和体系结构,提出了基于物联网的现代农业节
甘南藏区数学教育是甘南州教育研究的有机组成部分,由于历史、文化背景、自然环境等原因,甘南藏区教育比较落后,尤其是数学教育更是滞后.本文主要从自然生态环境和人文环境两
为实现对高速中频数字信号的降频、降速和滤波,得到低速零中频的数字基带信号,利用Matlab的Simulink工具箱中的DSP Builder的高级模块库设计模型系统,在模型系统中加入时钟频
通过分析《黄金时代》剧本存在的种种缺憾,论文提出了相应的剧作建议:应放则放,当收则收,该醒则醒。同时也希冀能对其它剧作在收放自如、清醒定位方面有所启发。
目的调查2005~2006年间骨外科住院患者的营养状况。方法采用多项营养评价指标测定120例住院患者营养状况,分析患者的营养状况与疾病、并发症、住院时间等因素之间的关系。结果
为了缓解可用加工木材供应日趋减少的现状,现大多情况下用人造板或者竹木胶合板来代替实木的短缺矛盾,并不断持续开发该行业新型的胶黏剂。环氧树脂适用性强,胶黏性能好,用途
资本与劳动力双密集型的新型农业的发展与农村市场化的进程相辅相成,新型农业客观上需要较高程度的农村市场化解决农产品的流通问题,同时农村市场化进程的发展也有利于推动新型农业规模的扩大。农村经纪人作为主导农村市场的中坚力量,是连接农民与商贩、农产品与市场的纽带,是农产品流通系统的重要一环,在农村市场化的进程中发挥着重要的作用。本文采用个案研究方法,选择了寿光市一个在蔬菜种植和农村经纪人发展方面具有代表性