Linux内核参数对Spark负载性能影响的研究

来源 :计算机工程与科学 | 被引量 : 0次 | 上传用户:yuyanbbs
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
关于Spark性能的研究目前正在成为热点,但调优策略多位于应用层,而不是系统层。操作系统作为硬件之上的第一层软件,对硬件性能发挥起着根本作用。Linux内核提供了丰富的参数作为优化性能的接口,但实际中,这些参数的作用并没有得到充分发挥。人们更多是采用系统默认值,而不是根据具体环境进行调整。然而本文实验发现,系统默认值并不一定是最好的选择,有时甚至是最坏的。定义了“影响比”这一概念,并基于此概念提出了一种通过分析内核函数的执行情况来认识参数对Spark应用影响的方法。针对Spark内存计算的特点,从大页、N
其他文献
随着经济的发展,无线移动通信技术以及物联网技术得到越来越广泛推广。本文分析了无线移动通信概念以及技术,以及物联网概念以及技术,研究了无线移动通信与物联网的应用。
新增新冠肺炎确诊病例明显减少,治愈出院人数不断增加……战“疫”一线好消息频频传出,鼓舞人心。总体上看,我省疫情防控工作取得积极性成效,疫情防控形势平稳,不断朝好的方向发展
报纸
目的:研究猪肺磷脂注射液与鼻塞式气道正压通气联合治疗新生儿呼吸窘迫综合征的疗效。方法:选取我院2016年7~12月收治的67例呼吸窘迫综合征新生儿为研究对象,随机分为两组,对照
目的探讨集束化管理对预防乳腺癌术后静脉血栓栓塞症的效果,并总结有效的管理措施。方法选取2017年1—6月乳腺癌手术的患者为对照组,另选取2017年7—12月乳腺癌手术的患者为
研究主要对本院临床主要病原菌进行分析,阐述主要病原菌分布特点,针对主要病原菌逐渐产生的耐药性问题提出自己的观点。以期通过本文对主要病原菌分布特点及耐药性分析,为医疗同
综述棕背伯劳的研究进展。主要介绍棕背伯劳色型分类存在的问题及色型多态现象产生的内在机制,同时综述了棕背伯劳的食性和繁殖行为。
民航旅客“黑名单”制度是各国维护民航安全与秩序、约束不文明乘机行为的基本措施。我国民航旅客“黑名单”制度尽管有法理上的合法性和现实上的必要性,但现行制度在认定主
本文简述了上海广播电视台于2017年探索尝试的一种利用vMix切换台的小型移动演播室系统,用于外出展示或录制节目。该系统特点是轻量化、集成化、网络化。实践证明,该移动演播
当前,热泵空调因其能效比高、耗电量低、结构紧凑的优点,成为未来纯电动汽车和双模车汽车空调的主要研究方向和发展趋势。由于热泵空调工况恶劣,冬天为使车内快速升温,需要在
大学语文教学中的问题和尴尬很多,但首先要解决的,还是人们对课程的认识问题。大学语文的教学,最关键的,就是任课教师要革新观念,转变角色定位,变"讲师"为"导师"。在课堂上,教师