电子发烧友App
创作
发文章
发帖 
提问 
发资料
发视频资料介绍
关于Spark性能的研究目前正在成为热点，但调优策略多位于应用层，而不是系统层。操作系统作为硬件之上的第一层软件，对硬件性能发挥起着根本作用。Linux内核提供了丰富的参数作为优化性能的接口，但实际中，这些参数的作用并没有得到充分发挥。人们更多是采用系统默认值，而不是根据具体环境进行调整。然而本文实验发现，系统默认值并不一定是最好的选择，有时甚至是最坏的。定义了“影响比”这一概念，并基于此概念提出了一种通过分析内核函数的执行情况来认识参数对Spark应用影响的方法。针对Spark内存计算的特点，从大页、NUMA这两个与使用内存紧密相关的方面分析了相关内核参数对几种典型Spark负载的性能影响，并由此得出一些结论。希望本文的分析和结论可以为Spark平台合理设置内核参数提供一些参考。
下载该资料的人也在下载
下载该资料的人还在阅读
更多 >
- 基于Spark的学术论文热点数据挖掘方法 4次下载
- Spark机器学习教材 5次下载
- 参数域边界平直化的模型表面参数化方法 7次下载
- 基于Spark平台的并行化关联规则挖掘方法 0次下载
- 基于树状结构Parzen估计方法的超参数优化方法 23次下载
- 小型电动无人机的总体参数设计方法研究说明 19次下载
- 如何使用Spark Streaming进行快速视频转码方法说明 7次下载
- 如何在Spark环境下进行犯罪人员时空关联规则挖掘 8次下载
- 如何使用Spark计算框架进行分布式文本分类方法的研究 3次下载
- Bright Spark 1.10版电子设计仿真软件免费下载 0次下载
- Bright Spark电路教学仿真演示软件及其应用.pdf 41次下载
- 电路模拟软件_Bright Spark 1.10绿色版 0次下载
- 一种Spark高光谱遥感图像稀疏表分类并行化方法 6次下载
- 最全SPARK内存管理机制 5次下载
- 基于Spark的电力设备在线监测数据可视化方法 3次下载
- Mahony滤波算法参数自动调节方法介绍 840次阅读
- Blaze: 用Rust重写Spark执行层，平均提升30%算力 762次阅读
- 数控系统参数丢失的处理方法 1287次阅读
- Classes -方法参数 319次阅读
- 新规划PCI核查工具的使用方法和应用事例 2834次阅读
- FANUC机器人建立part carrier和跟踪参数的方法 3816次阅读
- 如何实现电平转换，多种方法 1.1w次阅读
- 单片机系统参数储存与读取的处理方法 3620次阅读
- 机器学习实例：Spark与Python结合设计 2706次阅读
- 一文读懂 Spark 内存管理 914次阅读
- 构建机器学习管道和使用Apache Spark时的一些经验 5202次阅读
- 瓷片电容参数如何识别_瓷片电容的读数方法介绍 10.5w次阅读
- spark和hadoop的区别 1.4w次阅读
- AD静态参数和动态参数的测试方法介绍 1.4w次阅读
- 详述光纤参数及多种测试方法的主要内容 9721次阅读
上传资料赚积分下载排行
本周
- 1电子电路原理第七版PDF电子教材免费下载
- 0.00 MB | 1490次下载 | 免费
- 2单片机典型实例介绍
- 18.19 MB | 93次下载 | 1 积分
- 3S7-200PLC编程实例详细资料
- 1.17 MB | 27次下载 | 1 积分
- 4笔记本电脑主板的元件识别和讲解说明
- 4.28 MB | 18次下载 | 4 积分
- 5开关电源原理及各功能电路详解
- 0.38 MB | 10次下载 | 免费
- 6基于AT89C2051/4051单片机编程器的实验
- 0.11 MB | 4次下载 | 免费
- 7基于单片机和 SG3525的程控开关电源设计
- 0.23 MB | 3次下载 | 免费
- 8基于单片机的红外风扇遥控
- 0.23 MB | 3次下载 | 免费
本月
- 1OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234313次下载 | 免费
- 2PADS 9.0 2009最新版 -下载
- 0.00 MB | 66304次下载 | 免费
- 3protel99下载protel99软件下载(中文版)
- 0.00 MB | 51209次下载 | 免费
- 4LabView 8.0 专业版下载 (3CD完整版)
- 0.00 MB | 51043次下载 | 免费
- 5555集成电路应用800例(新编版)
- 0.00 MB | 33562次下载 | 免费
- 6接口电路图大全
- 未知 | 30320次下载 | 免费
- 7Multisim 10下载Multisim 10 中文版
- 0.00 MB | 28588次下载 | 免费
- 8开关电源设计实例指南
- 未知 | 21539次下载 | 免费
总榜
- 1matlab软件下载入口
- 未知 | 935053次下载 | 免费
- 2protel99se软件下载(可英文版转中文版)
- 78.1 MB | 537791次下载 | 免费
- 3MATLAB 7.1 下载 (含软件介绍)
- 未知 | 420026次下载 | 免费
- 4OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234313次下载 | 免费
- 5Altium DXP2002下载入口
- 未知 | 233046次下载 | 免费
- 6电路仿真软件multisim 10.0免费下载
- 340992 | 191183次下载 | 免费
- 7十天学会AVR单片机与C语言视频教程 下载
- 158M | 183277次下载 | 免费
- 8proe5.0野火版下载(中文版免费下载)
- 未知 | 138039次下载 | 免费
工商网监
评论