电子发烧友App
创作
发文章
发帖 
提问 
发资料
发视频资料介绍
随着基于Hadoop平台的大数据技术的不断发展和实践的深入，Hadoop YARN资源调度策略在异构集群中的不适用性越发明显。一方面，节点资源无法动态分配，导致优势节点的计算资源浪费、系统性能没有充分发挥；另一方面，现有的静态资源分配策略未考虑作业在不同执行阶段的差异，易产生大量资源碎片。基于以上问题，提出了一种负载自适应调度策略。监控集群执行节点和提交作业的性能信息，利用实时监控数据建模、量化节点的综合计算能力，结合节点和作业的性能信息在调度器上启动基于相似度评估的动态资源调度方案。优化后的系统能够有效识别集群节点的执行能力差异，并根据作业任务的实时需求进行细粒度的动态资源调度，在完善YARN现有调度语义的同时，可作为子级资源调度方案架构在上层调度器下。在Hadoop 2．O上实现并测试该策略，实验结果表明，作业的自适应资源调度策略显著提高了资源利用率，集群并发度提高了2到3倍，时间性能提升了近10%。
下载该资料的人也在下载
下载该资料的人还在阅读
更多 >
- 自适应反馈消除 3
- 基于桥式吊车系统的分组自适应控制策略 22次下载
- 一种基于自适应邻域策略的改进算法 10次下载
- 异构环境下的多DAG任务调度算法综述 13次下载
- 面向异构领域自适应的联合信息保持算法 5次下载
- 基于节点分布自适应的WSN覆盖控制优化策略 25次下载
- 总线负载的自适应频率调节 2次下载
- 自适应元数据服务负载均衡策略 0次下载
- 一种新的调度策略优化Spark在异构集群下表现 0次下载
- 基于Ubuntu的Hadoop集群安装与配置 8次下载
- 异构集群服务器的动态加权负载均衡算法
- 基于有限反馈的数据流数自适应SDMA
- 基于反馈的带宽自适应无线监控系统
- 结构化P2P自适应混合负载均衡策略
- 树型网格计算环境下的自适应任务调度算法
- 虚拟机：Hadoop集群的配置 2689次阅读
- 虚拟机：Hadoop集群的搭建 3097次阅读
- 工业机器人自适应运动控制技术 1943次阅读
- 汽车开关的关键技术自适应触觉的详细介绍 2016次阅读
- 什么是Hadoop? Spark和Hadoop对比 6751次阅读
- 自适应控制的优缺点_自适应控制存在的问题及发展 4.9w次阅读
- 什么是自适应控制_自适应控制基本原理 5.5w次阅读
- hadoop云存储解决方案 6442次阅读
- hadoop基础知识介绍_hadoop是什么语言开发的_hadoop能做什么 3.9w次阅读
- hadoop技术原理总结 4140次阅读
- hadoop优缺点分析 1.6w次阅读
- 自适应滤波算法理解与应用 2.5w次阅读
- 自适应滤波器的作用、原理以及相关应用 2w次阅读
- 浅析Hadoop集群硬件选择 1648次阅读
- 基于DSP的自适应滤波器的设计方案 8239次阅读
上传资料赚积分下载排行
本周
- 1电子电路原理第七版PDF电子教材免费下载
- 0.00 MB | 1490次下载 | 免费
- 2单片机典型实例介绍
- 18.19 MB | 93次下载 | 1 积分
- 3S7-200PLC编程实例详细资料
- 1.17 MB | 27次下载 | 1 积分
- 4笔记本电脑主板的元件识别和讲解说明
- 4.28 MB | 18次下载 | 4 积分
- 5开关电源原理及各功能电路详解
- 0.38 MB | 10次下载 | 免费
- 6基于AT89C2051/4051单片机编程器的实验
- 0.11 MB | 4次下载 | 免费
- 7基于单片机和 SG3525的程控开关电源设计
- 0.23 MB | 3次下载 | 免费
- 8基于单片机的红外风扇遥控
- 0.23 MB | 3次下载 | 免费
本月
- 1OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234313次下载 | 免费
- 2PADS 9.0 2009最新版 -下载
- 0.00 MB | 66304次下载 | 免费
- 3protel99下载protel99软件下载(中文版)
- 0.00 MB | 51209次下载 | 免费
- 4LabView 8.0 专业版下载 (3CD完整版)
- 0.00 MB | 51043次下载 | 免费
- 5555集成电路应用800例(新编版)
- 0.00 MB | 33562次下载 | 免费
- 6接口电路图大全
- 未知 | 30320次下载 | 免费
- 7Multisim 10下载Multisim 10 中文版
- 0.00 MB | 28588次下载 | 免费
- 8开关电源设计实例指南
- 未知 | 21539次下载 | 免费
总榜
- 1matlab软件下载入口
- 未知 | 935053次下载 | 免费
- 2protel99se软件下载(可英文版转中文版)
- 78.1 MB | 537791次下载 | 免费
- 3MATLAB 7.1 下载 (含软件介绍)
- 未知 | 420026次下载 | 免费
- 4OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234313次下载 | 免费
- 5Altium DXP2002下载入口
- 未知 | 233046次下载 | 免费
- 6电路仿真软件multisim 10.0免费下载
- 340992 | 191183次下载 | 免费
- 7十天学会AVR单片机与C语言视频教程 下载
- 158M | 183277次下载 | 免费
- 8proe5.0野火版下载(中文版免费下载)
- 未知 | 138039次下载 | 免费
工商网监
评论