资料介绍
机器学习领域内的多数模型均需要通过迭代计算以求解其最优参数,而MapReduce模型在迭代计算中的缺陷不足导致其在迭代计算中无法得到广泛应用。为解决上述矛盾,基于MapReduce模型提出并实现了一种可用于模型参数求解的并行迭代模型MRI。MRI模型在保持Map以及Reduce阶段的基础上,新增了Iterate阶段以及相关通信协议,实现了迭代过程中模型参数的更新、分发与迭代控制;通过对MapReduce状态机进行增强,实现了节点任务的重用,避免了迭代过程中节点任务重复创建、初始化以及回收带来的性能开销;在任务节点实现了数据缓存,保障了数据的本地性,并在Map节点增加了基于内存的块缓存机制,进一步提高训练集加载效率,以提高整体迭代效率。基于梯度下降算法的实验结果表明:MRI模型在并行迭代计算方面性能优于MapReduce模型。
- 面向移动终端图像颜色显示的节能模型 5次下载
- 面向学分银行的区块链学习成果管控模型综述 5次下载
- 基于MapReduce并行处理的机电特种设备故障诊断 13次下载
- 面向双目立体视觉的迭代式局部颜色校正方法 5次下载
- 面向人脸识别的FusNet网络模型 8次下载
- 基于MapReduce的时间序列索引及数据查询 7次下载
- 一种面向MapReduce的中间数据传输流水线优化机制 4次下载
- 声子BTE方程迭代求解在GPU上的并行加速方案 24次下载
- 基于MapReduce和加权网络信息熵的DBWGIE-MR算法 11次下载
- 基于迭代膨胀卷积神经网络与ATT的实体名识别方法 6次下载
- MapReduce连接查询的IO代价研究 0次下载
- 基于MapReduce的新会话识别方法 0次下载
- 基于MapReduce的并行化轨迹压缩方法 0次下载
- 面向大数据的并行分类混合算法研究 0次下载
- 算法隐含并行性的物理模型
- 基于PyTorch的模型并行分布式训练Megatron解析 2280次阅读
- 大模型分布式训练并行技术(一)-概述 1218次阅读
- 图解大模型训练之:Megatron源码解读2,模型并行 3621次阅读
- 以Gpipe作为流水线并行的范例进行介绍 932次阅读
- 基于动量的迭代算法来构造对抗扰动以攻击黑盒和白盒模型 5464次阅读
- 基于OpenMP的电磁场FDTD并行方法的程序设计 1167次阅读
- 一种基于MapReduce模型的并行化k-medoids聚类算法 5208次阅读
- PRAM模型、BSP模型、LogP模型优缺点分析 1.5w次阅读
- mapreduce二次排序_ mapreduce二次排序原理 6198次阅读
- mapreduce工作原理图文详解_Map、Reduce任务中Shuffle和排序 8419次阅读
- mapreduce的应用开发步骤 4748次阅读
- 详解MapReduce的模式、算法和用例 2369次阅读
- mapreduce编程实例 1.1w次阅读
- 什么是mapreduce_mapreduce工作原理_mapreduce_mapreduce逻辑模型图 2.5w次阅读
- 基于FPGA的并行硬件ECC模型的设计 5712次阅读
下载排行
本周
- 1电子电路原理第七版PDF电子教材免费下载
- 0.00 MB | 1490次下载 | 免费
- 2单片机典型实例介绍
- 18.19 MB | 93次下载 | 1 积分
- 3S7-200PLC编程实例详细资料
- 1.17 MB | 27次下载 | 1 积分
- 4笔记本电脑主板的元件识别和讲解说明
- 4.28 MB | 18次下载 | 4 积分
- 5开关电源原理及各功能电路详解
- 0.38 MB | 10次下载 | 免费
- 6基于AT89C2051/4051单片机编程器的实验
- 0.11 MB | 4次下载 | 免费
- 7基于单片机和 SG3525的程控开关电源设计
- 0.23 MB | 3次下载 | 免费
- 8基于单片机的红外风扇遥控
- 0.23 MB | 3次下载 | 免费
本月
- 1OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234313次下载 | 免费
- 2PADS 9.0 2009最新版 -下载
- 0.00 MB | 66304次下载 | 免费
- 3protel99下载protel99软件下载(中文版)
- 0.00 MB | 51209次下载 | 免费
- 4LabView 8.0 专业版下载 (3CD完整版)
- 0.00 MB | 51043次下载 | 免费
- 5555集成电路应用800例(新编版)
- 0.00 MB | 33562次下载 | 免费
- 6接口电路图大全
- 未知 | 30320次下载 | 免费
- 7Multisim 10下载Multisim 10 中文版
- 0.00 MB | 28588次下载 | 免费
- 8开关电源设计实例指南
- 未知 | 21539次下载 | 免费
总榜
- 1matlab软件下载入口
- 未知 | 935053次下载 | 免费
- 2protel99se软件下载(可英文版转中文版)
- 78.1 MB | 537791次下载 | 免费
- 3MATLAB 7.1 下载 (含软件介绍)
- 未知 | 420026次下载 | 免费
- 4OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234313次下载 | 免费
- 5Altium DXP2002下载入口
- 未知 | 233046次下载 | 免费
- 6电路仿真软件multisim 10.0免费下载
- 340992 | 191183次下载 | 免费
- 7十天学会AVR单片机与C语言视频教程 下载
- 158M | 183277次下载 | 免费
- 8proe5.0野火版下载(中文版免费下载)
- 未知 | 138039次下载 | 免费
评论
查看更多