资料介绍
为提高Hadoop分布式文件系统(HDFS)的小文件处理效率,提出了一种面向HDFS的智能小文件存取优化方法-SmartFS。SmartFS通过分析小文件访问日志,获取用户访问行为,建立文件关联概率模型,并根据基于文件关联关系的合并算法将小文件组装成大文件之后存至HDFS;当从HDFS获取文件时,根据基于文件关联关系的预取算法来提高文件访问效率,并提出基于预取的缓存替换算法来管理缓存空间,从而提高文件的命中率。实验结果表明,SmartFS有效减少了HDFS中NameNode的元数据空间,减少了用户与HDFS的交互次数,提高了小文件的存储效率和访问速度。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
- gerber文件包含
- 坐标文件
- 自动售货机项目教程及文件下载 0次下载
- VHDL电路优化设计的方法资料下载
- 机床热误差的来源、获取方法及优化方法等 28次下载
- 基于Prtri网优化的CAPTCHA识别方法 4次下载
- 5G NSA优化方法及其相关研究 9次下载
- 将置信规则库分级优化的网络安全态势预测方法 11次下载
- python文件和目录的操作方法介绍和实例说明 7次下载
- python文件和目录的操作方法介绍和实例说明 0次下载
- 使用Python复制文件的方法有哪些 6次下载
- 解决海量小文件存储的大鱼集群存储系统的详细资料介绍 11次下载
- 基于小文件的内存云存储优化策略 0次下载
- 内存取证的内核完整性度量方法 2次下载
- 一种云存储中文件分界点确定方法 0次下载
- 如何优化EPS文件以提高加载速度 396次阅读
- MySQL性能优化方法 640次阅读
- 如何在Linux清空文件内容 2031次阅读
- 如何在Linux使用truncate命令将文件缩小或扩展到指定的大小 5955次阅读
- 一些对OpenMP进行优化的方法 1771次阅读
- 编辑与改写IP核源文件的方法 2830次阅读
- 常见文件扩展名及其含义,文件系统的功能 1w次阅读
- 大文件Vlookup工具:日常优化工作必备神器 2535次阅读
- 虚拟机:Linux查看tar包文件内容的方法 6766次阅读
- 判断Linux库文件编译时是否运用-g选项的方法 3480次阅读
- 应对海量图片存储的分布式存储解决方案 3824次阅读
- 如何优化压缩后大于20MB的PCB文件 2650次阅读
- 探析常见的几种最优化方法 2729次阅读
- 新式DRAM存取技术提升动态随机DRAM访问速度 4489次阅读
- mapreduce 中MAP进程的数量怎么控制? 1903次阅读
下载排行
本周
- 1电子电路原理第七版PDF电子教材免费下载
- 0.00 MB | 1490次下载 | 免费
- 2单片机典型实例介绍
- 18.19 MB | 93次下载 | 1 积分
- 3S7-200PLC编程实例详细资料
- 1.17 MB | 27次下载 | 1 积分
- 4笔记本电脑主板的元件识别和讲解说明
- 4.28 MB | 18次下载 | 4 积分
- 5开关电源原理及各功能电路详解
- 0.38 MB | 10次下载 | 免费
- 6基于AT89C2051/4051单片机编程器的实验
- 0.11 MB | 4次下载 | 免费
- 7基于单片机和 SG3525的程控开关电源设计
- 0.23 MB | 3次下载 | 免费
- 8基于单片机的红外风扇遥控
- 0.23 MB | 3次下载 | 免费
本月
- 1OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234313次下载 | 免费
- 2PADS 9.0 2009最新版 -下载
- 0.00 MB | 66304次下载 | 免费
- 3protel99下载protel99软件下载(中文版)
- 0.00 MB | 51209次下载 | 免费
- 4LabView 8.0 专业版下载 (3CD完整版)
- 0.00 MB | 51043次下载 | 免费
- 5555集成电路应用800例(新编版)
- 0.00 MB | 33562次下载 | 免费
- 6接口电路图大全
- 未知 | 30320次下载 | 免费
- 7Multisim 10下载Multisim 10 中文版
- 0.00 MB | 28588次下载 | 免费
- 8开关电源设计实例指南
- 未知 | 21539次下载 | 免费
总榜
- 1matlab软件下载入口
- 未知 | 935053次下载 | 免费
- 2protel99se软件下载(可英文版转中文版)
- 78.1 MB | 537791次下载 | 免费
- 3MATLAB 7.1 下载 (含软件介绍)
- 未知 | 420026次下载 | 免费
- 4OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234313次下载 | 免费
- 5Altium DXP2002下载入口
- 未知 | 233046次下载 | 免费
- 6电路仿真软件multisim 10.0免费下载
- 340992 | 191183次下载 | 免费
- 7十天学会AVR单片机与C语言视频教程 下载
- 158M | 183277次下载 | 免费
- 8proe5.0野火版下载(中文版免费下载)
- 未知 | 138039次下载 | 免费
评论