0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Memblaze保障存储系统服务质量的核心技术及研发理念进行了解读

SSDFans 来源:未知 作者:李倩 2018-11-22 17:00 次阅读

存储服务质量不是一个单点问题。从系统的角度考虑服务质量的智能存储将成为未来的重要的方面。Memblaze CTO在日知录主办的2018日知录数据智能峰会上的分享开始就阐述了保障数据中心存储系统服务质量的观点,并在演讲中介绍了Memblaze保障存储系统服务质量的核心技术及研发理念进行了解读。

Memblaze CTO路向峰

路向峰分析了Flash技术给数据中心基础架构带来的影响,他指出:“NAND Flash给存储系统带来新机会的同时,也对于传统存储架构带来挑战。需要调整软件架构来释放Flash的能力。需要从单个存储部件、存储网络依赖关系和针对用户业务压力的优化三个方面考虑,提升系统的服务质量。“

在SSD内部,由于Garbage Collection和Flash Erase等后台任务的存在,在用户随机写工况下,系统的服务质量容易变差。为了定量研究这一情况,可以利用GMM概率模型对于IO写入的服务时间建模,并采用排队理论进行分析和仿真。根据该理论,采用写路径增加缓冲资源并根据负载情况调整缓冲区延迟策略可以改善和优化写工况下的服务质量。Memblaze针对几种不同的方案做了大量的仿真测试,并证实了上述几种方案对写延迟的降低效果。

原始方案与改进方案在平均延时、5x9和8x9延迟的比较

由于读延迟直接影响着最终用户的体验,所以从SSD到系统对于读的优化研究也至关重要。通常Flash的带宽远超存储接口带宽,不构成读的性能瓶颈,但是在读写混合的工况下,由于读命令受到写命令或擦除命令的干扰,服务质量容易变差,这里的写和擦除命令可能来自于业务压力,也有可能是SSD内部的Garbage collection和Flash Erase等后台任务。目前针对SSD读延迟的优化技术主要有Flash读命令优先;协商读数据恢复等级及多副本优化以及存储系统优化读写分时复用和空间隔离。

在具体实现上,Memblaze设计了更为复杂的算法,规避介质的缺陷等因素,并能够针对具体的业务压力,使SSD在响应服务平均时间和中断服务质量间找到平衡。

从存储系统的层面同样有多重技术可以用于改善Flash的读延迟,比如在采用了多副本技术或者是纠删码的存储系统中,就可以通过存储系统与设备进行协商,从多个数据获取方式中选择最佳延迟的方案进行读取数据、出错处理等操作,提升系统整体的服务质量。

在新的NVMe协议中,将提供了Predictable Latency Mode和NVM Sets的新接口能力,分别提供了时间和空间的隔离能力,分时复用和空间隔离要求顶层考虑使用Flash的行为加以限制,避免同时对同一个位置同时读写。

存储系统优化读写分时复用和空间隔离

在演讲的最后,路向峰谈到了基于AI的面向服务质量的智能系统,他认为“为了能够适应机器学习框架,需要把现有的存储系统逐步调整成为任务处理层和策略优化层。在任务处理层实现对于存储具体业务的处理,而在策略优化层,需要分析业务处理的性能和服务质量,并将合适的策略反馈给任务处理层。这些数据可供机器学习算法训练模型,在此基础上逐渐迭代和优化策略。”

提升用户体验是Memblaze工作的终极目标。针对不同的应用场景和工作负载, PBlaze系列NVMe SSD力求为用户提供更加平稳的高性能和更高的可靠性。多年实践中,Memblaze不仅掌握了大量核心技术提升SSD性能稳定性、寿命和可靠性,并且从设备到系统多个层面研究和验证不同方案对于提升用户体验的效果。这些工作和成果不仅推动了闪存和NVMe技术的发展,更是数据中心生态演进和完善不可或缺的组成部分。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 存储
    +关注

    关注

    13

    文章

    4261

    浏览量

    85656
  • 核心技术
    +关注

    关注

    4

    文章

    625

    浏览量

    19580

原文标题:【深度】企业级SSD实现99.999999%延迟稳定性之秘籍

文章出处:【微信号:SSDFans,微信公众号:SSDFans】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    视视频云存储系统应用方案,为安防监控系统提供可靠数据存储

    这次由a&s发起的《海康威视云存储系统应用方案测评》在海康威视武汉研发中心进行,海康威视对云存储产品的功能、性能、特点以及应用场景进行了展示
    的头像 发表于 11-22 06:32 9680次阅读
    视视频云<b class='flag-5'>存储系统</b>应用方案,为安防监控<b class='flag-5'>系统</b>提供可靠数据<b class='flag-5'>存储</b>

    一种针对存储系统设计的应用级缓存回收策略

    服务质量保证同时也能够改善存储系统的整体性能【关键词】:应用优先级;;缓存回收策略;;分区缓存管理模型;;存储系统【DOI】:CNKI:SUN:XXWX.0.2010-03-013【正文快照
    发表于 04-24 09:43

    华德利科技——掌握核心技术质量精益求精

    武汉华德利科技有限公司(又名“诚泰电力设备”)始终坚持以“掌握核心技术质量精益求精”作为核心竞争力,经过十来年得探索和发展,已形成了完善的电力仪器仪表测试体系,成为集研发、生产、销
    发表于 05-02 14:06

    关于举办2014全国数据存储技术应用大会

    IBM 在商务数据存储领域创新的若干思路。5、报告题目:云存储系统架构设计实践报 告 人:周 可,华中科技大学教授,博士生导师。报告摘要:云存储系统为用户提供泛在的、有服务质量
    发表于 04-25 14:43

    【NanoPi Duo开发板试用申请】家庭云存储系统与私有云

    项目名称:家庭云存储系统与私有云试用计划:申请理由:最近对Linux应用编写有一些心得以及对云存储进行了了解。想借助NanoPi Duo开发板制作家庭云存储系统与私有云。并开发一些相关
    发表于 09-21 16:39

    IPTV服务质量白皮书

    IPTV服务质量白皮书
    发表于 10-14 14:11

    怎么实现基于FAS466的CCD相机数字视频实时存储系统设计?

    本文在FAST-40 SCSI协议基础上,对实时高速数字视频SCSI存储系统的软硬件进行了设计。
    发表于 06-07 06:32

    OpenHarmony应用核心技术理念与需求机遇简析

    一、核心技术理念 图片来源:OpenHarmony官方网站 二、需求机遇简析 新的万物互联智能世界代表着新规则、新赛道、新切入点、新财富机会;各WEB网站、客户端( 苹果APP、安卓APK)、微信
    发表于 09-22 16:12

    SQMP国际服务质量管理

    SQMP国际服务质量管理  整合「服务质量」经营面与管理面的系统性知识与技能,并适于实务工作运用的服务质量管理系统
    发表于 02-02 16:00 21次下载

    中国IT核心技术(软件体系 集成电路)的发展

    摘要:对中国建立自主、完整的软件体系进行了系统的阐述。对集成电路的发展进行了介绍。关键词:中国IT核心技术;软件体系;集成电路;发展
    发表于 05-05 08:50 17次下载

    IP电话的关键技术服务质量

    【摘 要】对IP电话与普通PSTN电话进行了比较,介绍了两个最具代表性的IP电话标准,归纳了与IP电话相关的关键技术,分析了影响IP电话服务质量的因素,最后,提出了改进IP电话服
    发表于 05-19 21:11 2150次阅读
    IP电话的关键<b class='flag-5'>技术</b>及<b class='flag-5'>服务质量</b>

    基于微软云计算存储系统技术服务平台研究

    的重要基础。对如何保证云存储系统服务质量及可靠性,对于保证海量用户的访问效率,维护海量数据存储的可用性及用户技术服务平台的开发有着重大意义。
    发表于 01-25 16:48 62次下载
    基于微软云计算<b class='flag-5'>存储系统</b>及<b class='flag-5'>技术服务</b>平台研究

    徐菲:对我国5G技术研发试验第三阶段规范进行了详细解读

    在今日举行的“5G技术研发试验第三阶段规范发布会”上,IMT-2020(5G) 推进组5G试验工作组组长徐菲对我国5G 技术研发试验第三阶段规范进行
    的头像 发表于 01-17 10:48 6310次阅读

    2020年第二季度电信服务质量通告

    近日,工业和信息化部发布《关于电信服务质量的通告(2020年第3号)》,从电信用户投申诉情况、电信服务监管情况、经营及消费提示等三个方面,对2020年第儿季度电信服务质量有关情况进行了
    的头像 发表于 09-22 10:16 1690次阅读

    中科曙光基于区块链存储应用的智能高效的专属存储系统—区块链存储系统ChainStor

    对象管理系统,不仅继承了曙光原有分布式存储系统EB级扩展、高可靠和易管理的优势,更是针对区块链存储应用进行了包括核心部件、数据IO通道及模式
    的头像 发表于 12-31 11:36 1.4w次阅读