0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

大数据时代,西部数据的应对之道:创新存储架构

话说科技 2021-04-23 13:16 次阅读

在日前于IPF2021浪潮数据中心合作伙伴大会期间举办的数据存储论坛上,西部数据公司副总裁兼中国区业务总经理刘钢做了题为“创新存储架构,赋能智算浪潮”的主题演讲,阐释了西部数据公司在大数据时代的存储应对之道。

西部数据公司副总裁兼中国区业务总经理刘钢

大数据时代存储面临挑战

在如今的数字经济时代,数据作为企业的宝贵资产,已经成为驱动企业发展的核心生产力要素。伴随以人工智能物联网5G等为代表的数字技术的不断发展和落地,其带来的是数据量级的激烈增长。事实上,对于企业用户而言,要存储这些宝贵资产也面临着极大挑战。

刘钢在演讲中谈到,如今数据的来源并不仅仅是人,也包含了成千上万的机器设备,以及数据中心所产生的数据。而次生数据的放大效应也会产生更巨量的数据。在未来几年中,这些新增数据量加在一起会达到惊人的3ZB。

而即便数据增长如此快速,但最终也只有1.5%的数据被存储下来。因为对于数据存储而言,企业用户既存在海量的存储需求,也存在快速访问寻求,同时也对于存储的成本和功耗提出更高的要求。

西部数据的应对之道:创新存储架构

当前数据存放的关键技术基本可分为两种,其一是HDD,用于存放大数据;其二是SSD,对应着快数据的存放。刘钢表示,为了应对大数据时代的上述问题及挑战,仅凭一种存储技术显然难以做到。西部数据所做的是对存储架构进行创新。

由于数据对于存储的需求并不相同,有着不同的分层。而无论是SSD还是HDD,当对数据进行分区,其在存储盘中引发的效应就会增强。在西部数据看来,创新的存储架构包括三种:

第一种存储架构是分布式存储。相对于传统中心化的存储方法WEB2.0,WEB3.0是去中心化的分布式存储方法。去中心化带来新的存储架构,同时也带来了存储在成本和容量方面的优势。

第二种存储架构是分层存储。数据分为不同层,根据数据对于存储的容量、时延等指标的需求,西部数据将其分为极热存储、热存储、温存储、冷存储和极冷存储五层。不同的数据需求需要对应不同的存储设备。

例如冷存储大容量盘可达到18TB,极冷存储则可引入多次读取等技术;而在快存储中,用户希望快速访问高价值数据,进行业务的预测或决策等,因此可以应用SSD解决。

值得一提的是,尤其是对于互联网领域云存储而言,HDD容量密度的提升可以降低整体数据中心的部署及运营成本。比如在配置不变的前提下,将HDD密度从14TB提升至18TB,则可以降低22%的服务器使用,单位功耗则会降低21%。因此,许多特别是互联网服务商多会快速跟进最新的存储容量。

第三种存储架构是分区存储。SSD中往往会设有一个预留空间(7.68TB为7%,6.4TB为28%),其很多时候会进行数据垃圾的收集。而在ZNS SSD中,预留空间容量为零,但采用了新的技术进行分区处理。ZNS SSD带来的一大好处是,垃圾数据收集时并没有拉低整体存储的性能,同时也降低了成本。

在美国健康数据管理服务商Qumulo应用案例中,其采用西部数据Ultrastar SN640 7.68TB NVMe SSD之后,每日可读取和分析高达2PB的数据,数据分析量提升20倍,极大推进了疫苗开发工作以及对疫情的控制。

另外,IPFS通过采用(4U60+18T) 相比传统存储方案(4U36+16T)让机柜空间减少46%,电源功耗降低36%,实现TCO成本的降低。

西部数据的三大优势

应该说,在企业用户的数据存储中,SSD对于用户整体存储的成本和性能的影响至关重要。而对于SSD供应商而言,要极大降低SSD成本,拥有自己的大规模产能非常重要。

会上,刘钢强调了西部数据在SSD领域拥有的三大核心优势:

第一,西部数据拥有全球领先的SSD产能优势。在这方面,西部数据与铠侠可以占到全球产能三分之一的份额。

第二,西部数据拥有领先的SSD技术优势。今年2月,西部数据发布了最新第六代162层3D闪存技术。其横向单元阵列密度较上一代技术提高了约10%;与112层堆叠技术相比,第六代技术将晶圆尺寸有效减小40%,大大优化成本;与上一代产品相比,第六代程序性能提升2.4倍,读取延迟降低约10%,I/O性能提高约66%。

第三,西部数据拥有垂直企业级固态硬盘纵向集成优势。例如在全球最大电商之一应用案例中,其对于稳定性的要求是上下10%波动,而西部数据相应方案的实测波动仅为0.11%。

除了全球市场,西部数据也与中国企业巨头保持了紧密的合作。比如西部数据与浪潮一直存在非常多的合作。

刘钢表示,在面临大数据时代挑战时,应对之道是创新的存储架构,包括分布式存储、分层存储和分区存储。西部数据不仅提供新的技术来不断创新和优化存储产品及解决方案,也会携手合作伙伴共同创新企业级存储市场的未来。

西部数据公司副总裁兼中国区业务总经理刘钢

“高速发展的人工智能在对数字经济产生巨大赋能和推动的同时,也推动整个计算产业向'智慧计算'方向演进,巨量模型和海量数据,对算力和存储的需求呈指数级增长。我们很高兴能持续深化与浪潮的合作,结合双方前沿科技与产品的独特优势,协力打造出高性能、低成本、且兼具稳定性与扩展性等特点的卓越解决方案,优化资源配置,赋能智慧计算。未来,西部数据将与浪潮加强纵深合作,不断以创新的数据存储架构和解决方案,应对市场多样化的需求,并携手生态系统中的各方伙伴共同推动智能产业的转型与发展,为行业用户创造更多价值。”刘钢如是说。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
收藏 人收藏

    评论

    相关推荐

    西部数据正式推出超大容量 ePMR HDD 以满足日益增长的近线存储需求

    2024年10月16日,上海 – 西部数据 HDD 不仅是数据存储设备,更是企业优化基础设施建设、降低 TCO 并打造面向未来的数据策略过程中核心的推动要素。为满足现今
    的头像 发表于 10-16 18:47 602次阅读
    <b class='flag-5'>西部数据</b>正式推出超大容量 ePMR HDD 以满足日益增长的近线<b class='flag-5'>存储</b>需求

    西部数据发布WD Blue SN5000 NVMe SSD

    西部数据近期宣布,正式推出其WD Blue系列的最新成员——WD Blue™ SN5000 NVMe™ SSD,专为追求极致性能的内容创作者与专业人士量身打造。这款SSD的推出,标志着西部数据在高端存储解决方案领域的又一重要里程
    的头像 发表于 09-02 18:25 870次阅读

    西部数据拟6.77亿美元扩产泰国机械硬盘生产线

    近日,全球领先的数据存储解决方案提供商西部数据传来重要投资动向。据市场消息透露,西部数据正计划斥资约6.77亿美元(折合230亿泰铢),在泰国扩大其机械硬盘(HDD)的生产能力。这一扩
    的头像 发表于 08-30 16:32 1560次阅读

    西部数据推出2TB QLC NAND闪存芯片,重塑数据存储新纪元

    在当今这个数据爆炸的时代存储技术的每一次革新都牵动着整个科技行业的神经。近日,西部数据在投资者活动上揭开了一项令人瞩目的技术突破——业界最高密度的2TB QLC NAND闪存芯片,这
    的头像 发表于 06-15 11:42 1014次阅读

    西部数据发布AI数据周期框架,推动人工智能革新

    在人工智能领域持续革新的今天,西部数据公司凭借其深厚的技术积累,正式发布了全新的人工智能数据周期(AI Data Cycle)框架。这一框架不仅为下一代人工智能的飞速发展提供了强大助力,更为用户指明了如何构建高效、经济的存储基础
    的头像 发表于 06-14 17:55 977次阅读

    西部数据发布全新人工智能数据周期存储框架,助力用户发掘人工智能价值

    公司持续拓展旗下企业级SSD和HDD产品组合,应对全新人工智能数据周期中的关键工作负载 2024年6月7日,上海- 西部数据公司(NASDAQ:WDC)于今日正式发布了人工智能数据周期
    的头像 发表于 06-11 10:57 374次阅读

    西部数据发布专为传媒娱乐业工作流打造的全新高性能、大容量解决方案

    打造的创新技术和存储解决方案。西部数据立足创新,不断探索创造更先进的解决方案,助力广大用户应对数字内容激增产生的
    的头像 发表于 04-12 16:02 435次阅读
    <b class='flag-5'>西部数据</b>发布专为传媒娱乐业工作流打造的全新高性能、大容量解决方案

    聚焦AI、汽车和PC应用新需求,西部数据携旗舰存储产品亮相CFMS峰会

    作为领先的数据存储解决方案提供商,西部数据公司参加了CFMS 2024峰会,现场以“为存储加速:从数据中心到边缘”为核心主题的展台吸引了众多
    的头像 发表于 03-25 14:34 2225次阅读
    聚焦AI、汽车和PC应用新需求,<b class='flag-5'>西部数据</b>携旗舰<b class='flag-5'>存储</b>产品亮相CFMS峰会

    迈向存储新高度,西部数据多款新品亮相闪存峰会

    新机遇与新机会。 全球领先的数据存储解决方案提供商西部数据也以“为存储加速:从数据中心到边缘”为核心主题参与了这场盛会,给参会者带来多款尖端
    的头像 发表于 03-22 11:16 457次阅读
    迈向<b class='flag-5'>存储</b>新高度,<b class='flag-5'>西部数据</b>多款新品亮相闪存峰会

    江波龙与西部数据拓展业务合作,共同助力大中华区手机存储市场

    CFMS2024上宣布与西部数据加强合作关系,积极探索并共同支持下一代基于人工智能的移动终端存储和应用的市场机遇。在双方长期合作的基础上,江波龙和西部数据将进一步
    的头像 发表于 03-21 08:19 320次阅读
    江波龙与<b class='flag-5'>西部数据</b>拓展业务合作,共同助力大中华区手机<b class='flag-5'>存储</b>市场

    西部数据推出针对OEM厂商的全新商用SSD,树立下一代QLC产品性能标杆

    2024年3月20日,上海 – 数字化时代的高速发展要求推动未来技术创新数据存储也持续迭代革新。为满足用户对于高性能、高可靠性、更大容量及更低成本的多样化
    的头像 发表于 03-20 18:19 1201次阅读
    <b class='flag-5'>西部数据</b>推出针对OEM厂商的全新商用SSD,树立下一代QLC产品性能标杆

    西部数据分拆存储业务:闪存与传统硬盘的分离

    自2021年起,西部数据及合作方铠侠一直着手探讨合并事宜,以便共同掌控占据全世界NAND闪存市场三分之一份额的市场份额。然而,2023年10月的合并协商陷入停滞,此后西部数据宣布,他们将逐步剥离受供应过盛所困的闪存业务
    的头像 发表于 03-06 16:57 726次阅读

    春日有礼,西部数据和“她”一起开启存储焕新计划

    每一个女孩都是独特而美丽的存在,享受生活的同时不忘记录那些难忘的瞬间。3.8春季大促,西部数据带来了令人怦然心动的存储购物清单,助力每一位“她”记录生活亮点,高效应对职场与学习。还不快拿上小本
    的头像 发表于 03-04 15:57 491次阅读
    春日有礼,<b class='flag-5'>西部数据</b>和“她”一起开启<b class='flag-5'>存储</b>焕新计划

    AI大模型加速落地! 西部数据助力数据中心智能化升级

    面对AI大模型的发展和普及,西部数据作为全球数据存储解决方案提供商,如何看待这种浪潮到来,生成式AI技术发展对现有基础设施部署工作带来哪些挑战?对存储产品带来了哪些新的发展机遇和要求?
    的头像 发表于 02-18 00:03 4527次阅读
    AI大模型加速落地! <b class='flag-5'>西部数据</b>助力<b class='flag-5'>数据</b>中心智能化升级

    多样需求大满足!西部数据年终好价存储好物请查收

    临近年末,“年终好价节”等购物节盛大来袭。各种折扣优惠和产品推荐让人眼花缭乱,无从下手。至此,西部数据带来了存储“全家桶”,一站式选购清单,省时省力,贴心地“手把手”教大家选择适合自己的存储好物
    的头像 发表于 12-01 16:12 393次阅读
    多样需求大满足!<b class='flag-5'>西部数据</b>年终好价<b class='flag-5'>存储</b>好物请查收