0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

希捷CORTX加速对象存储创新,数据的开源普惠

工程师邓生 来源:中关村在线 作者:徐鹏 2020-11-30 14:38 次阅读

数字经济正在成为现代社会发展的重要指标,数据作为数字经济体中的核心资源,也扮演着更加关键的角色。在指数级增长的数据规模背后,如何高效处理纷繁复杂的数据集和数据类型,是每家企业都在思考的问题,尤其是当非结构化数据变成了企业内部未经开发的“重要价值”。“数据中蕴藏着无尽的价值,企业的成功与数据价值的挖掘息息相关。希捷持续秉承开放、共享及合作的原则,进行技术突破和产品创新。”在Let’s Rethink Data希捷科技线上峰会上,希捷科技全球副总裁暨中国区总裁孙丹表示。

而希捷此次发布的对象存储软件CORTX和CORTX开源社区,就是开放合作和技术创新的最佳实践,同时,希捷还推出了融合基础架构解决方案Lyve Drive Rack。由此,CORTX也上升为公司的重要战略之一。根据希捷以IDC调研为基础发布的《数据新视界:从边缘到云,激活更多业务数据》报告,未来两年,企业数据将会以42.2%的速度增长。数据的多元化不仅对计算的异构性提出新需求,其密集型工作负载对数据的存储、治理、运营同样挑战巨大。CORTX的发布,简单来说就是帮助企业客户部署导入更为优化的数据存储架构。

无论是传统企业的数据挖掘和云化转型,还是互联网企业的超大规模数据中心建设,要想存储更多的数据,最直接的方法就是利用技术红利让硬盘存得更多、成本更低。但是落地到客户一侧,考虑到采购周期、部署成本、内部流程、操作难易度等因素,并不是每家企业都会在第一时间用上最新的产品,而软件化的交付和开源技术,则可以快速让客户使用大容量硬盘,有效降低TCO。要知道,以往软件+硬件绑定“卖盒子”的方式在一定程度上拖累了企业采用新产品的进度。

IDC预测,到2025年全球数据总量将达到175ZB。在企业组织的存储系统中,非结构化数据占据了数据总量的80%-90%。无论是金融行业的数据分析还是医疗行业的影像资料,亦或是教育行业的教学文档、媒体行业的音视频素材等等,都可以看到非结构化数据的影子。然而在非结构化数据高占比的趋势之下,仅有极少的数据被有效利用,其原因在于企业缺乏有效的使用途径,如对象存储曾被认为是一种仅用于合规、归档、次级或冷数据的存储,但如今并非如此。

事实上,已有越来越多的企业在使用对象存储支撑实时、智能化、高性能的工作负载,除了要满足性能和存储扩展性的需求,还要获得数据洞察以便更好地做出决策。与此同时,更好、更快的数据访问能够让非结构化数据成为营收增长的重要推动力。调查显示,只要数据可访问性增加10%,就能带来超过6500万美元的额外净收入。为了更好地激活数据,企业需要开放的架构、新的管理策略,来快速地整合并分析海量的、动态的数据。

“我们把CORTX开源之后,希望大家都可以在上面开发自己的对象存储应用,快速使用到希捷的大容量硬盘。”孙丹谈到,“我们是最了解大容量数据和软件兼容的供应商,我们可以完全不受硬件限制,客户只需要用我们的软件平台,当然用其它硬件也可以,我们已经针对大容量硬盘设计好了配套的对象存储软件平台。”由此,传统客户和服务商可以不受技术门槛的限制,第一时间使用到最新的存储技术和产品。

据了解,CORTX兼容swift、S3等主流云服务商使用的所有对象存储软件,在应用时可以混用不同容量硬盘,而不会影响性能和兼容性,实现利旧最大化。结合硬件参考解决方案,用户可以对硬件进行定制化配置,集成一些第三方组件,如针对I/O进行优化的软件等等。

借助CORTX,可以将HAMR、MACH.2等技术快速普惠到客户的业务场景中,大容量盘的替换可以在有限空间内大幅节省部署成本。以某客户部署可靠性11个9的对象存储集群为例,相较传统的Ceph,使用CORTX结合高密度存储硬件可让每TB造价降低一半。

与CORTX对象存储相结合,Lyve Drive Rack提供了一种紧密集成的融合基础架构解决方案,容量最高可达1.7PB,无需支付高昂的存储软件授权费用。Lyve Drive Rack能在一致的对象、键值、文档和集群中实现可扩展的性能,采用100%开源代码,可降低对固定供应商的依赖,并且不限供应商的管理界面,兼容SSPL和Redfish/Swordfish。

Lyve Drive Rack

希捷科技中国区资深解决方案工程师李蓁介绍称,希捷的对象存储解决方案在设计之初就针对AI机器学习等特性进行了调优,用户可以直接在CORTX上标注数据,内置的内存键值对能够做到高效检索。同时,Lyve Drive Rack还利用专有芯片大幅降低了纠删码使用时所需的配置内存,通过将纠删码卸载到专用ASIC以确保多层数据保护,实现了更大数据集的数据弹性。

从数据的端到端管理到数据运营,复杂的工作场景和多平台迁移对数据的采集、存储、分析提出了更高的要求,供应商不仅要应对指数增长的数据规模,还要解决企业内部和流程中的数据拉通和管理问题,并根据数据训练和推理给出预测。数据管理阶段,希捷会集成第三方组件,如CORTX部署硬件时结合VMware等解决方案,之后接入HAMR HDD,通过各类软硬件结合的形式覆盖数据的全生命周期。

“从一开始热度高的时候,我们可以结合第三方的组件来实现数据访问更高效的响应。”李蓁表示,“到了数据生命周期的中后期,可以通过CORTX软件,再把数据进行分层,把这些已经热度降低的数据存入到HDD硬盘里面,实现数据保存效率的提升以及成本的降低。”

CORTX可以帮助企业进行超大规模存储架构的应用和普及,实现有效、快速且经济地部署对象存储,打开数据新视界的新征程。据悉,希捷科技的8家中国客户与合作伙伴新华三集团、同有科技、宏杉科技、UIT创新科、五舟科技、鲸鲨软件、极道科技以及柏科数据等,将就CORTX开源软件与开源社区,与希捷展开更深层次的合作,共同提升对象存储解决方案。“希捷将继续与业界合作伙伴紧密携手,针对市场需求以及应用特点,共同推出更为定制化的、契合需求的解决方案,助力企业的数字化转型征程,为发挥数字生产力的极致价值而努力。”孙丹说。

责任编辑:PSY

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 希捷
    +关注

    关注

    2

    文章

    211

    浏览量

    41630
  • 开源
    +关注

    关注

    3

    文章

    3210

    浏览量

    42288
  • 对象存储
    +关注

    关注

    0

    文章

    67

    浏览量

    11956
  • 大数据
    +关注

    关注

    64

    文章

    8851

    浏览量

    137182
收藏 人收藏

    评论

    相关推荐

    关于对象存储和云硬盘区别,你了解多少?

    对象存储和云硬盘是两种不同的云存储解决方案。对象存储适合处理大规模非结构化数据,通过WebAPI
    的头像 发表于 11-01 10:57 31次阅读

    戴尔科技创新推动存储升级,加速数据价值释放

    自诞生以来,数据存储的成本一直在稳步下降。根据分析机构Our World in Data在《计算机内存和存储的历史价格》中的研究显示,过去二十年,数据
    的头像 发表于 10-25 14:53 219次阅读

    AI即服务平台的优势

    AI即服务平台以其降低成本、加速创新、提升效率、增强安全性及促进化等多方面的优势,正在深刻改变企业运营模式和市场竞争格局。
    的头像 发表于 10-09 11:09 84次阅读

    深开鸿联合深天使发布国内首个开源鸿蒙产业加速

    生态的创新与发展,依托资本和产业的双重力量,助力初创企业在开源鸿蒙生态中实现快速成长。国内首个开源鸿蒙产业加速营发布发布会现场,深圳市天使投资引导基金管理有限公司
    的头像 发表于 10-01 08:10 216次阅读
    深开鸿联合深天使发布国内首个<b class='flag-5'>开源</b>鸿蒙产业<b class='flag-5'>加速</b>营

    深开鸿联合深天使发布国内首个开源鸿蒙产业加速

    生态的创新与发展,依托资本和产业的双重力量,助力初创企业在开源鸿蒙生态中实现快速成长。 国内首个开源鸿蒙产业加速营发布 发布会现场,深圳市天使投资引导基金管理有限公司总经理李新建发表演
    的头像 发表于 09-29 15:28 218次阅读
    深开鸿联合深天使发布国内首个<b class='flag-5'>开源</b>鸿蒙产业<b class='flag-5'>加速</b>营

    基于分布式对象存储WDS的信托非结构化数据整合平台

    基于分布式对象存储WDS的信托非结构化数据整合平台
    的头像 发表于 08-28 09:56 234次阅读
    基于分布式<b class='flag-5'>对象</b><b class='flag-5'>存储</b>WDS的信托非结构化<b class='flag-5'>数据</b>整合平台

    从闪存,到数字化:极简全闪数据中心引发的变革

    全闪,是万千企业的真实需求
    的头像 发表于 08-09 16:08 2276次阅读
    从闪存<b class='flag-5'>普</b><b class='flag-5'>惠</b>,到数字化<b class='flag-5'>普</b><b class='flag-5'>惠</b>:极简全闪<b class='flag-5'>数据</b>中心引发的变革

    基于DPU的Ceph存储解决方案

    1. 方案背景和挑战 Ceph是一个高度可扩展、高性能的开源分布式存储系统,设计用于提供优秀的对象存储、块存储和文件
    的头像 发表于 07-15 13:44 1237次阅读
    基于DPU的Ceph<b class='flag-5'>存储</b>解决方案

    希捷科技任命杨晓东先生为高级副总裁,领导中国区业务

    2024年7月1日——海量数据存储解决方案领先创新希捷科技(NASDAQ: STX)今天宣布任命杨晓东(Robert Yang)先生为高级副总裁,领导中国区业务增长。他将全面负责
    的头像 发表于 07-01 14:04 762次阅读
    <b class='flag-5'>希捷</b>科技任命杨晓东先生为高级副总裁,领导中国区业务

    苹果公司澄清旧机型AI功能支持谣言,强调技术

    在数字时代的浪潮中,人工智能技术(AI)已经深入渗透到我们生活的方方面面。近日,针对市场上流传的关于苹果旧机型不支持AI功能的传闻,苹果公司官方给予了明确的回应,明确指出所有兼容最新iOS系统的设备均能享受AI带来的便利,这并非一种营销策略,而是苹果公司一贯坚持的技术
    的头像 发表于 06-21 17:05 2191次阅读

    极空间上线“阿里云对象存储OSS挂载”功能

    虽然与阿里云盘关联密切,但值得注意的是,阿里云对象存储 OSS 实质上是以对象形式存储于 OSS 存储空间内的内容。用户若想使用 OSS,首
    的头像 发表于 04-03 11:20 593次阅读

    率先采用希捷银河Exos X24,百度联手希捷全面驾驭数据力量

    在现今数据激增的时代,存储技术已成为了行业关注的焦点。作为数据存储领域的领军企业,希捷科技始终站在技术前沿,致力于为全球用户提供高效、可靠的
    的头像 发表于 02-26 15:16 391次阅读

    屡获佳绩!百望云荣膺“2023年度数字金融优秀解决方案”

    近日,2024年中国国际服务贸易交易会系列活动——第七届中国金融科技创新大会在北京开幕。本次大会发布了“科创中国”金融科技创新大赛创新成果,百望云“创新供应链
    的头像 发表于 01-25 11:45 305次阅读
    屡获佳绩!百望云荣膺“2023年度数字<b class='flag-5'>普</b><b class='flag-5'>惠</b>金融优秀解决方案”

    开鸿智谷廖秋林:践行开源战略,推动商业创新

    随着万物智联时代加速到来,OpenHarmony、人工智能、云计算等核心技术正在通过开源实现共享、开发、创新和迭代,开源技术逐渐成为数字经济发展中重要的版块,正
    的头像 发表于 12-27 08:30 611次阅读
    开鸿智谷廖秋林:践行<b class='flag-5'>开源</b>战略,推动商业<b class='flag-5'>创新</b>

    中软国际基于开源鸿蒙的数据存储设备项目入选深圳市2023科技重大专项

    近日,深圳市科技创新委员会下发通知, 由中软国际与哈尔滨工业大学(深圳)联合申报的深圳市2023科技重大专项(第一批)项目《基于开源鸿蒙操作系统的国产化网络数据存储设备》成功立项,获得
    的头像 发表于 12-14 16:00 497次阅读
    中软国际基于<b class='flag-5'>开源</b>鸿蒙的<b class='flag-5'>数据</b><b class='flag-5'>存储</b>设备项目入选深圳市2023科技重大专项