0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

MemVerge发布新一代分布式技术产品,改变了内存计算的基础架构

牵手一起梦 来源:财经涂鸦 作者:涂鸦君 2020-09-25 14:29 次阅读

9月24日,大内存软件发明者MemVerge正式发布Memory Machine软件。Memory Machine软件与英特尔傲腾持久内存硬件的组合,从根本上改变了内存计算的基础架构。

MemVerge致力于研发基于非易失性内存(Non-Volatile Memory)的新一代分布式技术产品,革命性地将内存和存储融合在一起,为机器学习和大数据应用场景提供更快、更有效的基础平台。

MemVerge由前VMware高级副总裁、EMC高级副总裁范承工博士,XtremIO和Rainfinity的联合创始人、加州理工学院Gordon Moore教授Shuki Bruck,和加州理工学院博士后学者李玥博士联合创建,团队是全球领先的全闪存和超融合 (HCI) 产品开发者

范承工曾表示,创立MemVerge的初衷是,每个应用程序都能在内存中运行。“作为为大内存革命开发下一代软件的第一个践行者,我们的目标是为企业运行数据密集型应用提供一种更为有效的方法。MemVerge的大内存软件在人工智能、机器学习和金融市场数据分析领域已有清晰的应用场景。”

2019年4月,MemVerge正式发布了全球首个内存融合系统的Beta版。公司还获得全球数据中心行业领导者的联合战略投资。今年5月,MemVerge完成1900万美元融资,投资方包括英特尔、思科、NetApp和SK hynix等战略投资者,公司此前投资方高榕资本、Glory Ventures、Jerusalem Venture Partners、LDV、光速创投和北极光创投在本轮融资中持续加注。

来自:天眼查APP

大内存计算:英特尔 Optane 持久内存与内存虚拟化软件的结合

到目前为止,IT 团队一直被迫在高性能的DRAM或低成本的持久内存之间进行抉择,而MemVerge的工程师团队将两者最好的功能结合在一起。

作为业界第一个由软件定义的DRAM和持久内存组成的内存池,MemVerge的部署非常简单,与应用程序完全兼容。MemVerge团队率先扩展了持久内存的性能限制,提供了像 DRAM 一样快的速度,让不可能成为了现实。同时,MemVerge提供企业级内存数据服务,将几十年陈旧的、脆弱的 DRAM 内存层转换为新的、高度可用的内存层。因此,全球各地企业已经开始部署Memory Machine来使用大内存的强大功能。

MemVerge 联合创始人兼CEO范承工表示:“使用英特尔傲腾持久内存硬件和Memory Machine软件部署的服务器,可以实现革命性的大内存架构。Memory Machine利用 DRAM 和持久内存的最佳功能,创建一个新的软件定义的大内存层,该层同时具有低成本、高性能和高可用性的优点。”

IDC认为大内存技术定义了一个全新的细分市场,这个细分市场由内存硬件、大内存软件组成,创造了一个新的持久内存层。

IDC 负责基础设施系统、平台和技术的副总裁 Eric Burgener 表示:“到2024年,全球数据总量的四分之一将是实时数据,全球 2000强企业中,将有三分之二的企业至少部署一个实时工作负载。这正在推动大内存计算对价格、性能和企业级数据服务的需求。”

“英特尔开发了傲腾持久内存,填补了内存存储子系统的空白。”英特尔内存和存储产品集团副总裁兼总经理Alper Ilkbahar表示:“MemVerge 的产品帮助企业既可以享受到传统内存的快速度,同时可以使用到持久内存提供的大容量,而且无需修改应用程序代码。”

emory Machine标准版:使用持久内存的最佳方法

对于需要解决随着内存占用量不断增加而成本也不断增加的企业来说,Memory Machine标准版为应用程序提供对持久内存的兼容访问。MemoryMachine还能为低成本的持久内存强化性能,让它能像DRAM一样运行。IT团队现在无需修改多种应用程序,通过一个MemoryMachine的虚拟化层就可以高效地跨数据中心来部署大内存。

企鹅计算机公司(Penguin Computing)是SMART GlobalHoldings, Inc.(SGH.O)子公司,专为AI/ML推理应用程序提供多个平台。通过集成英特尔傲腾持久内存和MemoryMachine软件,与 SSD相比,企鹅计算机团队将 Facebook 深度学习推荐模型(DLRM)的推理时间缩短为此前的 1/35。

Memory Machine 升级版:企业级的内存数据服务

Memory Machine升级版包括了Memory Machine标准版的所有功能,同时增加了业内第一个企业级的内存数据服务,通过数据服务,可以实现对高可用内存的持久地兼容访问。

IT 团队在磁盘和全闪存存储上非常需要企业级数据服务,尤其是支持宕机恢复的快照和复制功能。

Memory Machine获得专利的 ZeroIO™内存快照技术消除了到存储端的IO过程,能够在几秒钟内从 PMEM 中快照并恢复多个TB数据,而不是花费数分钟到几小时从存储中恢复。

全球各地企业开始部署Memory Machine

MemX 是一家技术驱动的新一代证券交易所,它部署了英特尔傲腾持久内存和MemoryMachine软件,以提高其交易应用程序环境的功能。MemXCTO Dominick Paniscotti表示:“在设计我们新的证券交易所时,我们寻求在市场波动时,能够提供高性能和低方差的技术。MemVerge的Memory Machine软件展现了相较于其他内存基础架构具有显著优势的性能,同时也展现了较低的波动和更好的稳定性。”

意大利市值最高的银行集团Banca Intesa Sanpaolo部署了英特尔持久内存和Memory Machine软件,以提高其内存数据库应用程序的性能和可用性。

“Intesa Sanpaolo的企业文化之一就是通过洞察趋势,与企业进行对话来促进创新,以便在尽可能短的时间内提供有效的解决方案。我们相信,我们的内存应用程序足迹将逐步扩大,同时也能应对来自最高服务级别的挑战。” Banca Intesa Sanpaolo 云和混合数据中心主管 Nicola Carotti 表示:“MemVerge MemoryMachine的 ZeroIO 快照功能显著提高了新应用程序的性能,将恢复时间从数小时缩短到了数秒。”

平安银行是MemVerge大内存软件的合作伙伴之一,此次发布会上,平安银行大数据平台技术总监沈百军表示,大数据平台从数据加载到内存再到运算,运算完成之后结果再分布到各个服务器上面,整个流程是非常复杂的。如果能解决CPU和IO之间的平衡关系,将对整个软件设计带来革命性的变革。“欧洲前五的银行其实在中国的排名估计也只在50位左右,能将平安银行一亿左右数据量加载至Memory,一直是我们想找寻的技术点。”

沈百军还提到,IO对于大数据平台在设计上的影响非常大。“我一直也在打造一个快速的交付式数据应用场景,让用户能够快速获取数据。我们的愿景是引入大内存技术,全面实现ZeroIO。”

责任编辑:gt

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 内存
    +关注

    关注

    8

    文章

    2998

    浏览量

    73875
  • 机器学习
    +关注

    关注

    66

    文章

    8375

    浏览量

    132398
  • 大数据
    +关注

    关注

    64

    文章

    8863

    浏览量

    137283
收藏 人收藏

    评论

    相关推荐

    分布式通信的原理和实现高效分布式通信背后的技术NVLink的演进

    大型模型的大小已经超出了单个 GPU 的范围。所以就需要实现跨多个 GPU 的模型训练,这种训练方式就涉及到了分布式通信和 NVLink。 当谈及分布式通信和 NVLink 时,我们进入了个引人入胜且不断演进的
    的头像 发表于 11-18 09:39 218次阅读
    <b class='flag-5'>分布式</b>通信的原理和实现高效<b class='flag-5'>分布式</b>通信背后的<b class='flag-5'>技术</b>NVLink的演进

    文讲清什么是分布式云化数据库!

    分布式云化数据库是种先进的数据管理系统,它将传统的数据库技术分布式计算、云计算和大数据处理
    的头像 发表于 10-14 10:06 183次阅读

    分布式工业物联网平台:引领智能制造的新篇章

    产品销往世界各地,以最小的成本创造最大的利润。 分布式工业物联网平台的定义与特点 分布式工业物联网平台是种基于云计算
    的头像 发表于 09-27 17:09 194次阅读

    基于分布式计算的AR光波导中测试图像的仿真

    (10201次模拟):大约43小时。 模拟结果:不同视场角的辐射通量。 注: 21个×21个方向的结果存储在参数连续变化的光栅的查找表中。 使用分布式计算 参数运行用于改变当前视场模式的角度,这允许将
    发表于 08-07 14:13

    浪潮信息推出基于新一代分布式存储平台AS13000G7的AIGC存储解决方案

    新一代分布式存储AS13000G7自身产品优势,新方案从容应对大模型应用对存储性能、容量以及数据管理等方面的苛刻要求。同时,浪潮信息尝试性提出GPU计算集群算力与存储集群聚合带宽的推
    的头像 发表于 07-01 19:00 1378次阅读
    浪潮信息推出基于<b class='flag-5'>新一代</b><b class='flag-5'>分布式</b>存储平台AS13000G7的AIGC存储解决方案

    浪潮信息发布AS13000G7-N系列分布式全闪存储

    浪潮信息近日推出了专为大型AI模型优化的AS13000G7-N系列分布式全闪存储。该系列基于浪潮信息自研的分布式文件系统,结合新一代数据加速引擎DataTurbo,为用户提供卓越的存储解决方案。
    的头像 发表于 05-14 10:03 519次阅读

    浪潮信息发布为大模型专门优化的分布式全闪存储AS13000G7-N系列

    近日,浪潮信息发布为大模型专门优化的分布式全闪存储AS13000G7-N系列。该系列依托浪潮信息自研分布式文件系统,搭载新一代数据加速引擎DataTurbo,
    的头像 发表于 05-08 09:38 507次阅读
    浪潮信息<b class='flag-5'>发布</b>为大模型专门优化的<b class='flag-5'>分布式</b>全闪存储AS13000G7-N系列

    图读懂浪潮信息新一代分布式全闪存储AS13000G7-N系列

    图读懂浪潮信息新一代分布式全闪存储AS13000G7-N系列
    的头像 发表于 05-08 09:35 1200次阅读
    <b class='flag-5'>一</b>图读懂浪潮信息<b class='flag-5'>新一代</b><b class='flag-5'>分布式</b>全闪存储AS13000G7-N系列

    OpenHarmony开发案例:【分布式计算器】

    使用分布式能力实现了个简单的计算器应用,可以进行简单的数值计算,支持远程拉起另个设备的计算
    的头像 发表于 04-11 15:24 992次阅读
    OpenHarmony开发案例:【<b class='flag-5'>分布式</b><b class='flag-5'>计算</b>器】

    分布式存储与计算:大数据时代的解决方案

    分布式存储和计算技术应运而生,并迅速成为处理大数据的首选方案。本文将深入探讨分布式存储和计算的概念、优势及其在各个领域的应用情况。 1.分布式
    的头像 发表于 03-07 14:42 691次阅读

    得瑞领新参编团体标准《高性能计算 分布式存储系统技术要求》正式发布

    得瑞领新参编的《高性能计算 分布式存储系统技术要求》团标由中国电子工业标准化技术协会正式发布,这标志着得瑞在高性能
    的头像 发表于 03-01 10:00 425次阅读
    得瑞领新参编团体标准《高性能<b class='flag-5'>计算</b> <b class='flag-5'>分布式</b>存储系统<b class='flag-5'>技术</b>要求》正式<b class='flag-5'>发布</b>

    什么是分布式架构?

    分布式架构是指将个系统或应用拆分成多个独立的节点,这些节点通过网络连接进行通信和协作,以实现共同完成任务的架构模式。这种
    的头像 发表于 01-12 15:04 1157次阅读
    什么是<b class='flag-5'>分布式</b><b class='flag-5'>架构</b>?

    分布式通信是什么 分布式网络搭建

    智能机器人的功能繁多,全都放在计算机里,经常会遇到计算能力不够、处理出现卡顿等情况,如果可以将这些任务拆解,分配到多个计算机中运行岂不是可以减轻压力? 这就是
    的头像 发表于 11-27 15:49 739次阅读
    <b class='flag-5'>分布式</b>通信是什么 <b class='flag-5'>分布式</b>网络搭建

    分布式全闪架构的演进之路

    无共享体系结构 (SNA:Shared-Nothing Architecture) 是分布式计算体系结构,其中每个更新请求都由计算机群集中的单个节点(处理器/
    的头像 发表于 11-27 10:12 712次阅读
    <b class='flag-5'>分布式</b>全闪<b class='flag-5'>架构</b>的演进之路

    星辰天合发布新一代全闪分布式存储,英特尔® QAT及英特尔® DSA助其提供非凡性能

    存储“星飞 XINFINI 9000”。英特尔与星辰天合联合创新,将第四英特尔 至强 可扩展处理器与星辰天合全新一代星飞全闪分布式存储系统强强整合,为用户提供了非凡的性能。 XS
    的头像 发表于 11-24 20:00 881次阅读
    星辰天合<b class='flag-5'>发布</b>全<b class='flag-5'>新一代</b>全闪<b class='flag-5'>分布式</b>存储,英特尔® QAT及英特尔® DSA助其提供非凡性能