01
分布式存储系统与纠删码技术背景
分布式存储是当代大数据的基本存在形式,在工业界和学术界已经得到深入研究和高度重视,为了解决大规模存储带来的磁盘故障,跨节点直接复制数据包存储是最简单的解决方案。分布式存储能增强存储系统可靠性、柔性生存力、抗数据损毁风险;是实现网络热点访问负载均衡的技术途径、提高边缘计算的处理效率;能达成数据共享服务和隐私保护的便利性。
02
存储系统局部再生修复技术的兴起
数据编码分布式存储有明显的短板,从而提出分布式存储的局部可修复问题和热数据节点负载平衡问题。归纳为发展局部再生修复编码技术的源动力包括减少修复成本以提高维护效率,负载均衡与边缘计算服务。当今分布式存储的新需求是节点数据间接访问的局部重构开销问题和节点数据的局部修复开销问题。
03
局部可修复码LRC及其技术发展态势
分布式存储的局部修复码LRC是一个欲求解的科学问题,分布式数据的局部再生的性能参数直接的制约博弈关系。分布式存储的局部修复码研究现状:LRC码性能界的上限和LRC纠删码的具体构造办法,此处列举了实例和成果。
04
Remarks and Summary
从应用需求看,LRC或RGC纠删码尚存在的不足和倾向如下:
LRC和RGC纠删码的研究存在瓶颈,未来十年需要大家一起挑战存储纠删码,提升优异技术性能。
随着计算机技术和存储技术的发展,数据正以爆炸式的速度增长,海量数据对存储系统提出了巨大的挑战。纠删码技术以牺牲CPU计算量和网络负载为代价,提高存储空间利用率,同时提供近似副本的可靠性。 本篇文章聚焦于分布式存储系统中的纠删码技术,将丰富的理论和工程实践经验加以糅合,探讨可局部再生修复纠删码技术用于提高分布式存储可靠性的实质问题,有助于存储产业在分布式存储架构层面上不断探索和完善。
原文标题:分布式存储系统中的纠删码技术:可局部再生修复技术
文章出处:【微信公众号:存储加速器】欢迎添加关注!文章转载请注明出处。
责任编辑:haq
-
存储
+关注
关注
13文章
4296浏览量
85797 -
LCR
+关注
关注
0文章
130浏览量
20712 -
大数据
+关注
关注
64文章
8882浏览量
137392
原文标题:分布式存储系统中的纠删码技术:可局部再生修复技术
文章出处:【微信号:TopStorage,微信公众号:存储加速器】欢迎添加关注!文章转载请注明出处。
发布评论请先 登录
相关推荐
评论