0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

非结构化数据暴增,企业如何稳定高效的支撑日均百亿级访问

秃头也爱科技 来源:秃头也爱科技 作者:秃头也爱科技 2022-12-02 09:19 次阅读

  5G时代来临,游戏、视频直播成为当下最为热门的娱乐方式,网上冲浪更快更满足。但数据量的爆发式增长带来的系统响应速度迟缓、数据库无损扩容难、数据存储成本陡增等问题扑面而来。

  以视频业务为例,每秒10万业务请求时,单表产生的数据量可能会高达数十亿。数据量暴增则需要扩容,对于传统自建数据库,扩容过程非常复杂,数据库系统扩容需要提前几个月去做规划,细致的部署,缜密的实施,需经历上线-灰度-再验证等过程,由于业务有变化起伏,当业务高峰过了后需要面临缩容的痛苦,否则将会造成极大的资源浪费,这是传统架构带来的必然问题。

  今天就来聊聊华为云GaussDB(for Cassandra)面对内容分发、视频直播等领域如何更低成本助力企业乘风破浪,快速应对业务百亿数据量增长。

无忧迁移百亿数据量,分钟级快速扩展

  首先,解决无忧搬迁海量数据尤为重要,华为云数据库提供了数据复制服务DRS,在不影响业务的情况下,可搬迁数据规模超过10TB,单表高达数百亿数据;同时可支持将数据反向同步到源库,可保证两边的数据一致性。

  其次,华为云GaussDB(for Cassandra) 多副本策略下沉到共享存储,大幅提升弹性伸缩能力,计算节点按需扩展,不需要做数据迁移;支持一键扩缩容,扩缩容耗时仅分钟级别,相比开源Cassandra扩容时长提升几十倍,可轻松应对业务变化。

降低成本、无损升级,业务无感知

  相比开源Cassandra,相同性能下的引擎规格,华为云GaussDB(for Cassandra) 2U8G规格的费用仅为开源Cassandra 8U32G规格的70%,同时免去了后续扩容存储等数据搬迁各项工作。此外,华为云GaussDB(for Cassandra)提供了无损升级方案,实现升级期间业务基本无感知。

轻松满足多维度、大数据量复杂查询场景

  在信息流、内容分发场景中,华为云GaussDB(for Cassandra)自身在写性能上具有先天优势,针对客户查询场景复杂及查询性能要求高的特点,GaussDB在大数据量查询性能进行了优化,引入视图增强特性,并对表结构进行优化设计,满足了信息流、内容搜索等业务的查询需求。

支持内容自动推荐,流服务助力客户轻松捕获数据变更

  内容分发场景,客户使用最多的便是自动推荐系统,由于传统NoSQL数据库无法做搜索引擎,所以需要将数据同步到搜索服务中支撑搜索功能。在内容管理业务中,一般都会用到经典应用场景---数据变更捕获完成数据同步,华为云GaussDB(for Cassandra) 实现了Stream功能,支持数据同步到搜索引擎中,完美支撑了在线大数据分析,内容自动推荐等场景。

支撑离线大数据分析,支持丰富的文件类型

  一般来说,互联网内容分发平台在用户系统、内容处理、信息流服务等场景中都有数据离线导出的需求。而需要分析的数据系统会定期导出到OBS(对象存储服务)上,等分析数据时再从OBS上获取数据进行分析处理。华为云GaussDB(for Cassandra)对导出的过程进行了优化,缩短导出时长,增加导出的文件类型,支持更多的离线分析系统、离线分析能力。

  当前,华为云GaussDB(for Cassandra)成功赋能了工业制造、气象业、互联网等行业,其中助力华为消费者云高效管理全球最大Cassandra节点1万+。华为云GaussDB(for Cassandra)通过解决大集群、大数据量下的性能稳定、数据一致性、可用性等问题,可支撑企业业务快速增长。此外,数字化时代下,视频直播、内容分发给人们带来了更为精准的娱乐体验,华为云GaussDB也将持续打造先进的技术,让人们更快乐的享受数字化服务。
审核编辑:汤梓红

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 数据存储
    +关注

    关注

    5

    文章

    961

    浏览量

    50845
  • 数据库
    +关注

    关注

    7

    文章

    3754

    浏览量

    64255
  • 华为云
    +关注

    关注

    3

    文章

    2422

    浏览量

    17276
收藏 人收藏

    评论

    相关推荐

    打破网络边界:P2Link助力实现高效远程访问与内网穿透

    不同类型的远程访问需求,如远程桌面、文件传输、游戏服务器等。 高效稳定: 通过优化的传输通道和隧道技术,P2Link能够提供低延迟和稳定的连接,特别适合需要高实时性的
    发表于 10-31 11:54

    戴尔升级结构化存储与数据管理,AI创新引领新变革

    在快速演进的人工智能(AI)与数据驱动的时代,企业唯有不断追逐技术创新的浪潮,方能抢占先机,引领行业前行。戴尔科技,作为AI就绪型数据平台的领航者,近期对其Dell PowerScale及数据
    的头像 发表于 10-29 16:52 491次阅读

    企业级数据库的配置和管理要求汇总

    企业级数据库配置需高性能硬件支撑,包括服务器、存储、网络及电源冗余,选用稳定DBMS与操作系统,注重索引与查询优化。管理上,强调数据安全,实施加密、
    的头像 发表于 09-27 10:50 163次阅读

    从零到一:构建高效稳定的HTTP海外访问策略

    在当今全球的互联网时代,无论是企业拓展海外市场,还是个人追求更广阔的信息视野,高效稳定的HTTP海外访问策略都显得尤为重要。
    的头像 发表于 09-24 08:03 177次阅读

    基于分布式对象存储WDS的信托结构化数据整合平台

    基于分布式对象存储WDS的信托结构化数据整合平台
    的头像 发表于 08-28 09:56 259次阅读
    基于分布式对象存储WDS的信托<b class='flag-5'>非</b><b class='flag-5'>结构化</b><b class='flag-5'>数据</b>整合平台

    英伟达市值7500亿

    美东时间周一,科技股市场呈现分化态势,特斯拉股价小幅下滑,而苹果与微软则温和上涨。然而,在这场科技盛宴中,AI芯片领域的领头羊英伟达却大放异彩,股价飙升超过4%,市值一夜之间1050亿美元,相当于人民币7540亿元,成为市场关注的焦点。
    的头像 发表于 08-13 17:48 974次阅读

    【HZHY-AI300G智能盒试用连载体验】基建智慧工地物联边缘代理技术研究及应用

    。 2、部署EMQX、LiveGBS、mySQL等服务端,集中采集本地物联设备的结构化结构化数据; 3、部署华为RomaLink、NTRip、openSSL等客户端,接入
    发表于 07-16 17:14

    定期维护结构化布线对于办公室得重要性

    定期维护结构化布线对于办公室的顺利运行至关重要。结构化布线是指支持建筑物内各种数据、语音和视频系统的标准基础设施。它包括电缆、连接器、机架和其他构成网络主干的组件。 通过正确维护
    的头像 发表于 06-14 10:44 213次阅读

    态势数据存储方式有哪些

    智慧华盛恒辉态势数据的存储方式主要取决于数据的特性、规模以及访问需求。以下是几种常见的态势数据存储方式: 关系型数据库存储:适用于
    的头像 发表于 04-22 19:28 280次阅读

    什么是结构化网络布线?结构化网络布线有哪些好处?

    在电缆领域,结构化网络布线这个术语经常被提及。人们将其用作流行语,但它的真正含义是什么?结构化布线到底是什么? 为了了解真正的含义,让我们看它的一些相关定义。 根据光纤协会的说法,结构化布线是由
    的头像 发表于 04-11 11:54 482次阅读

    结构化布线的好处多吗

    结构化布线是网络系统中的重要组成部分,因为它为数据传输提供了强大、可扩展且可靠的基础。通过遵守全球公认的标准,结构化布线可促进高速连接、简化故障排除并确保未来的可扩展性。考虑到这些优势,企业
    的头像 发表于 04-07 11:15 403次阅读

    什么是网络系统中的结构化布线?

    结构化布线在网络系统中发挥着至关重要的作用,为组织内的无缝通信和数据传输提供了坚实的基础。这种综合基础设施旨在支持广泛的应用程序和技术。本文将深入探讨它是什么、为什么它很重要以及它为组织提供的好处
    的头像 发表于 04-07 10:58 341次阅读

    科通技术推出基于FPGA的应用设计结构化技术

    随着汽车技术的飞速发展,汽车功能的复杂性对处理芯片的算力及IO端口数量提出了更高的要求。作为一家正在进行IPO排队的公司,深圳市科通技术股份有限公司(以下简称:科通技术)积极应对市场挑战,针对新一代汽车辅助驾驶的需求,研发了一系列基于FPGA的应用设计结构化技术。
    的头像 发表于 02-02 09:34 497次阅读

    CFD 设计利器:结构化结构化网格的组合使用

    (曾用名Autogrid),非常适合带有几何形状叶片的涡轮机械应用。01结构化or结构化网格选择,两难境地?随着几何形状的复杂性不断增加(现在通常有超过10k个曲面
    的头像 发表于 12-23 08:12 1654次阅读
    CFD 设计利器:<b class='flag-5'>结构化</b>和<b class='flag-5'>非</b><b class='flag-5'>结构化</b>网格的组合使用

    使用关系数据库中的半结构化数据

    NoSQL革命已经进入了关系世界。您可能正在使用关系数据库,但仍必须查询和理解隐藏在文本列、JSON或 XML文档中的半结构化数据
    的头像 发表于 12-20 10:46 614次阅读
    使用关系<b class='flag-5'>数据</b>库中的半<b class='flag-5'>结构化</b><b class='flag-5'>数据</b>