0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

什么是数据湖?数据湖和数据仓库有什么区别?

SNP中国 来源:SNP中国 作者:SNP中国 2024-05-20 12:38 次阅读

从本质上说,数据湖就是一个信息资源库。人们常常将数据湖与数据仓库混为一谈,但两者在架构和满足的业务需求上都不一样。尤其是,随着社交媒体数据、物联网机器数据和交易数据持续快速增加,云数据湖成为了现代数据管理战略的重要组成部分。存储、转换和分析各类数据的能力可以为企业发现新业务机会和实现数字化转型铺平道路,而数据湖正好能赋予企业这种能力。

数据湖的定义

数据湖是一个中央数据存储库,可以帮助解决数据孤岛问题。重要的是,数据湖可以存储大量原生或原始格式的原始数据,包括结构化、非结构化和半结构化格式的数据。数据湖,尤其是云端的数据湖,具有成本低、易扩展的特点,并且常与实用机器学习分析工具一起使用。

数据湖 VS 数据仓库

与数据湖相比,数据仓库还提供数据管理功能,而且存储的是经过处理和过滤的数据,这些数据事先基于预定义的业务问题或用例进行了处理。

wKgZomZK08KAGM0PAABJtl54PpU037.png

数据仓库和数据湖对比

数据仓库与数据湖通常互为补充。例如,当需要存储在数据湖中的原始数据来回答业务问题时,可以将其从数据湖中提取出来,进行清理和转换,然后在数据仓库中进一步分析。

“数据湖仓一体”是近几年出现的新概念,还在不断发展,它在传统数据湖的基础上增添了数据管理功能。从本质上讲,数据湖库就是数据湖和数据仓库的融合。

除上述数据类型和流程差异外,下表还列出了数据湖与数据仓库解决方案的一些其他区别。

wKgaomZK08KAXRdcAACZDHLUWjk409.png



审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 数据管理
    +关注

    关注

    1

    文章

    272

    浏览量

    19494
  • 数据仓库
    +关注

    关注

    0

    文章

    60

    浏览量

    10408
收藏 人收藏

    评论

    相关推荐

    数据中台、数据仓库数据治理与主数据的定位与差异

    在数字化时代,大数据已经成为企业运营和决策的重要资产。为了更好地管理和利用这些数据数据中台、数据仓库数据治理和主
    的头像 发表于 05-08 10:40 193次阅读

    TC397多核之间数据访问效率什么区别?本地和全局的效率什么区别

    TC397多核之间数据访问效率什么区别,本地和全局的效率什么区别,可不可以将电机同步ADC采集放到主核0,算法在1核执行
    发表于 02-06 07:42

    构建高效数据生态:数据库、数据仓库数据湖、大数据平台与数据中台解析_光点科技

    在数字化的浪潮中,一套高效的数据管理系统是企业竞争力的核心。从传统的数据库到现代的数据中台,每一种技术都在数据的旅程中扮演着关键角色。本文将深入探讨
    的头像 发表于 01-17 10:20 187次阅读

    数据中台系统和数据仓库什么区别?#数据中台 #光点科技

    数据
    光点科技
    发布于 :2023年11月10日 17:46:39

    数据中台产品与传统数据仓库区别?#数据中台 #光点科技

    数据
    光点科技
    发布于 :2023年10月30日 17:22:22

    数据仓库概述及特点

    数据库已经在信息技术领域有了广泛的应用,我们社会生活的各个部门,几乎都有各种各样的数据库保存着与我们的生活息息相关的各种数据。作为数据库的一个分支,
    发表于 08-11 14:33 3269次阅读

    加速Oracle数据仓库 Emulex和博科第6代光纤通道

    电子发烧友网站提供《加速Oracle数据仓库 Emulex和博科第6代光纤通道.pdf》资料免费下载
    发表于 08-03 10:20 0次下载
    加速Oracle<b class='flag-5'>数据仓库</b> Emulex和博科第6代光纤通道

    如何提高数据仓库的性能及优化设计

      随着数据仓库规模的扩大,数据仓库的性能问题就显得越来越突出,如何提高数据仓库的性能,除了在设计阶段对其逻辑结构和物理结构进行优化设计外;还可以在数据仓库运行阶段,采取一些优化措施来
    发表于 07-18 16:10 0次下载

    数据仓库实现(2)#数据挖掘

    数据
    学习硬声知识
    发布于 :2023年07月06日 16:20:43

    数据仓库实现(1)#数据挖掘

    数据
    学习硬声知识
    发布于 :2023年07月06日 16:20:17

    数据仓库基本概念(2)#数据挖掘

    数据
    学习硬声知识
    发布于 :2023年07月06日 16:19:30

    数据仓库设计(3)#数据挖掘

    数据
    学习硬声知识
    发布于 :2023年07月06日 16:13:54

    数据仓库设计(2)#数据挖掘

    数据
    学习硬声知识
    发布于 :2023年07月06日 16:13:09

    数据仓库设计(1)#数据挖掘

    数据
    学习硬声知识
    发布于 :2023年07月06日 16:12:16

    数据湖真的能取代数据仓库吗?【SNP SAP数据转型 】

    数据和数据仓库的存在并不冲突,也并不是取代的关系,而是相互的融合关系。 数据湖是近两年中比较新的技术在大数据领域中,对于一个真正的数据湖应
    的头像 发表于 07-03 15:48 403次阅读
    <b class='flag-5'>数据</b>湖真的能取代<b class='flag-5'>数据仓库</b>吗?【SNP SAP<b class='flag-5'>数据</b>转型 】