0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

区块链和大数据的关系及结合的必要性

姚小熊27 来源:人工智能实验室 作者:人工智能实验室 2020-10-23 14:27 次阅读

互联网信息技术的高速发展,更多产业都对产业互联网方面加大投入。大数据、区块链人工智能等高新技术的不断发展,智慧城市应运而生。不过,智慧城市因为数据承载量大,以往的存储方式已经不能满足智慧城市所需的底层架构,因不具备弹性的扩张存储容量,且不能同时存储多种数据,同时安全问题也是智慧城市建设之中的重点,区块链其去中心化的思想与大数据的需求结合,去中心化以简洁的方式保障城市安全,使城市建设和运行更加稳定。

一、大数据和区块链的含义

1.大数据

大数据一般指的是海量、复杂的数据集。传统的数据处理软件无法在合理的时长内捕捉并处理这些数据。这些大数据集包括结构化、非结构化和半结构化数据,每一种数据集都可以通过分析获得洞见。

究竟数据量多大才算“大数据”还有待商榷。但数据量通常为拍字节的倍数;对于最大的项目来说,数据量通常在艾字节范围内。

通常,大数据包括以下三个要素:

海量的数据

各种类型的数据

数据处理和分析的速度

构成大数据存储的数据来源为网站、社交媒体、桌面和移动应用等。大数据的概念来自于使组织能够实际运用数据的组件。此外,企业还可以用大数据解决许多业务问题,如:支持大数据的IT基础设施;应用于数据的分析;大数据项目所需技术;相关技能;以及对大数据有意义的实际用例等。

2.区块链

区块链是一项彻底改变互联网运作方式的技术。该技术的工作原理是创建一系列数据记录,其中每个新纪录都驻留在一个区块中并指向前一个记录。术语“区块链”来自这种连接数据块的结构。

区块链技术使分布式账本系统成为可能,从而使记录更加透明。该技术使用加密技术来保护用户信息,分式账本系统几乎不可能被破解。区块链技术不仅是加密货币的主干技术,还有其它几种用途。

区块链网络上的加密货币交换可呈中心化,也可呈网络化。去中心化的加密货币交换几乎不可能被破解,因为有多个节点支持该系统。区块链技术使点对点共享内容成为可能,无需中间人平台。无论通过区块链网络分享什么内容,用户都保留对内容的所有权,除非用户将其出售给其他人。个人信息非常安全,并受私钥加密保护。

简而言之,区块链是一种网络技术。它可以让用户有机会安全地共享内容,实现点对点交易,不需要中间人或中央管理系统。

二、区块链和大数据的关系是怎么样的呢?

1、数据安全:区块链让数据真正“放心”流动起来

区块链以其可信任性、安全性和不可篡改性,让更多数据被解放出来。用一个典型案例来说明,即区块链是如何推进基因测序大数据产生的。区块链测序可以利用私钥限制访问权限,从而规避法律对个人获取基因数据的限制问题,并且利用分布式计算资源,低成本完成测序服务。区块链的安全性让测序成为工业化的解决方案,实现了全球规模的测序,从而推进数据的海量增长。

2、数据开放共享:区块链保障数据私密性

政府掌握着大量高密度、高价值数据,如医疗数据、人口数据等。政府数据开放是大势所趋,将对整个经济社会的发展产生不可估量的推动力。然而,数据开放的主要难点和挑战是如何在保护个人隐私的情况下开放数据。基于区块链的数据脱敏技术能保证数据私密性,为隐私保护下的数据开放提供了解决方案。数据脱敏技术主要是采用了哈希处理等加密算法。例如,基于区块链技术的英格码系统(Enigma),在不访问原始数据情况下运算数据,可以对数据的私密性进行保护,杜绝数据共享中的信息安全问题。例如,公司员工可放心地开放可访问其工资信息的路径,并共同计算出群内平均工资。每个参与者可得知其在该组中的相对地位,但对其他成员的薪酬一无所知。

3、数据存储:区块链是一种不可篡改的、全历史的、强背书的数据库存储技术

区块链技术,通过网络中所有节点共同参与计算,互相验证其信息的真伪以达成全网共识,可以说区块链技术是一种特定数据库技术。迄今为止我们的大数据还处于非常基础的阶段,基于全网共识为基础的数据可信的区块链数据,是不可篡改的、全历史的、也使数据的质量获得前所未有的强信任背书,也使数据库的发展进入一个新时代。

4、数据分析:区块链确保数据安全性

数据分析是实现数据价值的核心。在进行数据分析时,如何有效保护个人隐私和防止核心数据泄露,成为首要考虑的问题。例如,随着指纹数据分析应用和基因数据检测与分析手段的普及,越来越多的人担心,一旦个人健康数据发生泄露,将可能导致严重后果。区块链技术可以通过多签名私钥、加密技术、安全多方计算技术来防止这类情况的出现。当数据被哈希后放置在区块链上,使用数字签名技术,就能够让那些获得授权的人们才可以对数据进行访问。通过私钥既保证数据私密性,又可以共享给授权研究机构。数据统一存储在去中心化的区块链上,在不访问原始数据情况下进行数据分析,既可以对数据的私密性进行保护,又可以安全地提供给全球科研机构、医生共享,作为全人类的基础健康数据库,对未来解决突发疾并疑难疾病带来极大的便利。

5、数据流通:区块链保障数据相关权益

对于个人或机构有价值的数据资产,可以利用区块链对其进行注册,交易记录是全网认可的、透明的、可追溯的,明确了大数据资产来源、所有权、使用权和流通路径,对数据资产交易具有很大价值。

一方面,区块链能够破除中介拷贝数据威胁,有利于建立可信任的数据资产交易环境。数据是一种非常特殊的商品,与普通商品有着本质区别,主要是具有所有权不清晰、 “看过、复制即被拥有”等特征,这也决定了使用传统商品中介的交易方式无法满足数据的共享、交换和交易。因为中介中心有条件、有能力复制和保存所有流经的数据,这对数据生产者极不公平。这种威胁仅仅依靠承诺是无法消除的,而这种威胁的存在也成为阻碍数据流通巨大障碍。基于去中心化的区块链,能够破除中介中心拷贝数据的威胁,保障数据拥有者的合法权益。

另一方面,区块链提供了可追溯路径,能有效破解数据确权难题。区块链通过网络中多个参与计算的节点来共同参与数据的计算和记录,并且互相验证其信息的有效,既可以进行信息防伪,又提供了可追溯路径。把各个区块的交易信息串起来,就形成了完整的交易明细清单,每笔交易来龙去脉非常清晰、透明。另外,当人们对某个区块的“值”有疑问时,可方便地回溯历史交易记录进而判别该值是否正确,识别出该值是否已被篡改或记录有误。

为什么要把大数据和区块链结合起来?

1.安全性

区块链没有把数据上传到云服务器上,也没有把数据存储在一个地方,而是把所有数据东西分成小部分并使其分布在整个计算机网络上。它有效地排除了中间人。没有必要使用第三方来处理交易。当可以依赖去中心化的、不可篡改的分类账时,就不必再信任供应商或服务提供者。此外,区块链上发生的所有事情都是加密的,并且可以证明数据没有被更改。由于其分布式特性,所以可以检查网络中所有节点上的所有分类帐的文件签名,并验证它们是否未经更改。

2.数据质量

区块链提供的卓越的数据安全性和数据质量,可以改变人们处理大数据的方式。这非常有用,因为安全性仍然是物联网生态系统的主要关注点。物联网系统将各种设备和大量数据暴露在安全漏洞之下。而区块链具有强大的潜力,可以阻止黑客入侵,并在从银行、医疗保健到智能城市等多个领域提供安全保障。

3.隐私性

这是区块链与当今常见的传统技术模式的主要区别之一。区块链不需要网络层本身的任何标识。这意味着下载和开始使用该技术不需要姓名、电子邮件、地址或其他任何信息。不会严格要求用户个人信息意味着没有中央服务器存储用户信息,这使得区块链技术比可能被破坏的中央服务器更安全,不会使其用户的敏感数据处于危险之中。

4.透明性

区块链技术最吸引人的一个方面是它的隐私性。然而,这导致了一些关于隐私性和透明性如何有效共存的困惑。区块链之所以透明,是因为每个公共地址的持有和交易都是公开的。使用带有用户公共地址的资源管理器,可以查看他们的资产和交易。这种透明性以前从未在金融体系中存在过,特别是在大型企业方面,并增加了迄今为止尚未存在的某种程度上的问责制。

5.自动化

如今,业务流程无疑正在从缓慢的手工方法,转为更加自动化和集中化的趋势。自动化流程有很多好处:更快地完成任务、增加可见性、标准化输出、减少错误和降低成本等等。尽管自动化在帮助企业提高生产效率方面做了大量工作,但未来还会发生进一步的变化。特别是,区块链工作流程自动化可以帮助那些严重依赖交易和基于文档的流程的组织在数字化转型中迈出重要一步。

四、区块链在大数据中的应用起到的作用

将区块链技术应用于大数据之中,使得平台上数据无法随意修改、增删,使得大数据极具弹性,存储量也随之增加,安全性和技术性兼得。区块链技术对大数据的影响在于对于数据方面的确认以及数据存储方面,为大数据平台提供有力的技术补充。依托大数据和区块链技术融合,凸显区块链技术价值,使得所存储数据安全和信息都真实兼备,便于后期预测和分析。区块链是数字经济时代不可或缺的重要技术。

在智慧城市基础平台的搭建之中,大数据、区块链技术的优势明显。区块链技术与大数据技术的结合,使得智慧城市网络中,中心化管理机制不复存在,取而代之的是区块链技术赋予的分布式管理机制,消除了数据集中破坏的风险,免除了数据被人为的篡改,保障了城市数据安全,使得智慧城市各项功能更加完善。通过大数据、区块链技术构建智慧城市,也增强了数据的可靠性,使得智慧城市平台的数据更加稳定。

利用区块链、大数据技术的优势,也使得城市的“数据孤岛”得以打破,为智慧城市的建设和管理提供了有力的技术支持,利用相关方面技术,智慧城市基础数据建设规模方面也会增加,数据存储量大。反馈过程之中的精准度高,规避了更多智慧城市建设之中的各类问题。

随着社会经济的发展以及城市人口的增多,城市面临着各种各样的压力,城市管理、交通水平、公共服务等方面的问题层出不穷,智慧城市的建设发展随之兴起。随着大数据、区块链等互联网信息技术的不断发展成熟,在智慧城市的建设之中成为重要的基石。智慧城市包含智慧交通、智慧消费以及智慧环境等等多个领域,多种产业,而区块链、大数据也仅仅是科技发展之中互联网技术的缩影,只有充分发挥信息技术才能使得城市智慧化建设快速发展以致成熟。
责任编辑:YYX

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 大数据
    +关注

    关注

    64

    文章

    8889

    浏览量

    137437
  • 区块链
    +关注

    关注

    111

    文章

    15562

    浏览量

    106023
收藏 人收藏

    评论

    相关推荐

    PDM产品数据管理系统的必要性分析 PDM如何助力企业提升竞争力

    在当今竞争激烈的制造业环境中,企业对高效、准确的产品数据管理需求日益增长。PDM(Product Data Management,产品数据管理系统)正是应对这一需求的利器。本文将深入探讨PDM产品数据管理系统建设的
    的头像 发表于 11-27 11:56 230次阅读

    浅析中低压系统母线装设弧光保护的必要性及应用

    摘要: 随着社会进步,各方面技术也在进步,如电力的发明使用,使我们从一开始的煤油时代走入了电力时代。在电力方面,我国处于地位,文章主要探讨了中低压系统母线装设弧光保护的必要性,以及它存在的弊端
    的头像 发表于 11-14 10:54 313次阅读
    浅析中低压系统母线装设弧光保护的<b class='flag-5'>必要性</b>及应用

    路灯单灯控制器的必要性:为城市照明带来的全面效益

    路灯单灯控制器的必要性:为城市照明带来的全面效益
    的头像 发表于 11-13 09:22 214次阅读
    路灯单灯控制器的<b class='flag-5'>必要性</b>:为城市照明带来的全面效益

    智慧城市与大数据关系

    智慧城市与大数据之间存在着密切的关系,这种关系体现在大数据对智慧城市建设的支撑和推动作用,以及智慧城市产生的大量数据
    的头像 发表于 10-24 15:27 659次阅读

    工业工程软件在企业导入中的重要必要性

    在全球化竞争加剧、市场需求瞬息万变的今天,企业为了保持竞争力,需要不断优化生产流程、提高生产效率、降低成本并保障产品质量。而工业工程软件作为一种强大的工具,其在企业导入中的重要必要性日益凸显
    的头像 发表于 10-18 11:09 235次阅读

    AD603输入阻抗很小,输入端用电容耦合的必要性在哪里?

    请问,关于603的级联耦合,它输入阻抗很小,输入端用电容耦合的必要性在哪里,还有多个数量级的电容并联来级间耦合的,是为了增加可通过的频带范围吧。 而且,虽然理论上是零偏置的交流信号输入,若有直流干扰的时候,输入耦合的电容前段有没有必要加泄流电阻到地呢?
    发表于 09-19 08:14

    安科瑞银行用电安全监管的必要性分析,能起到什么关键的作用?

    的发生。 【关键词】银行;电气火灾;智能安全配电装置 银行用电安全监管的必要性分析 近年来,银行业紧紧把握创新发展理念,积极拥抱新技术促进智能化升级,深入开展数据创新推进服务转型,科学稳健运用AI、5G、区块
    的头像 发表于 09-10 13:13 219次阅读
    安科瑞银行用电安全监管的<b class='flag-5'>必要性</b>分析,能起到什么关键的作用?

    FPGA教学实验室建设必要性 解决方案概述

    FPGA教学实验室建设必要性&解决方案概述
    的头像 发表于 07-26 08:33 264次阅读
    FPGA教学实验室建设<b class='flag-5'>必要性</b> 解决方案概述

    智能开关柜一键顺控的必要性有哪些?

    开关柜一键顺控技术的必要性:通过预设的操作逻辑和自动化控制,实现了对开关柜的快速、准确操作。工作人员只需通过简单的操作界面,即可实现对开关柜的远程控制和监控,大大提高了操作效率。
    的头像 发表于 07-12 10:49 270次阅读
    智能开关柜一键顺控的<b class='flag-5'>必要性</b>有哪些?

    行车记录仪CCC认证的必要性分析

    CCC认证的详细解析:CCC认证的必要性法规要求:根据相关规定,行车记录仪作为音视频设备的一种,属于3C认证目录里第八大类“音视频设备”中的0805小类“播放及处理
    的头像 发表于 07-05 16:25 438次阅读
    行车记录仪CCC认证的<b class='flag-5'>必要性</b>分析

    集成芯片的重要必要性

    集成芯片在现代科技和工业中占据着至关重要的地位,其重要必要性主要体现在以下几个方面。
    的头像 发表于 03-18 15:17 1139次阅读

    区块是什么样的数据结构组织

    区块是一种特殊的数据结构,它以分布式、去中心化的方式组织和存储数据区块的核心原理是将
    的头像 发表于 01-11 10:57 2244次阅读

    示波器测量交流电压不能接地的原因和必要性

    示波器测量交流电压不能接地的原因和必要性  示波器是一种非常重要的测试仪器,用于测量信号的振幅、频率、相位等参数。在测量交流电压时,通常需要将示波器的地端(GND)与待测点的接地进行连接。然而
    的头像 发表于 01-08 16:36 1468次阅读

    LED电路保护的必要性 LED损坏的原因 保护LED电路小绝招

    LED电路保护的必要性 LED损坏的原因 保护LED电路小绝招  LED电路保护的必要性 LED是一种新型的发光器件,具有功率小、高亮度、长寿命、可靠高等优点。然而,由于其工作特性以及外部环境
    的头像 发表于 01-03 11:31 896次阅读

    防雷检测认证服务的作用和必要性

    的发生和扩大,保护人身和财产安全,促进防雷行业的规范和发展。防雷检测认证服务的意义是实现雷电防护装置的科学化、标准化和法制化,提高防雷检测的公信力和权威,增强社会公众的防雷意识和信心。防雷检测认证服务的必要性
    的头像 发表于 01-02 10:25 528次阅读
    防雷检测认证服务的作用和<b class='flag-5'>必要性</b>