0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

工业大数据一般如何进行处理呢?

sBue_gongkongBB 来源:未知 作者:李倩 2018-03-22 14:55 次阅读

工业大数据一般如何进行处理呢?我画了一个相对通用的架构图来解释一下:

工业大数据在业务逻辑大的分层上和互联网大数据类似,一般都分为三部分,数据采集层、数据处理层和数据展现层,当然,具体到一个实际案例中,或者说根据不同的应用场景,可以划分为更多的层次,比如数据处理可以分为元数据管理层、数据交互层、数据分析层等等,如果你有兴趣,可以把大数据划分为N层。在分层的同时,还有许多同等重要的事情,例如安全保障、运维服务、测试规范等等,要都说清楚,基本也就搞不清楚工业大数据是怎么回事了。所以我们今天只讨论通用的、简化的、适用于一般场景的架构,而且仅仅是业务和逻辑层面的,技术层面的我们后面再详细说明。

工业大数据系统非常重要的,也是基础的层次是数据采集。没有数据采集,所有的强大的、华丽的、技术非常NB的各种东东只能躲在黑暗里哭泣,英雄无用武之地。在这一层,也是工业大数据与互联网大数据差异非常大的一层,互联网大树的数据采集主要靠用户的各种操作,例如网页浏览、系统登录、信息的互动、鼠标的点击等,而工业大数据的数据来源更加多种多样,最基本的是用于采集各类工业信号传感器,通过传感器的采集,可以获得机器设备的运行状态、环境的指标、操作人的操作行为等各类信息。除通过传感器采集的信息,还包括现场的视频信息,各类图像设备拍摄的图片(例如,巡检人员用手持设备拍摄的设备、环境信息图片),语音及声音信息(例如,操作人员的通话、设备运转的音量等),遥感遥测信息等等,这些信息都是通过各类设备传输的。除此之外,还有操作人员手工录入的各类信息,采集软件抓取的企业内网的信息、互联网上与企业相关的信息等等。这些信息共同构成了数据采集的来源。

数据采集领域也是自动化和信息化交叉最多的领域,其实也是一般IT从业人员比较头疼的领域,跨学科嘛,哈!

数据采集结束后,就进入了数据处理阶段,这一阶段,软件人员就可以大显身手了,大部分技术都和互联网大数据技术差不太多。通常,我们会对采集到的数据先进行一定程度的处理,各类工业协议需要解析、视频流需要解码、语音需要识别等等,识别处理好后再对数据进行规范、清洗,洗刷刷完成后,干净数据才好用。需要立即处理的数据,例如报警、监测等,直接送到实时处理系统中进行处理,不着急的非急诊数据请进入仓库,按照类型存起来先。然后慢慢分析加工。存储可能会用到多种数据库,包括工业实时数据库、关系型数据库、地理数据库、分布式数据库、非关系型数据库、内存数据库等,这些数据库的整合、管理、链接又是工业大数据的一个难题,这个我们放到后面详细谈。今天先聊宏观。

洗干净、切成块、冷冻好的红烧肉,啊,不是,存储好的工业数据如此之海量,怎么推送给用户就成为数据可视化层要干的事情了。数据可视化最近也比较火,原先做报表的,现在都号称大数据可视化公司了,其实,单纯的大数据可视化是没有意义的,没有对工业业务的深入理解,很难做出让客户的满意的可视化结果。可视化包括许多方式,如报表、二维地图、三维地图、三维模型、短信、手机APP、微信、大屏等等,总之,通过一切手段让用户看到自己想看的数据即可。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 互联网
    +关注

    关注

    54

    文章

    11105

    浏览量

    103003
  • 大数据
    +关注

    关注

    64

    文章

    8863

    浏览量

    137285
  • 工业大数据
    +关注

    关注

    0

    文章

    72

    浏览量

    7825

原文标题:工业大数据通用业务架构

文章出处:【微信号:gongkongBBS,微信公众号:工控网智造工程师】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    工业大数据

    工业大数据是未来工业在全球市场竞争中发挥优势的关键。无论是德国工业4.0、美国工业互联网还是《中国制造2025》,各国制造业创新战略的实施基础都是
    发表于 06-19 17:43

    工业大数据分析平台的应用价值探讨

    条很有意思的娱乐新闻——警方在某歌手的演唱会上抓捕了好几个被网上追逃的人。这同样是大数据技术的应用······工业大数据分析平台是利用大数据技术开发搭建的为
    发表于 11-12 15:56

    如何成功实施工业大数据

    如何成功实施工业大数据
    发表于 09-30 08:45

    什么是工业大数据工业大数据应用的“3B”挑战

    工业控制将迎来视角的转变,工业大数据成为关键动力。工业互联网的关注点和竞争点是将制造过程中些不可见的问题进行透明化,
    发表于 02-01 17:23 9132次阅读

    工业大数据技术综述

    工业大数据工业数据的总称,包括信息化数据、物联网数据以及跨界数据,是
    发表于 03-27 16:10 14次下载

    制造大数据大数据制造,工业大数据有什么特点?

    第三点是实时性。工业大数据是实时的监控和预警,工业大数据需要实时的达到分析和应用。另外行业性。消费的数据一般来讲是比较好理解的,工业
    的头像 发表于 05-17 15:37 1.8w次阅读

    工业大数据挖掘的利器——Spark MLlib

    为支撑智能制造和工业互联网的核心动力。Apache Spark 作为新代轻量级大数据快速处理平台,集成了大数据相关的各种能力,是理解
    的头像 发表于 01-10 13:40 4882次阅读
    <b class='flag-5'>工业大数据</b>挖掘的利器——Spark MLlib

    工业大数据的概念

    工业大数据是指在工业领域中,围绕典型智能制造模式,从客户需求到销售、订单、计划、研发、设计、工艺、制造、采购、供应、库存、发货和交付、售后服务、运维、报废或回收再制造等整个产品全生命周期各个环节所
    的头像 发表于 03-05 15:18 4027次阅读

    工业大数据应用前景

    打破数据孤岛壁垒,实现人与机器、机器与机器的互联互通,为工业数据的自由汇聚奠定基础,另方面进 步增强了
    的头像 发表于 03-05 15:21 5976次阅读

    工业大数据前景

    工业大数据正以种革命风暴的姿态闯入人们视野,其技术和市场在快速发展,而驾驭工业大数据的呼声则浪高过浪。于是有人说中国
    的头像 发表于 03-28 14:08 3827次阅读

    工业大数据如何管理

    从需求侧看,随着智能制造、工业互联网等国家战略的逐推进,个性化定制、网络化延伸以及智能化设计、生产、服务等新模式不断出现,对于工业大数据技术、产品、平台的需求不断增大,为工业大数据
    的头像 发表于 04-21 16:55 2865次阅读

    工业大数据的技术与应用

    工业大数据,是指在工业领域中,围绕典型智能制造模式,从客户需求到销售、订单、计划、研发、设计、工艺、制造、采购、供应、库存、发货和交付、售后服务、运维、报废或回收再制造等整个产品全生命周期各个环节
    的头像 发表于 11-23 14:37 5497次阅读

    工业大数据在制造企业的应用场景

    工业大数据个新的概念,从字面上理解,工业大数据是指在工业领域信息化应用中所产生的大数据
    的头像 发表于 01-17 12:05 4908次阅读

    如何对大数据进行分析和处理

    大数据时代已经来临,所以我们对大数据这个词已经不再陌生,甚至于大数据已经作为门前沿科学,成为广大高校开展招生的热门专业,其前景良好并且内容广泛。其实,如果想要深入理解
    的头像 发表于 02-01 10:33 2575次阅读

    智慧农业大数据

    智慧农业,作为未来农业的发展方向,其实现基于种植环境、生长管理、农机设备等数据。农业大数据核心在于技术,包括获取技术和处理数据技术。相比工业大数据
    的头像 发表于 07-10 16:18 979次阅读