摘要:随着社会经济和信息化的发展,物联网服务平台也得到了迅猛的发展,这也标志着大数据技术时代接踵而来,并且渗透到了我们生活中的各个方面,由于人们对于信息化服务的要求也在不断提高,而大数据技术具有复杂性和多样性的特点,进而物联网服务平台的发展就需要要有效借助大数据技术。本文分析了大数据技术以及物联网服务平台的含义,找出了两者之间的关系,并对泛在电力物联网大数据平台的运用进行了探究。
1大数据技术在物联网产业中的应用价值
现如今,物联网的架构主要包括:感知层、网络层和应用层。感知层能够采集信息、识别物体等感知功能,从而形成大量数据。比如微博每天评论功能可以达到1.2亿条评论,上传新的短片和视频近800万个,将这样庞大的数据的信息汇集在一起,能够形成PB级别的数据量,物联网产业凭借PB级别的数据量,能够掌握消费者的整体用户细习惯。物联网的网络层能够实现数据信息的传输和交流,网络层是基于感知层收集到的数据,进行分析、加工,挖掘用户的喜好、习惯,从众多的信息中找到共性,并对产品做出调整和优化,来满足不同用户的需求,实现定制化服务,而这也是物联网应用大数据技术的目的。从物联网产业的角度来讲,大数据技术可以为物联网提供从客户到决策方面的各类商业信息,进而促使物联网产业不断发展。
2大数据与物联网的关系
大数据丰富物联网应用
大数据发展下的物联网,让大数据的价值得到了很好的体现,在物联网技术应用中,通过搭建遥感勘测、智能建筑、智能运输、检测保护等信息手段,收集大数据,然后对收集的数据进行分析,把有用的数据筛选出来形成有价值以及有用的信息,实现其作用。一家顶级汽车公司,通过使用遥感技术来识别车主的身份,该技术可以有效记忆车主的重量、开车姿势等一系列的信息,如果出现和这些数据不吻合的人驾驶车辆,传感器就会把信息反馈给车主,避免车辆被盗。大数据技术是物联网中必不可少的技术手段,不仅仅是收集各种数据,对数据进行分析处理以后,找出问题来完善物联网系统,它也使得物联网的应用更加的丰富多彩。
物联网促进大数据
我们目前正处于大数据时代,物联网的发展,产生数据的终端由PC向包含PC在内的智能手机,平板电脑等多样化的终端,以及利用各行业、各领域的感知设备,快速入网并且汇总在一起,物联网中传感器把各种各样的信息转化成电信号,然后利用网络输送到上层应用系统,物联网在很短的时间内就能够产生大量的信息,在全世界的物联网上,进而产生大量的数据。大量的非结构化的数据快速增长的趋势已经在悄然形成。然而这些数据的增长并不是线性的,它是随着越来越多的传感器的研究、制造、使用,数据量会产生一种不可阻挡的指数性增长趋势。
3构建相适应的大数据平台
随着泛在电力物联网的加快建设,现有的互联网大数据技术平台将遇到巨大的挑战,因为电力数据规模将增加几个数量级,数据分析的量也更多,实时性要求也更高。因此,需要进一步加大信息技术的创新力度,构建和完善适应泛在电力物联网建设需求的大数据平台。
这个新一代的大数据平台,要有以下几个特点:充分利用泛在电力物联网的数据特点,在技术上做各种优化,大幅度提高数据插入、查询的性能,降低电网运营成本;需要能实时处理各种数据插入、查询请求,提升电网运行效率;需要是水平扩展的,随着数据量的增加,只需要增加服务器扩容即可;支持边缘计算与云计算的边缘协同;需要是易于维护的,降低对运维人员的要求;需要是开放的,有业界流行的标准SQL接口,便于各种应用集成;需要通过Python、R或其他接口来方便集成各种机器学习、人工智能算法。
当前,国内外诸多互联网企业已经注意到物联网兴起后,传统的大数据技术正面临新的考验和挑战,并开始着手研发新一代大数据平台。相信随着泛在电力物联网建设不断加快,必将构建新一代的能源电力大数据平台,从而进一步挖掘和利用好电网的数据资源,提升电网运营的效率和效益,保障电网安全稳定运行,为社会提供新的应用和服务。
4泛在电力物联网的数据量将大幅增加
电力行业历来重视数据和信息技术,从上世纪80年代起,就采用实时数据库处理发电以及电网采集的各种数据。但随着电网规模的扩大,数据采集量的大幅增加,传统的实时数据库和IT架构已经无法满足海量数据的处理需求。最近几年,电力行业开始采用互联网行业的大数据平台技术,较典型的就是将Kafka、Hadoop、HBase、Spark、Redis等技术集成在一起处理海量数据。比如智能电表的用电信息采集系统、电费的计算等,都采用这类方案。
从配网的情况来看,即使采集点和采集频率不显著增加,但以D5000、CC2000为代表的主流产品,受限于历史数据处理能力,依然只能围绕实时采集数据、历史断面数据构建应用,拓扑分析技术无法在时间维度纵向扩展。
电网数据采集及监控系统(SCADA)作为物联网的一部分,不但要看实时数据,还需要看历史数据,不单需要实时监控,更需要故障预警、趋势分析、运营指标分析、效率分析等。通过快速存取、分析高频采集数据,将为电网的运行提供更准确的数据决策支撑。
另一方面,泛在电力物联网与通用的物联网一样,不仅会存在云端的数据中心,也会存在边缘节点。这些边缘节点具备一定的计算和存储能力,能进行数据的预处理和缓存,大幅缓解数据中心平台的压力,而且能更好地保证边缘节点覆盖的区域有更好的数据实时响应能力,更好地支撑本地业务实时智能化决策与执行。但是边缘计算与云计算需要通过紧密协同才能更好地满足各种需求场景的匹配,从而提高边缘计算和云计算的应用价值。
采集点的增加和采集频次提高,能带来什么样的效益呢?以智能电表为例,如果将所有电表的数据采集频次提高到1次/15分钟,电网将实现对每个台区线损的实时监测,而不是现在的T-1模式,从而对异常线损实时处理。同时,对输电线路故障实时监测,再也无需客户上报,大大提升运维效率和服务质量。
以Hadoop体系为代表的互联网大数据解决方案,主要处理的是互联网领域的非结构化数据,比如爬虫数据、微博与微信数据等。但是,泛在电力物联网的数据与互联网数据有显著不同的特点,表现在几个方面:数据都是时序的,由传感器和设备不断产生,形成一个数据流;除视频、图像外,都是结构化的数据;数据是机器日志类型的,不会有删除或更新的动作;数据是有保留时长的,到期删除;数据流量是平稳可预测,知道测点数、采集频率,能较为准确估算流量大小;数据需要进行实时计算、分析;数据的分析、计算一般都是基于某一个时间段和地域进行;数据量巨大,一天产生几百亿条记录。
除数据特征不一样之外,在数据处理上,泛在电力物联网与典型的互联网相比,还有不一样的需求。比如插值计算、数学函数计算以及某个具体时间点的断面数据等。而且这些数据的处理往往与采集设备的管理直接挂钩,需要依据采集设备的归属、地域以及其他属性进行各种分类统计。
5概述
Acrel-EIoT能源物联网开放平台是一套基于物联网数据中台,建立统一的上下行数据标准,为互联网用户提供能源物联网数据服务的平台。用户仅需购买安科瑞物联网传感器,选配网关,自行安装后扫码即可使用手机和电脑得到所需的行业数据服务。
该平台提供数据驾驶舱、电气安全监测、电能质量分析、用电管理、预付费管理、充电桩管理、智能照明管理、异常事件报警和记录、运维管理等功能,并支持多平台、多语言、多终端数据访问。
6应用场所
本平台适用于公寓出租户、连锁小超市、小型工厂、楼管系统集成商、小型物业、智慧城市、变配电站、建筑楼宇、通信基站、工业能耗、智能灯塔、电力运维等领域。
7组网结构
8平台功能
可定制驾驶舱
可定制化的驾驶舱:可根据客户的行业特性,行业需求,经过培训的工程或调试人员自行绘制客户所需的驾驶舱页面。
例如下图所示的智慧物业驾驶舱,内容有:预付费、充电桩、电梯、空调、照明等设备管理、能耗统计、收益统计、运维情况等。其中百度地图可以选配成BIM建筑模型,任何传感器报警时可以在BIM模型中预警显示。
电力集抄
电力集抄模块可以实现对各种监测数据的查询、分析、预警及综合展示,以保证配电室的环境友好。在智能化方面实现供配电监控系统的遥测、遥信、遥控控制,对系统进行综合检测和统一管理;在数据资源管理方面,可以显示或查询供配电室内各设 备运行(包括历史和实时参数,并根据实际情况进行日报、月报和年报查询或打印,提高工作效率,节约人力资源。
变压器监控
配电图
能耗分析
能耗分析模块采用自动化、信息化技术,实现从能源数据采集、过程监控、能源介质消耗分析、能耗管理等全过程的自动 化、科学化管理,使能源管理、能源生产以及使用的全过程有机结合起来,运用先进的数据处理与分析技术,进行离线生产分析 与管理,实现全厂能源系统的统一调度,优化能源介质平衡、有效利用能源,提高能源质量、降低能源消耗,达到节能降耗和提 升整体能源管理水平的目的。
能耗概况
预付费管理
1)登陆管理:管理操作员账户及权限分配,查看系统日志等功能;
2)系统配置:对建筑、通讯管理机、仪表及默认参数进行配置;
3)用户管理:对商铺用户执行开户、销户、远程分合闸、批量操作及记录查询等操作;
4)售电管理:对已开户的表进行远程售电、退电、冲正及记录查询等操作;
5)售水管理:对已开户的表进行远程售水、退水、记录查询等操作;
6)报表中心:提供售电、售水财务报表、用能报表、报警报表等查询,本系统所有的报表及记录查询,都支持excel格式导出。
预付费看板
充电桩管理
通过物联网技术,对接入系统的充电桩站点和各个充电桩进行不间断地数据采集和监控,同时对各类故障如充电机过温保护、充电机输入输出过压、欠压、绝缘检测故障等一系列故障进行预警。云平台包含了充电收费和充电桩运营的所有功能,包括城市级大屏、交易管理、财务管理、变压器监控、运营分析、基础数据管理等功能。
充电桩看板
智能照明
智能照明通过物联网技术对安装在城市各区域的室内照明、城市路灯等照明回路的用电状态进行不间断地数据监测,也可以实现定时开关策略配置及后台远程管理和移动管理等,降低路灯设施的维护难度和成本,提升管理水平,并达到一定节能减挂的效果。
照明实时监控
安全用电
安全用电采用自主研发的剩余电流互感器、温度传感器、电气火灾探测器,对引发电气火灾的主要因素(导线温度、电流和剩余电流)进行不间断的数据跟踪与统计分析,并将发现的各种隐患信息及时推送给企业管理人员,指导企业实现及时的排查和治理,达到消除潜在电气火灾安全隐患,实现“防患于未然”的目的。
智慧消防
通过云平台进行数据分析、挖掘和趋势分析,帮助实现科学预警火灾、网格化管理、落实多元责任监管等目标。填补了原先针对“九小场所”和危化品生产企业无法有效监控的空白,适应于所有公建和民建,实现了无人化值守智慧消防,实现智慧消防“自动化”、“智能化”、“系统化”、用电管理“精细化”的实际需求。
智慧消防看板
9系统硬件配置
10结语
综上所述,大数据技术在现代的生产生活中的应用十分广泛,而其在物联中的应用还处于比较初级的阶段,需要研究者对其进行不断地研究,促进大数据技术的发展,从而提高大数据在电力物联网中的应用价值。
审核编辑:汤梓红
-
物联网
+关注
关注
2909文章
44571浏览量
372841 -
大数据
+关注
关注
64文章
8883浏览量
137407
发布评论请先 登录
相关推荐
评论