电子发烧友App
创作
发文章
发帖 
提问 
发资料
发视频资料介绍
针对运维大数据维度高、形式多样化和变化迅速等特性，为提高数据融合效率以及平台的数据统计和决策分析性能，降低抽取一转换一加载（ ETL）执行时间开销和数据中心负担，面向智慧管养需求提出一种多层次任务调度（ MTS） ETL框架（MTS-ETL）。首先，将数据仓库分为数据临时区、数据仓储区、数据分类区和数据分析区，并根据所分区域将完整的ETL过程划分为4个层次的ETL任务调度环节，同时设计了多频率ETL运行调度以及顺序和非顺序两种ETL工作模式；接着，基于MTS-ETL框架的非顺序工作模式进行数据融合的概念建模、逻辑建模和物理建模；最后，利用Pentaho Data Integration设计ETL转换模块和工作模块以实现数据融合方法。在交通流量数据融合实验中，该方法融合136754条数据的时间仅为28.4 s；在千量级的数据融合实验中比传统ETL方法的总平均执行时间降低了6. 51%；报表分析结果表明其在融合400万条数据时依然能保证ETL过程的可靠性。所提方法能够有效融合运维大数据，提高平台统计分析性能，并维持ETL执行时间开销在较低水平。
下载该资料的人也在下载
下载该资料的人还在阅读
更多 >
- 基于多传感器数据融合的GPS欺骗检测方法 22次下载
- 多无人机局部地图数据共享融合的SLAM方法 8次下载
- 大数据分解-融合研究综述 8次下载
- 基于神经网络的大数据脚本攻击智能检测 2次下载
- 工业大数据的特征、方法与价值创造 9次下载
- 大数据海量数据处理方法总结 13次下载
- 结合多尺度边缘保持分解与PCNN的图像融合方法 16次下载
- 基于5G和大数据的智慧城市综合分析 11次下载
- 大数据信息融合实验说明免费下载 0次下载
- 如何解决多源数据融合分析过程灵活性差和处理效率低的问题方法说明 3次下载
- 如何实现高速公路大数据的短时流量预测方法 10次下载
- 如何使用面向高速公路的大数据进行短时流量预测方法资料说明 5次下载
- 基于电力大数据的参数融合 8次下载
- 面向大数据的并行分类混合算法研究 0次下载
- 大数据打破行业边界、推动物联网产业融合 29次下载
- 大数据技术是干嘛的 大数据核心技术有哪些 2290次阅读
- 融合互通，浪潮分布式融合存储AS13000加速海量数据处理 556次阅读
- 大数据杀熟的原理、性质和治理方法 9873次阅读
- 智慧城市管理中常用的大数据技术和应用 3.5w次阅读
- 什么才是真正的大数据 关于大数据的几个特性 2815次阅读
- 大数据技术如何进行融合发展 9206次阅读
- 视觉大数据领域的最好分析方法之一：深度学习 4843次阅读
- 大数据是什么_大数据技术和应用的现状与前景 2.3w次阅读
- 区块链在工业大数据智慧云链中的解决方案 2171次阅读
- AR对于大数据有什么意义？电力大数据有什么作用？详细案例说明 7929次阅读
- 大数据时代智能配电网该如何融合大数据 1w次阅读
- 物联网是大数据的重要来源,大数据助力物联网 1.1w次阅读
- 国内有哪些大数据公司_最新中国大数据公司排名 5.3w次阅读
- 最新大数据概念股龙头_大数据概念龙头股有哪些 4.3w次阅读
- 面向互联网+的主网运检智能管控体系的设计和结构以及应用实例 5541次阅读
上传资料赚积分下载排行
本周
- 1电子电路原理第七版PDF电子教材免费下载
- 0.00 MB | 1490次下载 | 免费
- 2单片机典型实例介绍
- 18.19 MB | 93次下载 | 1 积分
- 3S7-200PLC编程实例详细资料
- 1.17 MB | 27次下载 | 1 积分
- 4笔记本电脑主板的元件识别和讲解说明
- 4.28 MB | 18次下载 | 4 积分
- 5开关电源原理及各功能电路详解
- 0.38 MB | 10次下载 | 免费
- 6基于AT89C2051/4051单片机编程器的实验
- 0.11 MB | 4次下载 | 免费
- 7基于单片机和 SG3525的程控开关电源设计
- 0.23 MB | 3次下载 | 免费
- 8基于单片机的红外风扇遥控
- 0.23 MB | 3次下载 | 免费
本月
- 1OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234313次下载 | 免费
- 2PADS 9.0 2009最新版 -下载
- 0.00 MB | 66304次下载 | 免费
- 3protel99下载protel99软件下载(中文版)
- 0.00 MB | 51209次下载 | 免费
- 4LabView 8.0 专业版下载 (3CD完整版)
- 0.00 MB | 51043次下载 | 免费
- 5555集成电路应用800例(新编版)
- 0.00 MB | 33562次下载 | 免费
- 6接口电路图大全
- 未知 | 30320次下载 | 免费
- 7Multisim 10下载Multisim 10 中文版
- 0.00 MB | 28588次下载 | 免费
- 8开关电源设计实例指南
- 未知 | 21539次下载 | 免费
总榜
- 1matlab软件下载入口
- 未知 | 935053次下载 | 免费
- 2protel99se软件下载(可英文版转中文版)
- 78.1 MB | 537791次下载 | 免费
- 3MATLAB 7.1 下载 (含软件介绍)
- 未知 | 420026次下载 | 免费
- 4OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234313次下载 | 免费
- 5Altium DXP2002下载入口
- 未知 | 233046次下载 | 免费
- 6电路仿真软件multisim 10.0免费下载
- 340992 | 191183次下载 | 免费
- 7十天学会AVR单片机与C语言视频教程 下载
- 158M | 183277次下载 | 免费
- 8proe5.0野火版下载(中文版免费下载)
- 未知 | 138039次下载 | 免费
工商网监
评论