0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

蓝海大脑高性能气象大数据平台为气象局掌握风云变幻提供助力

GPU视觉识别 来源:GPU视觉识别 作者:GPU视觉识别 2022-07-28 12:01 次阅读

随着气候预测、气候模拟、智慧气象、并行计算集群、气象大数据平台、高性能数值计算、气象高性能计算集群的发展,人类步入全新的人工智能大数据时代。

“雷声大雨点小”“久晴大雾必阴,久雨大雾必晴”……自古以来,人们从云卷云舒、风停雨歇中学会了观天象,并将这些经验用于出行、农事活动中。进入现代社会,天文学、流体力学等学科的快速发展,气象站、气象气球和卫星等工具的利用,人类对气象的理解迈进了新的台阶。

对于如何增强气象科技自主创新能力,赋能高质量发展。有专业人士指出一方面是利用人工智能、大数据等技术把气象服务做得更加精细化、准确化;另一方面是创新行业解决方案,挖掘更多行业或场景的气象需求,让气象服务更加紧密结合生产生活。

大数据如何满足

未来气象预报的发展

超级计算机、大数据应用将能够满足未来气象预报在三个关键领域的需求:

管理和利用庞大数据集

环境数据的数据量和多样性将以指数形式成倍增加,将对基础设施管理和存储这些数据提出极大的需求,也要求更大计算能力模拟使用。这也为公立和私营机构研究人员专业化服务提供了新机遇。

提高模型的分辨率

高分辨率模型是一个关键因素,可以更好地评估长期气候系统状态,提高气象预报能力,特别是对灾害性天气的预报能力。美国国家大气研究中心和大学的研究人员使用超级计算机对于飓风的模拟,已经提高到500米分辨率,相当于几个街区的预报。

解决技术障碍

鉴于天气建模和分析变得更加数据密集型,需要更大计算能力,研究人员必须更加关注性能瓶颈,如内存、I / O、互连延迟和带宽。天气模拟需要成千上万微处理器并行运算,突破硬件和软件的可扩展性限制。此外,可扩展的操作系统、编译器和应用程序库正在发挥作用。最终,底层技术基础设施必须紧密集成,支持模拟和分析工作流程。

pYYBAGLiCjCATWPOAAZgbMMfWyw482.png

大数据叠加AI算法

天气实现分钟即、公里级预报

在过去,全球广泛采用的天气预报模式是数值模拟法,通过实验室内的大型计算机作数值计算,用物理方程表达天气演变,从而预测一段时间内大气运动状态和气象。尽管很长一段时间的天气预测都是依靠数值模拟法,但是数值模拟由于精准度和准确率有限,慢慢达到了瓶颈,难以满足现代社会的发展需求。

中国气象局高级工程师卡赞表示:天气预报和人工智能有着天然耦合的关系。天气预报需要大量的、多种多样的资料,人工智能天生就是处理大数据的工具;现有资料的时空数据密度不够,人工智能具有对不完全不确定信息的推断能力;此外人工智能还可以总结专家的知识经验,提高平均预测水平以及利用统计与数值模式中无法利用的抽象预报知识等。

人工智能预测主要的方法是用大量的训练数据加上人工智能模型,通过数据进行计算优化的方法,可以和数值模拟进行很好的互补。

直接采用端到端的AI技术,通过长时间收集到的雷达云图运动的时间序列数据及人工智能和模式数据的融合,进行预测云在未来移动的方向、下雨积雨云运动的方向等。

天气是一个混沌系统,从现有技术看,不可能实现100%准确,但人工智能、大数据等新兴技术的加入,使得预报结果与真实情况之间不断接近,目前已可实现公里级、分钟级的格点化天气预报。

通过人工智能和大数据的加持,智慧气象已经在各个领域发挥作用,其优势也逐渐显现。与传统气象预测手段相比,人工智能具有数据处理能力更强、预测准确性更高、精细化程度在空间维度达到公里级甚至百米级,时间维度达到分钟级、并与其他的生产生活相关的指数等相结合。

用好预报工具

“ 气象+” 赋能经济社会发展

人们日常的生产生活与天气变化之间的关系密切,而灾害性天气对农业、交通、经济、生活等方面影响更加显著。

国家应急管理部发布的2021年全国自然灾害基本情况数据显示,2021年全年各种自然灾害共造成1.07亿人次受灾;倒塌房屋16.2万间,不同程度损坏198.1万间;农作物受灾面积11739千公顷;直接经济损失3340.2亿元。

如何尽量规避天气风险并利用好天气为经济社会发展服务成为当今社会的一道“必答题”。国务院印发的《气象高质量发展纲要(2022-2035年)》提出,要筑牢气象防灾减灾第一道防线,提高气象灾害监测预报预警能力;提高气象服务经济高质量发展水平,实施气象为农服务提质增效行动、海洋强国气象保障行动、交通强国气象保障行动、“气象+” 赋能行动。

在国家层面,气象科技赋能高质量发展要把气象技术观测设备,卫星观测站基础设备能力提升。对气象服务企业来说,利用好这些设备和技术,创新行业解决方案,赋能各个需求场景和行业,更深入的为经济社会发展服务。

在农业领域,农业是国民经济的基础,“三农”工作与气象工作息息相关。墨迹天气负责人黄渤海表示“在农业种植决策上,通过预测天气,农民可以选择合适的时间进行春播秋收,通过判断整年的气候情况和水土选择合适的作物种植,增加产量。耕作后,农民可以通过天气预报进行防灾减灾,减少损失。此外,通过预测降水情况还可以帮助农民减少灌溉成本,提升对水资源的利用效率。”

poYBAGLiCjGAE-BuAAGA91AandE029.jpg

蓝海大脑气象大数据平台

项目背景

某省是我国受台风、暴雨、干旱、寒潮、大风、冰雹、冻害、龙卷风等灾害影响最严重地区之一。在气象灾害相对频发的情况下,某省气象局在服务经济社会发展中作用日益突出,提高气象观测、数据共享和精细化预报水平变得至关重要。通过与蓝海大脑合作,摆脱原有IT基础构架对于气象工作的限制,实施弹性的统一架构,实现了高水平的气象观测、预测和服务业务。

pYYBAGLiCjGAdHHaAAD7GrpQZZY252.jpg

客户需求

由于天气预报模拟具有计算量大、通讯密集、I/O要求高和规范的模式系统化集成等特点,对高性能计算系统的计算性能有着超高的要求,具体要求表现如下:

计算量大

气象预报本身具有时效性,要求定时定点自动运行,无需人工干预。一般每天在固定的2-4个时段运行,每个时段2小时内运行完。因此,必须使用计算性能卓越的高性能计算系统来进行并行计算。

通讯密集

由于采用并行计算,因此各CPU间的通讯量很大。主要体现在WRF各计算域间的通讯及各类不同数据划分间的通讯。因此,要求本高性能计算系统在具有高性能计算的同时,兼具高性能的通讯网络

I/O要求高

由于涉及大量的用户和大量的小文件读写,气象模式对整个系统的IOPS性能有较高要求,存储系统的稳定性和可用性对整个业务系统的运行至关重要,要求存储系统具有故障自愈功能。另外,考虑到气象数据的周期性访问特点,需要支持基于策略的分级存储功能。

模式系统集成化

从软件的处理流程上看,一般分为前处理、主模式和后处理。整个模式系统从前处理到主模式再到后处理,需要系统具有较高的稳健性,所以优秀的模式软件应用专家支持、硬件级的系统技术支持,对预报模式的良好使用也是关键。

poYBAGLiCjKARHEVAASMBhXt72k556.png

解决方案

蓝海大脑依托接收的常规气象观探测资料、气象卫星资料、雷达资料、数值预报产品等多源数据,基于定量反演、机器学习云计算、云存储、大数据分析、 快速循环同化、虚拟现实等前沿技术,研发了具备多元化高性能算力、精准化短临预报、一站多源数据融合及多样化气象服务等优势的气象大数据平台,面向整个气象行业提供信息化系统顶层设计、 软件研发应用、数据共享服务等,同时也向道路、航空、物流、农业等行业领域开展针对性的精准气象预报保障服务。

蓝海大脑为满足客户需求,结合行业特点从计算节点、网络、存储、功耗、扩展、散热等方面出发,提出完善的解决方案。

计算节点

采用高性能英特尔酷睿系列处理器,计算节点采用双路混搭方案。四路计算节点依靠其突出的计算能力与内存容量,可在一台机器上完成中小模式的处理分析,减少资料预处理、计算、分析的时间,提高计算效率。

高速网络

采用高性能专用高速IB网络,将计算节点、管理节点、登录节点全线速互联,保证集群通讯网络的高性能。并将NAS存储通过万兆连入高速网络,配合集群并行文件系统,实现全部节点的数据共享。

存储系统

综合以往存储硬件解决方案,系统应用要求存储设备具备的特点及蓝海大脑在多年高性能计算领域的实施经验,充分满足用户现阶段使用及未来扩展需求。

低功耗

解决方案不仅强调整体运算效率,同时强调单位体积内的计算能力以及单位能耗可提供的计算能力。

可扩展

计算系统采用机架式服务器,既可保证节点内的扩展性,又可保证整个集群的横向扩展性。总体上,满足用户对未来集群的扩展需求。

液冷散热

蓝海大脑液冷服务器 HD210 H系列突破传统风冷散热模式,采用风冷和液冷混合散热模式——服务器内主要热源 CPU 利用液冷冷板进行冷却,其余热源仍采用风冷方式进行冷却。通过这种混合制冷方式,可大幅提升服务器散热效率,同时,降低主要热源 CPU 散热所耗电能,并增强服务器可靠性。经检测,采用液冷服务器配套基础设施解决方案的数据中心年均 PUE 值可降低至 1.2 以下。

pYYBAGLiCjKAGE9qAADulx7sg8Q927.jpg

用户收益

资源重新整合,实现更好的业务连续性

通过应用的分区分域部署,显著提高关键应用程序的性能、稳定性和容量,从而更好的保障业务连续性。

气象信息分发服务更高效

帮助客户建立更高效、及时的气象信息分发服务,以减轻极端天气事件对某省社会和经济结构的影响。

数据安全性提升,人力投入降低

整合后的架构将加强灾难恢复计划,降低管理复杂性和成本,解放气象局的团队,使其专注于更具战略性的任务。

运营敏捷性提升,快速响应资源请求

稳定、安全的新存储,可有效地管理和保存大量雷达数据。统一的基础架构将有助于优化运营敏捷性,使气象局能够快速响应开发团队对资源的请求。

审核编辑 黄昊宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 高性能
    +关注

    关注

    0

    文章

    155

    浏览量

    20382
  • 气象
    +关注

    关注

    0

    文章

    27

    浏览量

    17437
  • 大数据
    +关注

    关注

    64

    文章

    8862

    浏览量

    137279
收藏 人收藏

    评论

    相关推荐

    气象自动监测系统

    气象自动监测系统作为现代气象观测的重要组成部分,以其高效、精准和全天候运行的特点,气象预报、防灾减灾、农业生产、交通运输等多个领域提供了不
    的头像 发表于 11-08 16:36 131次阅读

    5g工业路由器最新案例:高原气象站网络升级项目

    某省气象局决定在高原地区升级其气象观测网络,以提高天气预报的准确性和及时性,同时气候变化研究提供更可靠的数据支持。该项目面临以下挑战
    的头像 发表于 10-14 17:59 230次阅读
    5g工业路由器最新案例:高原<b class='flag-5'>气象</b>站网络升级项目

    智能气象管理解决方案

    和决策提供更精准的信息。    智能气象管理解决方案,具体包含无线 DIY气象站、气候土壤监测终端、智能微气候监控软件、气象数据 SAAS
    的头像 发表于 10-12 10:38 161次阅读
    智能<b class='flag-5'>气象</b>管理解决方案

    小型车载自动气象站:提供全面、及时的气象信息

    和记录车辆周围的气象数据,配有超声波多合一环境监测传感器,集成度较高,可对风速、风向、空气温度、空气湿度、噪声、PM2.5、PM10、二氧化碳等气象要素进行实时监测,驾驶员
    的头像 发表于 09-12 16:52 239次阅读

    校园气象站高校科普论文气象站多功能气象

    ,并通过无线通信模块将数据传输到云平台,方便师生们通过手机APP或网页端查看实时数据,了解天气变化趋势,提前做好应对准备。 校园气象站高校科普论文
    的头像 发表于 08-06 17:53 406次阅读
    校园<b class='flag-5'>气象</b>站高校科普论文<b class='flag-5'>气象</b>站多功能<b class='flag-5'>气象</b>站

    气象监测系统——实时监测微气候变化

    ,从而采取适当的措施来应对气候变化和极端天气事件;筑牢气象防灾减灾第一道防线发挥重要作用,汛期适时掌握天气变化、及时发布预报预警提供了保
    的头像 发表于 07-03 10:48 339次阅读
    微<b class='flag-5'>气象</b>监测系统——实时监测微气候变化

    航天宏图亮相中国气象现代化建设科技博览会,探索未来气象新纪元

    2024年5月15日-5月17日,由中国气象局、科技部、中国科协共同主办的2024年气象科技活动周在深圳盛大召开。
    的头像 发表于 05-21 10:00 315次阅读
    航天宏图亮相中国<b class='flag-5'>气象</b>现代化建设科技博览会,探索未来<b class='flag-5'>气象</b>新纪元

    江苏省气象局与华为签署全面合作协议!

    江苏省气象局与华为技术有限公司(以下简称“华为”)在华为三丫坡园区签署全面合作协议。
    的头像 发表于 05-16 09:17 478次阅读
    江苏省<b class='flag-5'>气象局</b>与华为签署全面合作协议!

    气象土壤墒情监测站:多元数据融合的智慧农田管理平台

    气象土壤墒情监测站是一种集成了气象和土壤墒情监测功能的智能化设备,旨在通过多元数据融合,农田管理提供全面的信息支持,
    的头像 发表于 04-07 15:22 404次阅读

    小型农业气象站厂家:数据分析与决策支持

    JD-NQ14随着科技的不断进步,农业也迎来了新的变革。为了帮助农民更好地了解天气情况,科学安排农作物种植,小型农业气象站厂家应运而生。他们致力于开发智能化的农业气象站,农民提供精准
    的头像 发表于 04-02 16:35 417次阅读

    气象灾害对输电线路的危害,微气象监测设备助力提前防范

    气象在线监测设备DX-WPS100-QX,通过微气象传感器实时采集环境温度、湿度、风速、风向、降水量等信息,无线发送到监测中心,帮助线路运维人员及时掌握气象变化,提前预测
    的头像 发表于 03-14 13:45 680次阅读

    中国气象局首批高精度温室气体观测站正式运作

     此次中国气象局的业务准入,是在广泛征求意见、经过专家评估后开展的大规模工作,旨在提升我国应对气候变化的能力,推动我国减排温室气体的进程。
    的头像 发表于 03-04 11:19 353次阅读

    浅谈基于以太网的气象网络机房监控系统

    和管理.在设备基础上构建基于BS架构的综合信息管理平台,实现了现场数据采集、故障告警、WEB模式的实时数据发布、各种通信协议转换等多项功能。 关键词:以太网:GSM:LPS:B/S架构 0、引言 南通市
    的头像 发表于 02-19 14:10 328次阅读
    浅谈基于以太网的<b class='flag-5'>气象</b>网络机房监控系统

    农业气象站:助力现代农业发展

    农业气象站:助力现代农业发展
    的头像 发表于 01-31 11:28 387次阅读

    中国气象局与华为签署深化战略合作协议,加快推进新型信息技术在气象领域应用和自主创新

    总裁汪涛出席活动并见证签约。中国气象局党组成员、副局长张祖强,华为副总裁吴刚代表双方签约。华为副总裁吴辉出席。 根据协议,双方将围绕高性能计算、人工智能应用、关键基础设施信息化、自主创新、气象服务华为终端应用等方面深化业务
    的头像 发表于 12-07 10:00 361次阅读