华为大模型登Nature正刊!审稿人:让人们重新审视预报模型的未来
允中 发自 凹非寺
量子位 | 公众号 QbitAI
(资料图片)
比传统方法快1万倍、只需要秒就能完成24小时全球气象预报—— 它就是来自华为云的 盘古气象大模型 。
今天,它登上了Nature,据称还是近年来首篇以中国科技公司作为唯一署名单位发表的Nature正刊论文 (也就是华为云独作) 。
审稿人给予它高度评价,这一模型使人类得以重新审视气象预报模型的未来。
言外之意,就是有了它,原来的传统方法都不香了。
那么,它究竟是如何被开发出来的?解决了哪些关键难题?又有何具体成效和应用?
顺着这篇论文带你一文看尽。
上世纪20年代以来,特别是近三十年随着算力的迅速发展,传统的数值天气预报在每日天气预报、极端灾害预警、气候变化预测等领域取得了巨大的成功。
但是随着算力增长的趋缓和物理模型的逐渐复杂化,这一方式的瓶颈日益突出。
于是研究者们开始挖掘新的气象预报范式如使用深度学习方法预测未来天气。
华为云研发团队于2年前开始这方面的研究。
他们发现,在数值方法应用最广泛的领域如中长期预报中,现有的AI预报方法精度仍然显著低于数值预报方法,并受到可解释性欠缺,极端天气预测不准等问题的制约。
而造成AI气象预报模型的 精度不足 主要有两个原因:
第一,现有的AI气象预报模型都是基于2D神经网络,无法很好地处理不均匀的3D气象数据;
第二,AI方法缺少数学物理机理约束,因此在迭代的过程中会不断积累迭代误差。
在此,华为云的研究人员提出了 3D Earth-Specific Transformer (3DEST) 来处理复杂的不均匀3D气象数据,从而打造了盘古气象大模型。
其主要思想是使用一个视觉transformer的3D变种来处理复杂的不均匀的气象要素,并且使用 层次化时域聚合策略 ,训练了4个不同预报间隔的模型 (分别为1小时间隔、3小时间隔、6小时间隔、24小时间隔) ,使得预测特定时间气象状况的迭代次数最小,从而减少迭代误差,也避免了由递归训练带来的训练资源消耗。
为了训练每个模型,研究人员使用1979-2021年的气象数据,以小时为单位采样,训练了100个epoch。
每个模型需要在192块V100显卡上训练16天。事实上,即使经历100个epoch,这些模型依旧没有完全收敛。
也就是说,在计算资源更加充足的情况下,AI预报的精度还能够进一步提升。
最终推理时,盘古气象大模型仅需在一张V100显卡上运行秒,即可完成24小时全球气象预报,包括位势、湿度、风速、温度、海平面气压等,其中水平空间分辨率达到 ∘×∘ ,时间分辨率为1小时,覆盖13层垂直高度,可以精准地预测细粒度气象特征。
而作为首个精度超过传统数值预报方法的AI方法,它的计算速度相比传统数值预报提升超过10000倍。
今年5月,台风“玛娃”走向受到广泛关注。
中央气象局表示,华为云盘古大模型在“玛娃”的路径预报中表现优异,提前五天预报出其将在台湾岛东部海域转向路径。
在第19届世界气象大会上,欧洲气象局也指出,华为云盘古气象大模型在精度上有不可否认的能力,纯数据驱动的AI天气预报模型,展现出了可与欧洲中期天气预报中心业务数值模式媲美的预报实力。
欧洲中期天气预报中心主任弗洛伦斯·哈比耶详细地展示了华为云盘古气象大模型与欧洲中期天气预报中心的实时运行检验对比情况:
为了探索AI捕获极端天气的能力,我们研究了今年2月芬兰的一个案例,当时观测到了-29℃的寒潮,我们发现盘古较早认识到了这一事件的严重性。
弗洛伦斯·哈比耶还强调,AI预测方法资源消耗少,为发展中国家提供了重要机遇,因为它不再需要大规模的超算资源,还为提升全球预报能力提供了难得的机遇。
至于华为云选择AI气象预报领域作为一个“突破口”,一方面,气象预报尤其是对极端天气如暴雨、台风、干旱、寒潮的精准预测关乎国际民生,另一方面,气象预测问题非常复杂,AI可以从海量数据中挖掘出新的大气演变规律,在精度和速度上具有巨大的提升潜力。
据了解,世界气象组织 (WMO) 即将发布的WMO2024—2027年战略计划吸收了人工智能元素,使其成为推动气象科技发展的重要力量。
WMO还将积极推动AI在临近预报及数值天气预报等领域的示范应用,创建人工智能产品应用国际比对平台,制定AI气象应用标准和指南,推动人工智能数据集共享等相关工作,探索并发挥AI在气象领域的应用潜力,有效支撑全民早期预警倡议。
最后,华为云盘古气象大模型团队如何看待AI气象预报的未来?
答案是三大关键:
首先, 大数据 。庞大的气象数据是AI模型的基石,当前盘古气象大模型仅使用部分ERA5再分析数据,未来的AI模型将基于海量的、更精细的全球观测数据。
其次, 大算力 。气象数据超高的分辨率对AI模型的训练造成了巨大的挑战,盘古气象大模型现在的输入分辨率为1440×720×14×5,相比计算视觉任务常用的分辨率224×224×3大约500倍,随着分辨率的进一步增加和模型的增大,需要的算力资源也会迅速增加。
最后, 大模型 。复杂的气象规律,超高的分辨率与庞大的数据量都决定了AI气象预报需要使用计算量极高的AI模型。 同时,想要不断迭代领先的AI气象预报模型,稳定的云上环境、工作套件和对应的运维也是必不可少的。
论文地址: /articles/s41586-023-06185-3
— 完 —
量子位 QbitAI · 头条号签约
关注我们,第一时间获知前沿科技动态
标签:
推荐
- 华为大模型登Nature正刊!审稿人:让人们重新审视预报模型的未来
- 频频推出新品,康师傅为什么难以俘获年轻人的胃?
- 中远海能:上半年净利润预增1510.1%
- 普里戈任闪现俄罗斯?俄官方尚未证实
- 上海市委常委、常务副市长吴清:上海将人工智能作为三大先导产业之一 加快打造人工智能“上海高地”
- 万元旗舰Pixel Fold如此不堪一击:一掰就挂了
- 不少抑郁症患者可以完全康复,专家建议不可擅自停药-世界焦点
- 要闻:河南:全年募集就业见习岗位不少于10万个
- “绿色名片”!河南省计划年底前建成100余条“幸福河湖” 环球观速讯
- 洗脸应该怎么洗?谣言说法可信吗?-环球动态
- 国网辽宁电力2023年第一次物资招标采购项目中标候选人 全球看热讯
- 广州韩妃美容医院是正规医院吗 地址在哪 医生详情介绍 当前热点
- 目送中的经典语录(目送经典语录五十句)
- 一键布局科技型央企 银华中证国新央企科技引领ETF7月6日上市-世界即时
- 美记:湖人&76人和热火都是伍德的潜在下家
- 天天热消息:短视频时代流量城市的营销与治理
- 豫坡酱意浓香的香从何而来
- 又一知名高校开放预约进校 环球今亮点
- 国动佰行(上海)科技有限公司总经理郑达希一行到邯郸冀南新区考察|环球快讯
- 沧州市与天津市红桥区实现企业开办“跨省通办”
- 美股收评:三大指数小幅收跌,道指跌0.37%,大型科技股多数上涨
- 卫星怎么画(卫星怎么画好看又简单) 世界要闻
- 国米赚6000万欧!滕哈格放弃12年功勋,奥纳纳接替德赫亚成曼联门神_世界热文
- 环球热讯:双效兼收!“中国创造故事”丛书部分书目越南语版正式出版
- 7月5日基金净值:工银添颐债券A最新净值2.56,跌0.39%_环球热讯
- 茶艺师的前景和收入(茶艺师是做什么的)
- 记者:柏林联、狼堡正在争夺戈森斯,交易方案租借+强制买断
- 陕西警方帮河北小伙找到亲生父母,被拐24年后他曾意外找到人贩子_全球消息
- 人体艺术浏览器
- 莱巴金娜化身迷妹:费德勒在场让我很紧张,我甚至无法掩饰
- 浙商证券:给予航天彩虹买入评级
- 普瑞眼科眼底病学组换届:发挥专家优势 加强学科建设 促进眼底病专科高质量发展
- 施工网络图自动生成软件(施工网络图怎么画) 世界快消息
- 庆阳借兰洽会平台大招商
- 交付在即!9月开学!落户斗门的新高中,首批将招900人... 每日看点
- 焦点消息!你买的手机等电信设备是正品吗?最新查询攻略来了
- 环球观天下!【登峰造极】G318丨墨脱丨珠峰丨神山圣湖丨青藏线14/18日自驾游
- 骨密度正常值对照表(GUM康齿家)_全球报道
- 【每日书画笺】《金刚般若波罗蜜经》:巴蜀地区第一个到日本传法的高僧墨宝 世界消息
- 环球滚动:市场化公开选聘完成,西安银行两名副行长任职资格获批
- 今日播报!我“押中”了中考题
- 7月4日MB钴报价 每日热议
- 数字人民币使用场景持续丰富
- 全球速递!中欧班列(武汉)2023年上半年开行量超去年全年
- 仅靠手机导航就出海!父子三人漂到厦门附近,被发现时已...... 当前焦点
- 天天观热点:4分46秒!央视新闻频道直播上饶这个景区
- 【环球热闻】宝钢股份:7月4日融资买入1393.93万元,融资融券余额10.88亿元
- 观速讯丨法布尔的资料简介 法布尔人物介绍
- 前沿资讯!也门政府军与胡塞武装交火 至少6人死亡
- 澄清牛奶到底是怎么火起来的?-当前快播
- 欧盟一共多少个国家_欧盟是什么性质的组织_天天热议
- 广东省交通违章查询网官网_广东省交通违章查询系统 广东省交通违章查询网-环球观速讯
- 每日焦点!打篮球腰扭到了怎么快速恢复_打篮球腰扭伤了怎么办 打篮球腰闪了怎么办
- 合纵科技:公司电力板块中自动化设备中涉及软件开发业务
- 天津住房公积金缴存额7月起调整 缴存基数最低2180元-即时看
- 《2022年全国生态气象公报》:我国植被生态质量呈提高趋势 报资讯
- 太空科幻画图片大全(科幻画图片大全画太空)
- 杭州大学生领了租房补贴还能去申请就业补贴吗?|焦点日报
- 世界时讯:“五星”支部创建|召陵区:集中观摩“文明幸福星”创建工作
- 荣誉勋章2011攻略_荣誉勋章2010—序章首次突入攻略
- 【排名热点】太原怀孕不想要六个月引产多少钱?-天天热推荐
- 治疗肠梗阻、脑血栓验方:通草(煎取水)30 、血通15 、路路通30 、丝瓜络30 、王不留行30 、皂刺30 、黄芪30-60、 桃仁9,主治:黏连,如黏连性肠梗阻,梗阻加大黄;血栓,可合四妙勇安汤|世界热推荐
- 中国移动怎么退订业务_中国移动如何退订业务 全球速递
- 广东2022年平均工资出炉,职工养老保险缴费基数有变
- 食品安全与日常饮食_关于食品安全与日常饮食的介绍
- 张玉宁放心养伤吧!27岁土炮已在国家队和联赛全面开花,真好使! 世界关注
- 南阳市社旗县:打造“温度+速度”的政务服务 提升群众满意度
- 7月4日国内邻二甲苯企业报价暂稳
- 世界简讯:建行重庆市分行推出“惠商云贷”成为服务 个体工商户“新帮手”
- 天天速递!SE取消了《正当防卫》手游 抢先体验版已下架
- Stein:火箭为鲍威尔开出首年超800万合同 但他选择400万均薪留队 世界速递
- 内容正在升级改造,请稍后再试!
- 快讯:伊朗大使答中评:成上合正式成员将作新贡献
- 快讯2023-07-04 09:47:41 天天微头条
- 苹果公司再次上诉至最高法院 寻求重审与Epic Games的法庭争斗 世界快播报
- 法媒:抵制高尔夫球场,西班牙一环保组织填平10个球场球洞 前沿资讯
- 天天热文:我国对镓锗相关物项实施出口管制 多家上市公司业务涉及相关产品
- 随着生产、就业和投入价格等指标回落,美国6月制造业活动出现连续第八个月萎缩,跌至三年多来的最低水平_全球短讯
- 苹果官方售后服务中心官网查询(苹果官方售后服务中心官网)|全球快播
- 股权转让需要什么手续费(股权转让需要什么手续)
- 第十五届“双拥杯”驻沪部队军民健身大赛拉开帷幕-天天看点
- 7月3日基金净值:天弘中证计算机ETF最新净值0.9938,跌0.29%
- 物料清单的英文缩写_物料清单|环球新消息
- 第六代至强Granite Rapids-SP处理器曝光,采用LGA 4710接口|焦点信息
- 天天实时:华夏天安后传:新公司最大挑战是什么丨杂谈
- 德龙汇能最新公告:提前解除双桥商场租赁合同|全球新要闻
- 债券通六年来交投活跃度不断提高 投资者增加配置人民币资产将是长期趋势 天天视点
- iOS17易用交互缺失,国产更懂!
- 南向资金7月3日净卖出20.27亿港元
- 济南爱心主题街区迎旅游高峰,网红打卡游成主角_每日报道
- 中国海军“和平方舟”号医院船将执行“和谐使命-2023”任务
- 无论穿羽绒服、大衣,都少搭运动鞋!今年流行3双靴,高级有品味
- 我国多个迎峰度夏重点电网工程建成投运
- 今日苹果5s有小白点嘛(苹果5s有销售了吗)-全球热资讯
- 每日聚焦:新诺威股东户数减少120户,户均持股71.6万元
- 文玩核桃对身体的好处_玩核桃对身体的好处|天天新要闻
- 新资讯:专业、有趣,窝小芽携“自然博物馆”亮相CBME
- 巴萨名宿:巴萨不该让梅西离开,若我们当时有他将赢得西甲冠军
- 【环球快播报】方萍萍:黄金继续1900和1940区间窄幅震荡调整
- 环球关注:下半年“开门红”!“造车新势力”股价走高,热门板块突然跳水
X 关闭
行业规章
X 关闭