FengWu-W2S

1 downloads 0 likes on ModelScope updated

Model card

FengWu-W2S

模型介绍

FengWu-W2S(FengWu Weather-to-Subseasonal)是基于 FengWu 扩展的无缝天气到次季节全球预报模型。

论文:FengWu-W2S: A deep learning model for seamless weather-to-subseasonal forecast of global atmosphere

https://arxiv.org/abs/2411.10191

模型描述

该模型采用 6 小时步长进行最长 42 天自回归预报,并通过大气、海洋和陆面耦合以及多样性扰动增强延伸期预报能力。

适用场景

场景 说明
天气到次季节预报研究 使用 78 通道、6 小时时间分辨率的全球气象和海气陆耦合数据训练模型。
本地快速验证 使用小网格合成 HDF5 数据检查训练、微调、推理和推理输出可视化流程。
ModelScope/OneCode 运行 作为独立模型包下载后安装依赖并运行脚本。
多卡训练 通过 torchrun 启动 PyTorch DistributedDataParallel。

使用说明

1. OneCode 使用

可通过 OneCode 在线环境体验智能化一键式 AI4S 编程:

点击体验智能化一键式 AI4S 编程

2. 手动安装使用

硬件要求

  • 推荐使用 GPU 或 DCU 运行。
  • CPU 可以用于导入和小配置连通性验证,完整训练和推理速度较慢。
  • DCU 用户需要预先安装 DTK,建议使用 DTK 25.04.2 以上版本或与当前集群匹配的 OneScience 推荐版本。

下载模型包

modelscope download --model OneScience/FengWu-W2S --local_dir ./FengWu-W2S
cd FengWu-W2S

安装运行环境

DCU环境

# 请首先激活DTK及CONDA
conda create -n onescience311 python=3.11 -y
conda activate onescience311
# 支持uv安装
pip install onescience[earth-dcu] -i http://mirrors.onescience.ai:3141/pypi/simple/  --trusted-host mirrors.onescience.ai

GPU环境

# 请首先激活CONDA
conda create -n onescience311 python=3.11 -y libstdcxx-ng=12 libgcc-ng=12 gcc_linux-64=12 gxx_linux-64=12
conda activate onescience311
# 支持uv安装
pip install onescience[earth-gpu] -i http://mirrors.onescience.ai:3141/pypi/simple/  --trusted-host mirrors.onescience.ai

训练数据介绍

OneScience 社区提供可供训练的 ERA5 数据(受数据文件大小限制,当前仓库内为完整数据切片),用户可通过下述命令下载,并确认 conf/config.yaml 中数据路径设置正确:

modelscope download --dataset OneScience/ERA5 --local_dir ./data

真实训练数据需要包含 conf/config.yaml 中列出的全部通道。用于快速检查时,可显式生成小网格合成数据,同于流程测试:

python scripts/fake_data.py

训练

单卡:

python scripts/train.py

多卡:

torchrun --nproc_per_node=2 scripts/train.py

基础训练检查点默认保存到 data/checkpoints/model_bak.pth。

训练权重

本仓库在 weights/ 文件夹内提供基于ERA5再分析数据训练的权重,权重文件即将上传,预计将于近期完成。

推理

python scripts/inference.py

推理需要项目训练产生的检查点,默认将逐时效预测保存到 result/output//,并写入 result/output/index.json。

评估和可视化

python scripts/result.py

脚本计算逐通道 RMSE、归一化 RMSE 和去气候态 ACC,并生成预报对比、时效技能、通道排序和训练损失图。

OneScience 官方信息

平台 OneScience 主仓库 Skills 仓库
Gitee https://gitee.com/onescience-ai/onescience https://gitee.com/onescience-ai/oneskills
GitHub https://github.com/onescience-ai/OneScience https://github.com/onescience-ai/oneskills

引用与许可证

  • FengWu-W2S 论文:https://arxiv.org/abs/2411.10191 。
  • 本目录是论文方法的独立复现,不代表论文作者发布的官方代码、权重或训练结果。