Bulletin de vérification · France métropolitaine

modèles stats

Performances comparées des modèles de prévision numérique face aux observations SYNOP de Météo-France — par paramètre, par échéance, station par station.

Modèles · 6Stations · 38Couples prévu/observé · 549

Palmarès

Classement par paramètre

Pression mer · RMSE

ifs
67.792
icon
466.931
aifs
468.732
·gem
472.578
·gfs
485.691
·arpege
489.609

Température 2 m · RMSE

icon
1.635
gem
2.124
aifs
2.162
·ifs
2.296
·gfs
2.706
·arpege
3.112

Vent 10 m · RMSE

arpege
0.931
gem
3.448

Un classement distinct par paramètre : les unités diffèrent (K, Pa, m/s…), une moyenne inter-paramètres n'aurait pas de sens.

Détail temporel

Classement par paramètre et échéance

ParamètreÉchéance (h)RangModèleRMSE
Pression mer241ifs4.312
Pression mer242aifs462.939
Pression mer243gem471.723
Pression mer244arpege480.037
Pression mer245gfs488.863
Pression mer246icon489.279
Pression mer481ifs40.312
Pression mer482gem456.069
Pression mer483aifs462.247
Pression mer484icon467.747
Pression mer485gfs489.494
Pression mer721ifs158.750
Pression mer722icon443.767
Pression mer723gfs478.717
Pression mer724aifs481.009
Pression mer725gem489.943
Pression mer726arpege499.180
Température 2 m241icon1.547
Température 2 m242aifs2.059
Température 2 m243gem2.238
Température 2 m244arpege2.245
Température 2 m245ifs2.658
Température 2 m246gfs2.814
Température 2 m481icon1.517
Température 2 m482gem1.967
Température 2 m483ifs2.119
Température 2 m484aifs2.146
Température 2 m485gfs2.764
Température 2 m721icon1.842
Température 2 m722ifs2.113
Température 2 m723gem2.167
Température 2 m724aifs2.280
Température 2 m725gfs2.541
Température 2 m726arpege3.978
Vent 10 m241arpege0.683
Vent 10 m242gem3.698
Vent 10 m481gem3.047
Vent 10 m721arpege1.178
Vent 10 m722gem3.598

Métriques

Scores continus

ModèleParamètreÉchéance (h)BiaisMAERMSECorrél.n
aifsPression mer24182.565390.489462.9390.2547
aifsPression mer48161.646396.970462.2470.2487
aifsPression mer72192.869403.390481.0090.2177
aifsTempérature 2 m24-0.2891.6782.0590.90229
aifsTempérature 2 m48-0.5501.7532.1460.89629
aifsTempérature 2 m72-0.7321.8932.2800.88329
arpegePression mer24175.783430.663480.0370.3087
arpegePression mer72199.487444.335499.1800.2847
arpegeTempérature 2 m241.6341.9672.2450.94129
arpegeTempérature 2 m723.0493.4303.9780.81929
arpegeVent 10 m24-0.6830.6830.6831
arpegeVent 10 m72-1.1781.1781.1781
gemPression mer24144.778428.356471.7230.3067
gemPression mer48150.839421.875456.0690.3727
gemPression mer72127.295440.062489.9430.2267
gemTempérature 2 m24-0.3221.6722.2380.86629
gemTempérature 2 m480.3291.5631.9670.90129
gemTempérature 2 m720.2381.7462.1670.87529
gemVent 10 m24-3.6983.6983.6981
gemVent 10 m48-3.0473.0473.0471
gemVent 10 m72-3.5983.5983.5981
gfsPression mer24160.994428.305488.8630.2227
gfsPression mer48161.634437.924489.4940.2517
gfsPression mer72179.112411.703478.7170.2457
gfsTempérature 2 m24-2.1762.3442.8140.91529
gfsTempérature 2 m48-2.0452.2852.7640.90829
gfsTempérature 2 m72-1.6191.9762.5410.89829
iconPression mer24180.698434.740489.2790.2787
iconPression mer48150.735424.881467.7470.3227
iconPression mer72133.228371.701443.7670.2337
iconTempérature 2 m240.1591.2611.5470.94029
iconTempérature 2 m480.2461.2331.5170.94229
iconTempérature 2 m720.6801.4891.8420.92629
ifsPression mer244.3124.3124.3121
ifsPression mer4840.31240.31240.3121
ifsPression mer72158.750158.750158.7501
ifsTempérature 2 m24-1.1361.8362.6580.8379
ifsTempérature 2 m48-0.8081.3632.1190.87714
ifsTempérature 2 m72-0.9261.4532.1130.88714

Cartographie & courbes

Figures

courbe_rmse_mslp
courbe_rmse_mslp
courbe_rmse_temperature
courbe_rmse_temperature
courbe_rmse_vent_vit
courbe_rmse_vent_vit
classement_rmse
classement_rmse
carte_biais_temperature_aifs
carte_biais_temperature_aifs
carte_biais_temperature_arpege
carte_biais_temperature_arpege
carte_biais_temperature_gem
carte_biais_temperature_gem
carte_biais_temperature_gfs
carte_biais_temperature_gfs
carte_biais_temperature_icon
carte_biais_temperature_icon
carte_biais_temperature_ifs
carte_biais_temperature_ifs

Référence

Glossaire des termes

RMSE · Root Mean Square Error
Racine de la moyenne des carrés des erreurs (prévu − observé). Même unité que le paramètre. Pénalise fortement les grosses erreurs ; métrique de référence en météo opérationnelle. Toujours ≥ MAE.
MAE · Mean Absolute Error
Moyenne des valeurs absolues des erreurs. Même unité que le paramètre. Comparée au RMSE, ne pénalise pas davantage les outliers ; un ratio RMSE/MAE élevé révèle quelques grosses erreurs ponctuelles.
biais · Erreur moyenne signée
Moyenne arithmétique de (prévu − observé). Positif : modèle trop fort ; négatif : trop faible. Un biais proche de 0 ne dit rien sur la dispersion.
corrélation · Coefficient de Pearson
Mesure si le modèle suit les mêmes variations que l'observation (entre −1 et 1). Insensible au biais et à l'échelle. 1.0 = corrélation parfaite.
MSLP · Mean Sea Level Pressure
Pression atmosphérique réduite au niveau de la mer. Affichée en Pa ici (1 hPa = 100 Pa) ; le standard est ~101 300 Pa. Indicateur des structures synoptiques (dépressions, anticyclones).
T2m · Température à 2 mètres
Température de l'air à 2 m du sol. Exprimée en kelvin (K) — soustraire 273.15 pour les °C. Paramètre le plus médiatisé, sensible à la couche limite.
vent_vit · Vent à 10 m
Vitesse moyenne du vent à 10 m du sol, en m/s. Multiplier par 3.6 pour des km/h.
rafales · Rafales à 10 m
Vitesse maximale instantanée du vent à 10 m sur l'intervalle (≈10 min). En m/s.
precip_24h · Précipitations 24h
Cumul de précipitations sur 24 heures glissantes, en mm. Les modèles fournissent un cumul depuis le début du run ; on le dé-cumule par intervalles consécutifs pour comparer à rr24 du SYNOP.
SYNOP · Observations Météo-France
Réseau d'observation au sol de l'OMM, ~40 stations en France métropolitaine, fréquence horaire. Source de vérité du projet (open-data Météo-France + WIS2).
échéance · Lead time de prévision
Décalage temporel entre l'heure du run du modèle et l'instant prévu. Ex. run 00z + échéance 24h = prévision pour 00z du lendemain.
non-strict · Mode de scoring tolérant
Un instant est scoré dès que l'observation existe, sans exiger la présence des 7 modèles. Sans cela, les cadences/échéances différentes entre modèles (ICON et IFS s'arrêtent à 12h, AIFS/AROME/ARPEGE/GFS vont à 18h) rendraient le scoring impossible.
fenêtre glissante · Limitation temporelle du scoring
Filtre `--fenetre-jours N` : ne score que les valid_time des N derniers jours. L'archive cumulative reste intacte ; seule la vue est restreinte.