Analiza trafności

sprawdzalność prognozy pogody · ranking modeli pogodowych · weryfikacja z pomiarami IMGW
Trafność ±2°C · backtest
98%
±1°C: 82% · wyprzedzenie ~doby
Najlepsza metoda
M3
mediana ważona (BMA) · MAE 0,6°
Najlepszy model
0,64°
MET/yr.no (NO)
Model AI (AIFS)
#3
z 12 · lepszy od 9/11 fiz.
Weryfikacja · metoda

Który model trafia najlepiej — i jak łączymy je w jedną prognozę

Sprawdzamy 12 modeli na 396 miastach w oknie 90 dni (807 840 par miasto-godzina), na realnym wyprzedzeniu ~doby, względem reanalizy ERA5. Poniższy ranking to średni błąd bezwzględny (MAE) — mniej znaczy celniej. Naszą publikowaną prognozę składa metoda M5; metody zespołowe trafiają w ±2°C częściej niż każdy pojedynczy model — stawiamy na niezawodność.

Ranking modeli pogodowych · MAE

backtest 90 dni · vs ERA5
#ModelMAE °CBłąd — mniej lepiej
1MET/yr.no (NO)najniższy błąd0,64
2ECMWF (EU)0,66
3AIFS ✦AI (ECMWF)model AI0,87
4ICON (DE)0,88
5UKMO (UK)0,92
6HARMONIE (NL)1,08
7AROME (FR)1,1
8DMI (DK)1,1
9GEM (CA)1,11
10GRAPES (CN)1,2
11GFS (US)1,27
12JMA (JP)1,31
Model AI ECMWF AIFS jest #3 z 12 — lepszy od 9 z 11 modeli fizycznych. Najniższy błąd ma pojedynczy MET/yr.no, ale nasza siła to złożenie wszystkich (patrz metody niżej). Backtest liczymy na realnym wyprzedzeniu ~doby wobec reanalizy ERA5 — nie wobec stacji pomiarowych.

Jak łączymy modele · 5 metod

M1 → M5

Pięć metod dotyczy trzech dób, bo dalej trafność gaśnie — zmierzyliśmy to na dziesiątkach tysięcy par prognoza–pomiar i opisaliśmy we wpisie o prognozie na 7 i 14 dni.

MetodaSposób złożeniaMAE °CRMSE °C
M1średnia zespołu0,660,85
M2mediana zespołu0,640,84
M3najlepsza w teściemediana ważona (BMA)0,60,78
M4krzywa harmoniczna1,251,63
M5publikowanaMOS + obserwacje0,60,78
W tym teście (wyprzedzenie ~doby) najcelniej wychodzi M3 (mediana ważona (BMA)): MAE 0,6°, RMSE 0,78°; trafia w ±2°C 98% — częściej niż najlepszy pojedynczy model (96%). Publikujemy M5 (MOS + obserwacje) — MAE 0,6°: jej przewaga bierze się ze świeżych pomiarów IMGW, które w produkcji są tuż obok prognozy; w tym teście, przy dystansie ~doby od obserwacji, korekta wygasa i M5 zrównuje się z metodą ważoną. Stawiamy na niezawodność, nie na jeden rekord.

Odczyt analityka

interpretacja

Przeprowadzony backtest objął 12 modeli w 396 miastach w 90-dniowym oknie pomiarowym, co dało 807840 godzin zweryfikowanych na wyprzedzeniu około doby względem reanalizy ERA5. Wśród pojedynczych modeli najniższy błąd uzyskał MET/yr.no z MAE 0,64° i wynikiem 96% w przedziale ±2°C, wyprzedzając ECMWF z MAE 0,66°. Model AIFS zajął dokładnie miejsce #3 z 12 z MAE 0,87°, okazując się lepszy od 9 z 11 modeli fizycznych, co potwierdza jego wysoką użyteczność, ale bez przewagi nad czołówką tradycyjną.

Do wdrożenia wybraliśmy metodę M5, czyli korektę o bieżące obserwacje stacji, która osiągnęła MAE 0,59, RMSE 0,77 oraz 98% w przedziale ±2°C i 83% w przedziale ±1°C. Choć model norweski notuje znakomity wynik jednostkowy, to właśnie metoda M5 wygrywa powtarzalnością i rzadszym występowaniem większych odchyleń. Należy uczciwie odnotować metodyczne ograniczenie tego zestawienia: punktem odniesienia była reanaliza ERA5 przy wyprzedzeniu rzędu doby, a nie bezpośrednie odczyty ze stacji pomiarowych.

Zastosowanie korekty o obserwacje przedkłada stabilność i powtarzalność prognozy nad jednostkowe rekordy, skuteczniej chroniąc przed odczuwalnymi pomyłkami.

Trafność temperatury wobec pomiarów IMGW

IMGW + ERA5 · dwie referencje

Trafność naszej publikowanej prognozy wobec dwóch niezależnych referencji — pomiaru IMGW (twarda kotwica) i reanalizy ERA5 (pełne pokrycie miejscowości).

pomiar IMGW
274/396 miast · 132 dób
Prognoza na dziś · 132 dób
93%
±2°C
0,93°
MAE
Prognoza na jutro · 132 dób
91%
±2°C
1,03°
MAE
Im dalej, tym trudniej — trafność z wyprzedzeniem
Wyprzedzenie 2 dni · 128 dób
86%
±2°C
1,23°
MAE
Wyprzedzenie 3 dni · 127 dób
80%
±2°C
1,44°
MAE
Wyprzedzenie 4 dni · 126 dób
73%
±2°C
1,64°
MAE
Wyprzedzenie 5 dni · 125 dób
66%
±2°C
1,92°
MAE
reanaliza ERA5
396/396 miast · 132 dób
Prognoza na dziś · 132 dób
99%
±2°C
0,56°
MAE
Prognoza na jutro · 131 dób
97%
±2°C
0,66°
MAE
Im dalej, tym trudniej — trafność z wyprzedzeniem
Wyprzedzenie 2 dni · 127 dób
94%
±2°C
0,83°
MAE
Wyprzedzenie 3 dni · 126 dób
88%
±2°C
1,08°
MAE
Wyprzedzenie 4 dni · 125 dób
82%
±2°C
1,3°
MAE
Wyprzedzenie 5 dni · 124 dób
73%
±2°C
1,61°
MAE
Aktualizacja: 2026-11-11 01:20. Prawda = pomiar IMGW (twarda kotwica) i reanaliza ERA5 (pełne pokrycie miejscowości) — temperatura i opad. Próba rośnie z każdą rozliczoną dobą.

Rozliczenie bywa też dla nas lekcją: jak jedna źle sparowana stacja psuła wyniki, opisuje postmortem błędu parowania stacji w Brzegu.

Sprawdzalność prognozy opadów

PoP · rzetelność

Rzetelność naszego prawdopodobieństwa opadu (PoP z ensemble, 102 członki) wobec realnego deszczu — deszczomierz IMGW i opad ERA5. Brier i FAR: mniej = lepiej.

deszczomierz IMGW
51/396 miast · 94 dób
Prognoza na dziś · 94 dób
69%
deszcz/nie
0,247
Brier ↓
79%
POD
49%
FAR ↓
Prognoza na jutro · 94 dób
69%
deszcz/nie
0,239
Brier ↓
80%
POD
50%
FAR ↓
satelita GPM IMERG
396/396 miast · 132 dób
Prognoza na dziś · 132 dób
82%
deszcz/nie
0,132
Brier ↓
90%
POD
26%
FAR ↓
Prognoza na jutro · 131 dób
80%
deszcz/nie
0,139
Brier ↓
89%
POD
28%
FAR ↓
Próg „mokrej doby": 0,2 mm. Aktualizacja: 2026-11-11 01:20.
← wróć do mapy kraju

Pytania o sprawdzalność prognozy

odpowiedzi z rozliczenia

Która prognoza pogody jest najdokładniejsza?

Nie oceniamy cudzych serwisów — rozliczamy własną prognozę z pomiarami stacji IMGW i publikujemy wynik co dzień: w ostatnich 132 doby 93% prognoz temperatury maksymalnej trafionych co do 2 °C na dziś i 91% na jutro. Najcelniejszy pojedynczy model ma średni błąd 0,64 °C, ale publikowana prognoza powstaje ze złożenia wszystkich i trafia częściej niż każdy z osobna.

Jaka jest sprawdzalność prognozy pogody na 3 dni?

Wobec pomiarów IMGW: dziś 93%, jutro 91%, pojutrze 86% prognoz temperatury maksymalnej trafionych co do 2 °C (ostatnie 132 doby). Dlatego publikujemy trzy doby — dalej trafność spada szybciej, niż da się na niej polegać.

Trafna Pogoda na iPhone’a i Androida

Pobierz w App StorePobierz z Google Play