¿Qué es la verificación de pronósticos?
La verificación de pronósticos es el proceso sistemático de comparar las predicciones emitidas por un modelo meteorológico con las observaciones reales registradas posteriormente. Es la única forma objetiva de saber si un modelo funciona bien, dónde falla y cómo ha mejorado (o empeorado) con el tiempo.
Sin verificación, la meteorología sería un ejercicio de fe. Gracias a ella, podemos cuantificar la habilidad predictiva y orientar los recursos de investigación hacia los puntos débiles de cada modelo.
Métricas fundamentales
Existen decenas de métricas, pero las más utilizadas son:
- RMSE (Root Mean Square Error): mide la magnitud media de los errores. Un RMSE de temperatura de 2 °C a 48 horas significa que, en promedio, la predicción se desvía 2 °C de la observación. Es sensible a errores grandes.
- Bias (sesgo): indica si el modelo tiende a sobreestimar o subestimar una variable. Un bias positivo de precipitación significa que el modelo llueve más de la cuenta.
- Skill score: compara el error del modelo con el de una referencia (climatología, persistencia). Un skill score de 0.7 indica que el modelo reduce un 70 % el error respecto a la referencia. Valores negativos significan que el modelo es peor que la referencia.
- Brier score: para eventos binarios (¿llueve o no?). Combina fiabilidad, resolución y incertidumbre climática.
- ROC y diagrama de fiabilidad: evalúan la calidad de las predicciones probabilísticas, especialmente las del ensemble.
¿Cómo se realiza?
El proceso sigue estas etapas:
- Recopilación de pares predicción-observación: se empareja cada predicción con la observación más cercana en espacio y tiempo.
- Control de calidad: se descartan observaciones dudosas (estaciones averiadas, datos fuera de rango).
- Cálculo de métricas: se computan las estadísticas para distintos plazos (24 h, 48 h, 72 h...), regiones, estaciones del año y variables.
- Comparación entre modelos: se contrastan los resultados para identificar fortalezas y debilidades relativas.
Los centros meteorológicos publican verificaciones periódicas. El ECMWF, por ejemplo, publica scoreboards trimestrales comparando todos los modelos globales. La WMO coordina intercomparaciones internacionales.
Desafíos de la verificación
Verificar precipitación es mucho más difícil que verificar temperatura, porque la lluvia es discontinua en el espacio. Un modelo que predice lluvia 10 km al este de donde cayó realmente obtiene un error grande, aunque la predicción sea útil (problema del doble castigo). Para solventar esto se usan métricas espaciales como el FSS (Fractions Skill Score).
Otro reto es la verificación de eventos extremos: hay pocos casos, las estaciones pueden no captarlos y las métricas clásicas penalizan las falsas alarmas tanto como los fallos de detección. La comunidad científica desarrolla continuamente nuevas métricas adaptadas a estos problemas.