Conjuntos de redes profundas: cómo distinguir la ignorancia del azar en el pronóstico de El Niño ✛ ✎

Original: "Am I Confused or Is This Confusing?: Deep Ensembles for ENSO Uncertainty Quantification"
arXiv:2512.17153 · 2025-12-19 · arXiv non-exclusive · análisis propio · 4 min
Los conjuntos profundos de redes neuronales separan dos tipos de incertidumbre y muestran que, con el cambio climático, lo que crece es la ignorancia del modelo, no el caos del sistema.

Contexto

El trabajo se sitúa en la intersección del aprendizaje automático y la ciencia climática, junto a investigaciones sobre incertidumbre en cálculos cuánticos, química con redes neuronales y predicción de El Niño. Ya se ha demostrado que las redes neuronales probabilísticas pueden estimar la incertidumbre aleatoria y que los conjuntos mejoran la calibración, pero faltaba un análisis detallado de los mecanismos bajo un cambio climático. Este artículo llena ese vacío: por primera vez compara sistemáticamente el comportamiento de la incertidumbre aleatoria y epistémica para ENOS bajo calentamiento antropogénico.

Métodos

Se utilizaron datos de 100 miembros del conjunto del modelo climático CESM2-LE de 1850 a 2100. Para cada mes se calcularon anomalías de la temperatura superficial del océano, del contenido de calor de los 300 metros superiores y de la tensión zonal del viento. Una red ResNet-18 con capas adicionales toma los tres últimos meses de anomalías y predice la categoría de ENOS con 24 meses de anticipación. Se entrenaron tres conjuntos de 100 componentes: en el período preindustrial (1850–1949), el moderno (1850–2024) y el de escenario (1850–2098). La incertidumbre aleatoria se estimó como la entropía promedio de las predicciones de los componentes, y la epistémica como la varianza de las probabilidades entre los componentes.

Resultados

Cuando la distribución de los datos de entrada cambia debido al cambio climático, la calidad de los pronósticos disminuye, pero la incertidumbre epistémica (el desacuerdo del conjunto) crece de manera constante a partir de aproximadamente 2040, y ese aumento correlaciona con el empeoramiento del error. La incertidumbre aleatoria, en cambio, para horizontes largos (más de 10 meses) incluso disminuye, aunque el pronóstico empeore: el modelo se vuelve excesivamente confiado en condiciones desconocidas. La mejora del conjunto respecto al componente promedio crece junto con la incertidumbre epistémica, es decir, el conjunto es especialmente valioso precisamente ante un cambio. Para horizontes cortos (hasta 6 meses), la incertidumbre aleatoria sí aumenta un poco, pero su señal es más débil y menos fiable.

Implicaciones

El trabajo muestra que en tareas con alta aleatoriedad interna, como el pronóstico de ENOS, confiar solo en la incertidumbre aleatoria es peligroso: ante un cambio en la distribución, puede inducir a error. La incertidumbre epistémica, medida por el desacuerdo del conjunto, sirve como un indicador fiable de que el modelo ha salido de los límites de los datos de entrenamiento. Esto cambia la práctica: para pronósticos climáticos bajo cambio climático es necesario monitorear ambos tipos de incertidumbre, no solo la confianza de una red individual. En comparación con trabajos vecinos que se centraban en la calibración o en la incertidumbre aleatoria, aquí se muestra por primera vez que es precisamente la componente epistémica la señal clave de degradación.

Desarrollo futuro

El tema puede desarrollarse hacia métodos más baratos para estimar la incertidumbre epistémica sin un conjunto completo, por ejemplo mediante destilación del conjunto en una sola red o aprendizaje profundo evidencial. También es prometedor investigar cómo se trasladan estos resultados a otras variables climáticas y regiones, así como a datos reales de observación, no solo a datos de modelo. Quizás aparezcan conjuntos adaptativos que aumenten automáticamente el número de componentes al detectar un cambio en la distribución.

Impacto

Los resultados afectan directamente al pronóstico estacional operativo de ENOS en un clima cambiante, ayudando a evaluar la fiabilidad de los pronósticos. También son aplicables a otras tareas de pronóstico climático donde importa tener en cuenta la incertidumbre, como el pronóstico de precipitaciones o de fenómenos extremos.

Próximos pasos

El siguiente paso es comprobar si la ventaja de la incertidumbre epistémica se mantiene al usar datos reales de observación y arquitecturas más ligeras. También es importante investigar si se puede calibrar automáticamente el conjunto al detectar un cambio, para mantener la fiabilidad de los pronósticos en tiempo real.

Problemas abiertos clave

En el pronóstico climático sigue sin resolverse el problema de estimar la incertidumbre ante la no estacionariedad del clima: los métodos tradicionales suponen estabilidad de las relaciones estadísticas, lo cual se rompe con el calentamiento antropogénico. Este trabajo vincula directamente el aumento de la incertidumbre epistémica con el cambio climático y muestra que la incertidumbre aleatoria no puede servir como sustituto. Esto plantea la necesidad de nuevas métricas y métodos robustos ante cambios en la distribución de los datos de entrada.

La mirada de la máquina del conocimiento

Esta sección está dirigida al autor del trabajo y a sus colegas. Los trabajos vecinos los encontró la búsqueda por significado en nuestro archivo, no por coincidencia de palabras. No evaluamos: mostramos el campo alrededor.

Qué hace el trabajo

Los autores entrenan conjuntos de 100 redes neuronales probabilísticas con datos de CESM2-LE para pronosticar el ENOS y separan la incertidumbre en aleatoria y epistémica. Muestran que, ante un cambio climático, la incertidumbre epistémica aumenta y se correlaciona con el error, mientras que la aleatoria se comporta de manera paradójica, disminuyendo para horizontes largos.

Dónde está su fuerza

La comparación sistemática del comportamiento de los dos tipos de incertidumbre bajo un cambio de distribución en un sistema climático estocástico constituye una herramienta concreta para monitorear la fiabilidad de los pronósticos.

Hacia dónde puede avanzar

Vale la pena probar

  • Comprobar si el aumento de la incertidumbre epistémica se correlaciona con métricas de caoticidad (por ejemplo, los exponentes de Lyapunov) para distintos escenarios de cambio climático.
  • Usar la varianza del conjunto como peso para un horizonte de pronóstico adaptativo: si la incertidumbre supera un umbral, acortar el horizonte.
  • Comparar el comportamiento de las incertidumbres para diferentes arquitecturas (por ejemplo, redes neuronales bayesianas) con los mismos datos.

Por qué puede importar

El valor práctico podría residir en la creación de sistemas de alerta temprana sobre la falta de fiabilidad de los pronósticos ante el cambio climático, algo crucial para la planificación en agricultura, energía y gestión de riesgos.

El conjunto de 100 redes neuronales en este trabajo es diez veces más grande que los conjuntos típicos para el pronóstico de ENOS, y ese tamaño fue justamente lo que permitió separar de forma fiable los dos tipos de incertidumbre. Es interesante que para pronósticos cortos (hasta 6 meses) la incertidumbre aleatoria sí aumenta un poco ante un cambio, pero esa señal es más débil que la epistémica.

AU(x) = -\frac{1}{M} \sum_{i=1}^{M} \sum_{k=1}^{K} p_{w_i}(y=k|x) \log p_{w_i}(y=k|x)
Promedio sobre los componentes de la entropía de la distribución de clases predicha; mide el azar interno de los datos.
EU(x) = \frac{1}{M} \sum_{k=1}^{K} \sum_{i=1}^{M} (p_{w_i}(y=k|x) - p_{ens}(y=k|x))^2
Varianza total de las predicciones de los componentes respecto al promedio; refleja el desacuerdo del modelo.
EU(x) = \frac{1}{M} \sum_{i=1}^{M} BS(p_i, y) - BS(p_{ens}, y)
La incertidumbre epistémica es igual a la mejora promedio del puntaje de Brier del conjunto sobre los componentes.

Cifras clave

  • tamaño del conjunto: 100 componentes
  • horizonte de pronóstico: 24 meses
  • inicio del aumento de la incertidumbre epistémica: alrededor de 2040
  • precisión del pronóstico a dos años en el período preindustrial: no menos del 34.9%
  • número de miembros del conjunto climático: 100
Conceptos
ensemble forecast estimación de incertidumbre spring predictability barrier ENSO probabilistic forecast Jin-Timmermann model ERSST Multivariate ENSO Index ensemble Southern Oscillation redes neuronales evidenciales El Niño index equatorial wave propagation TAO/TRITON moorings modelo probabilístico Niño 4 North Atlantic Oscillation interannual variability NOAA CPC incertidumbre de medición