Comment un réseau de neurones apprend à entendre à la fois les mots et l'intonation de la météo ✛ ✎

Original: "SFANet: Spatial-Frequency Attention Network for Weather Forecasting"
arXiv:2405.18849 · 2024-05-29 · arXiv non-exclusive · analyse indépendante · 1 min
Le modèle SFANet examine la carte des précipitations et ses « vagues » pour mieux prédire la pluie.

Quand on écoute quelqu'un parler, on distingue à la fois les mots et l'intonation. Si l'un des deux manque, le sens se déforme. La prévision météo fonctionne un peu de la même manière : sur une image satellite, il y a à la fois des détails fins, comme des nuages isolés, et de grandes vagues qui s'étendent sur un demi-continent. Autrefois, les réseaux de neurones étaient performants pour l'un ou pour l'autre, mais rarement pour les deux à la fois.

SFANet agit comme un interprète attentif. D'abord, elle examine l'image par sections, en moyennant les zones voisines pour ne pas se noyer dans les détails. Ensuite, elle transforme l'image en une autre représentation, où l'on voit les vagues de grande et de petite échelle, un peu comme une partition de musique. Puis, un module spécial compare ces deux « traductions » et décide à laquelle se fier en chaque point.

Par exemple, pour une bruine fine, la vue d'ensemble est plus importante, tandis que pour un orage, ce sont les variations brutales qui comptent. Le module d'attention trouve tout seul cet équilibre.

Grâce à cette approche, le modèle, qui compte 16,4 millions de paramètres, prédit les précipitations plus précisément que des concurrents plus lourds. Pour El Niño, ce courant chaud du Pacifique qui influence le climat mondial, l'amélioration atteint 4,7%. Cela signifie que les prévisions deviendront plus fiables, sans nécessiter davantage de ressources de calcul qu'auparavant.

Le modèle utilise la transformée de Fourier, inventée par Jean-Baptiste Joseph Fourier en 1822 pour décrire la propagation de la chaleur. Aujourd'hui, elle aide à prédire la pluie.

Dans le roman « Solaris » de Stanislas Lem, l'océan de la planète présente une dynamique spatio-temporelle complexe difficile à prévoir. SFANet, en traitant les données dans deux domaines, rappelle de loin une tentative de comprendre de tels systèmes à travers différentes représentations.

Scientifiques
Niels BohrPascual JordanWerner HeisenbergJoseph Fourier
Notions
climate network prévision ERA5 ENSO NOAA CPC ensemble forecast reanalysis mécanisme d'attention réseaux de neurones en cartographie spatiale reconnaissance vocale spring predictability barrier zebiak cane model ERSST réseau de neurones El Niño-Southern Oscillation IRI Multivariate ENSO Index Jin-Timmermann model El Niño index prédiction des éruptions solaires