Штурман и юнга: как предсказать Эль-Ниньо, когда данных мало ✛ ✎

Оригинал: "A Hybrid Deep-Learning Model for El Niño Southern Oscillation in the Low-Data Regime"
arXiv:2412.03743 · 2024-12-04 · CC BY-NC-ND 4.0 · собственный разбор · 1 мин
Одна модель ведёт корабль по карте, другая учится на её ошибках, и вместе они предсказывают тёплое течение в Тихом океане точнее, чем поодиночке.

Опытный штурман ведёт корабль по карте, но карта не всегда точна. Юнга, который долго смотрел, как штурман ошибается, учится подсказывать, где карта врёт. Вместе они прокладывают курс лучше, чем каждый сам по себе. Так работает новая модель прогноза Эль-Ниньо — тёплого течения в Тихом океане, которое раз в несколько лет меняет дожди и засухи по всей Земле.

Обычная модель — штурман. Она помнит, как температура воды и высота моря связаны между собой из месяца в месяц. Эта связь простая, поэтому модель работает даже когда данных мало, а у нас их всего около ста пятидесяти лет. Но она не видит, что тёплые события Эль-Ниньо сильнее холодных, и потому ошибается.

Нейросеть — юнга. Её учат не предсказывать Эль-Ниньо, а исправлять ошибки штурмана. Сначала штурман делает шестнадцать прогнозов, немного разных. Юнга смотрит на них и на историю океана и говорит, где штурман ошибся. Так модель ловит разницу между тёплыми и холодными событиями.

Навык прогноза 0.5 — это граница, после которой прогноз начинает приносить практическую пользу. Ниже этой черты лучше просто сказать «будет как обычно».

Проверка показала: уже после ста лет обучения гибрид предсказывает на год вперёд с навыком выше 0.5, а нейросеть без штурмана — ниже 0.4. Только после пятисот лет обучения чистая нейросеть догоняет гибрид. Раньше думали, что нужны тысячи лет данных, а теперь видно: можно обойтись сотней лет, если одна модель делает основную работу, а другая исправляет её ошибки. Штурман ведёт корабль, юнга шепчет, где карта врёт, и курс становится вернее.

Для полного охвата разнообразия межгодовых событий Эль-Ниньо может потребоваться около 500 лет наблюдений, но спутниковые данные есть лишь за последние 40 лет.

В романе Кима Стэнли Робинсона «Сорок знаков дождя» точный прогноз Эль-Ниньо становится вопросом национальной безопасности, а в реальности гибридные модели как раз и пытаются выжать максимум из коротких рядов данных.

Понятия
модель Джина–Тиммермана южная осцилляция эль-ниньо энсо модель осциллятора с подзарядкой весенний барьер предсказуемости индекс Эль-Ниньо ла-нинья многомерный индекс ЭНСО ERSST южная осцилляция распространение экваториальных волн относительный они слабое обучение объём тёплой воды буйковые станции TAO/TRITON нейронные сети прогностического обучения регрессия нейронной сети NOAA PMEL TAO смешанные моды колебаний NOAA CPC