Обнаружение аномалий — это выявление редких объектов, событий или наблюдений, которые вызывают подозрения, поскольку значительно отличаются от большинства данных.Обнаружение аномалий — это процесс выявления точек данных, событий или наблюдений, которые значительно отклоняются от того, что считается нормальным или ожидаемым. В физике и астрономии это мощный инструмент для открытия новых явлений, поскольку неожиданные сигналы часто указывают на новую физику, инструментальные сбои или редкие природные события. Например, в астрономии гравитационных волн обнаружение аномалий помогает отделить подлинные космические сигналы от шума, а в физике частиц оно может выявлять необычные события, которые могут указывать на новую частицу или силу.
Концепция обнаружения аномалий уходит корнями в статистику и контроль качества, начиная с начала XX века, но её современная форма возникла с развитием машинного обучения в 1990-х и 2000-х годах. В физике она приобрела известность в поисках новых частиц на коллайдерах и при анализе астрономических обзоров.
Подход обычно включает построение модели «нормального» поведения на основе большого набора данных, а затем измерение того, насколько новые точки данных отклоняются от этой модели. Методы варьируются от простых статистических порогов (например, выделение точек, отклоняющихся более чем на несколько стандартных отклонений от среднего) до сложных алгоритмов машинного обучения, которые изучают сложные закономерности. В данных временных рядов, таких как выходы детекторов, обнаружение аномалий часто использует автоэнкодеры или рекуррентные сети для реконструкции ожидаемых сигналов; большая ошибка реконструкции указывает на аномалию. Ключевой момент — отличить истинные физические аномалии от обычного шума или технических артефактов.
Обнаружение аномалий используется в обсерваториях гравитационных волн, таких как LIGO, для выявления потенциальных сигналов в реальном времени, в экспериментах по физике частиц для поиска событий за пределами Стандартной модели, а также в медицинской визуализации для выявления необычных паттернов, которые могут указывать на заболевание.
В поисках внеземного разума обнаружение аномалий используется для сканирования данных радиотелескопов на предмет сигналов, выделяющихся на фоне естественных астрофизических источников, таких как пульсары или квазары.
