Баланс связей как ручка громкости хаоса ✛ ✎

Оригинал: "Local connectivity balance shapes population dynamics in random recurrent networks"
arXiv:2608.30008v1 · 2026-08-30 · arXiv non-exclusive · собственный разбор · 2 мин
Локальный баланс возбуждающих и тормозных связей может как успокоить сеть, так и ввергнуть её в хаос — всё зависит от того, как устроен каждый нейрон.

Представьте большой оркестр без дирижёра. Каждый музыкант слышит всех остальных и подстраивается под общий гул. Если каждый инструмент усиливает соседей, звук нарастает до визга, а если иногда приглушает — оркестр может замереть в тишине или сорваться в какофонию. Примерно так ведут себя сети нейронов, где связи между клетками работают как ручки громкости: одни усиливают сигнал, другие ослабляют.

В новой модели каждая связь получила свою ручку громкости, но с общим правилом: сумма всех «плюсов» и «минусов» на каждом нейроне почти равна нулю. Это и есть локальный баланс.

Долгое время считалось, что такой баланс нужен лишь для того, чтобы сеть не «взрывалась» от случайных выбросов. Но выяснилось, что он меняет саму музыку. Если нейроны работают как простые усилители, баланс действует как глушитель: сеть остаётся спокойной даже при сильных связях. Если же нейроны насыщаются, как перегруженный микрофон, баланс, наоборот, подкручивает громкость до хаоса.

Причина в том, что баланс убирает постоянный гул, который каждый нейрон слышит от самого себя через обратную связь. Если этот гул и так отсутствует (как у нечётных функций активации, где средний сигнал равен нулю), ручка громкости ничего не меняет.

Эксперименты на виртуальных сетях из тысячи нейронов показали: для линейных усилителей критическая сила связи, после которой активность взрывается, выросла с 1.4 до 1.8 при полном балансе. А для насыщающихся нейронов баланс превратил тихую сеть в хаотическую, причём размерность хаоса (число независимых «голосов» в оркестре) сначала росла, а потом падала. Такой немонотонный отклик означает, что баланс — не просто выключатель, а тонкая ручка настройки.

Раньше исследователи часто предполагали, что нейроны имеют нечётную функцию активации, то есть реагируют симметрично на плюс и минус. Это упрощение маскировало эффект баланса. Теперь ясно, что в реальном мозге, где нейроны насыщаются, баланс возбуждения и торможения может напрямую решать, будет ли сеть молчать или генерировать сложную активность. Оркестр без дирижёра оказался чувствителен к тому, как именно музыканты крутят свои ручки громкости.

При полном балансе (когда сумма входящих весов равна нулю) средняя по времени активность каждого нейрона в сети оказывается строго нулевой, даже если сеть находится в хаотическом режиме. Это аналитически доказано в приложении к статье.

(1+\partial_t)x_i = \sum_{j=1}^N J_{ij}\phi(x_j)
Активность каждого узла меняется под действием суммы входов от других узлов, преобразованных функцией активации.
J_{ij} = \bar{J}_{ij} - \frac{\mu}{N}\sum_{k=1}^N \bar{J}_{ik}
Из случайного веса вычитается среднее по строке, умноженное на параметр баланса μ. При μ=1 сумма входящих весов равна нулю.
q = g^2 \left\{ \langle\langle \phi,\phi \rangle\rangle_{x\sim N(0,q)} + (1-\mu)^2 \langle \phi \rangle^2_{x\sim N(0,q)} \right\}
Дисперсия активности в неподвижной точке определяется суммой флуктуаций и квадрата среднего, причём вклад среднего подавляется балансом.
Учёные
Albert Einstein
Понятия
коллективное поведение случайная сеть связность мозга сеть вес ритмический транспорт в мозге избыточность рекуррентные нейронные сети эмерджентное коллективное обучение нейронная активность стохастическая самоорганизация динамика ионных каналов нелокальность динамика сложных систем стабилизация энергосети эффект бутылочного горлышка обратная связь хранение информации логнормальное распределение парадокс Браесса в биологии