Мелодия звучит — и мозг не просто слушает ноту за нотой. Он работает как дирижёр, который уже знает партитуру: каждая следующая нота ожидаема, потому что предыдущие ещё звучат в памяти. Но как нейроны удерживают это эхо? В новой статье предложена модель импульсной нейросети PCL+ — сети, где сигналы передаются короткими разрядами, как в настоящем мозге. Она учится без учителя, просто наблюдая последовательности.
Секрет — в связях с задержками. Бегун передаёт эстафетную палочку: он должен добежать до товарища точно в тот момент, когда тот готов принять. Так и здесь: нейроны наращивают связи так, чтобы сигнал от прошлого события приходил как раз вовремя, когда нужно предсказать будущее. Это похоже на эхо в горах: крик возвращается с задержкой и накладывается на новый звук, создавая ощущение непрерывности.
Самое интересное — сеть научилась «дорисовывать» пропущенное. В задаче с жестами, где часть движений руки была скрыта, PCL+ угадывала их лучше, чем модели без памяти. Мозг делает так же: когда мы видим, как человек замахивается для броска, мы знаем, что будет бросок, даже если на миг отвернулись.
Некоторые нейроны в мозге посылают сигналы с задержкой до 100 миллисекунд — примерно столько же нужно мухе, чтобы увернуться от мухобойки.
В романе «Основание» Азимова учёный предсказывает будущее цивилизации с помощью математики — а здесь нейросеть учится делать то же самое на уровне жестов и звуков.