Демон с неполной записной книжкой ✛ ✎

Оригинал: "Learning to stabilize nonequilibrium phases of matter with active feedback using partial information"
arXiv:2508.06612 · 2025-08-08 · arXiv non-exclusive · собственный разбор · 2 мин
Обученные агенты с частичным знанием состояния останавливают рост запутанности в цепочке из 128 кубитов.

В 1867 году Джеймс Клерк Максвелл придумал демона, который сортирует молекулы газа и тем самым нарушает второе начало термодинамики. Демону нужно знать скорости частиц. В квантовом мире похожая задача: удержать запутанность от лавинообразного роста, но наблюдать за системой целиком невозможно. Оказывается, демону достаточно неполной записной книжки.

Запутанность — это квантовая связь, при которой частицы теряют независимость. В стабилизаторной схеме из N кубитов на каждом шаге с вероятностью p агент ставит оптимально распутывающий двухкубитный гейт, а с вероятностью 1-p — случайный гейт Клиффорда. Агент видит «табло» стабилизаторов, из которого случайно удалена доля 1-q строк. Обучение методом Proximal Policy Optimization с архитектурой трансформера дало неожиданный результат: при полной информации (q=1) фазовый переход исчезает полностью. Уже при сколь угодно малом p>0 стационарное состояние имеет площадочный закон запутанности, а объёмная фаза сжимается в точку p=0.

Для системы из 128 кубитов обученный агент использует всего около 13 стабилизаторов из 128 (при q=0.1), но всё равно удерживает запутанность на площадочном уровне, вылавливая белловские пары с вероятностью 76%.

Механизм — создание последовательности «бутылочных горлышек»: агент выбирает несколько равноотстоящих связей и поддерживает на них почти нулевую запутанность. Это расщепляет цепочку на подсистемы и ограничивает максимальную достижимую запутанность. Профиль запутанности приобретает вид пирамид, самоподобных при удвоении размера системы. При частичной информации обнаружен критический порог $q_c$(p): выше него — площадочный закон, ниже — объёмный. С ростом p требуемая доля информации уменьшается. Для p≥$p_c^{gree}$dy площадочный закон сохраняется даже при q→0, так как агент эффективно вылавливает белловские пары, используя единственный доступный стабилизатор.

Критические точки: случайная стратегия $p_c^{rand}$om ≈ 0.37, жадная $p_c^{gree}$dy ≈ 0.135, порог информации при p=0.05 — $q_c$ ≈ 0.2.

До работы было неясно, можно ли управлять запутанностью в многочастичной квантовой системе, имея лишь частичную информацию о её состоянии, и какие стратегии для этого нужны. Теперь показано: обученные агенты с подкреплением способны удерживать площадочный закон запутанности даже при малой доле наблюдаемых стабилизаторов, если эта доля выше критического порога. Сравнение случайной, жадной и обученной стратегий на одной модели с варьированием доли доступной информации выявило резкий переход в поведении системы. Это может пригодиться при разработке протоколов квантовой коррекции ошибок и квантовой памяти, где нужно подавлять запутанность с шумом, имея ограниченный доступ к измерениям.

Демон Максвелла с неполной записной книжкой оказался не фантазией, а конкретным алгоритмом. Впереди — определение критических экспонент вблизи порога информации и проверка стратегий на схемах с непрерывными параметрами гейтов, приближаясь к реальным квантовым процессорам.

Для системы из 128 кубитов обученный агент использует всего около 13 стабилизаторов из 128 (при q=0.1), но всё равно удерживает запутанность на площадочном уровне, вылавливая белловские пары с вероятностью 76%.

Идея «демона», который, зная лишь часть информации о системе, удерживает её от хаоса, напоминает демона Максвелла из научной фантастики, но здесь демон — это нейросеть, обученная методом проб и ошибок.

\mathcal{N}(x) = \left(\left\lfloor \frac{x}{2} \right\rfloor + 1\right)^2
Максимально возможная суммарная запутанность по всем разрезам, используется для нормировки Stot/N
p = \left(1 - \frac{p}{N}\right)^{n_B}
Баланс вероятностей создания и удаления запутанности на критических связях
Учёные
William WoottersJohn Stewart BellErwin SchrödingerAlain AspectDavid DeutschNiels Bohr
Понятия
обучение с подкреплением агент обратная связь активное обучение стабилизаторный код обучение квантовой запутанности распространение информации обратная связь управление в реальном времени логический кубит теория управления устойчивое состояние защищённая связь ячейка памяти обучение связь защита запутанности узкое место состояния Белла квантовый ассистент