El demonio con la libreta incompleta ✛ ✎

Original: "Learning to stabilize nonequilibrium phases of matter with active feedback using partial information"
arXiv:2508.06612 · 2025-08-08 · arXiv non-exclusive · análisis propio · 3 min
Agentes entrenados con conocimiento parcial del estado frenan el crecimiento del entrelazamiento en una cadena de 128 cúbits.

En 1867, James Clerk Maxwell imaginó un demonio que clasifica las moléculas de un gas y, con ello, viola la segunda ley de la termodinámica. El demonio necesita conocer las velocidades de las partículas. En el mundo cuántico existe una tarea similar: mantener el entrelazamiento bajo control para que no crezca como una avalancha, pero es imposible observar el sistema completo. Resulta que al demonio le basta una libreta incompleta.

El entrelazamiento es un vínculo cuántico en el que las partículas pierden su independencia. En un esquema estabilizador de N cúbits, en cada paso el agente coloca una compuerta de dos cúbits óptimamente desentrelazante con probabilidad p, y con probabilidad 1-p una compuerta de Clifford aleatoria. El agente ve un "marcador" de estabilizadores del que se ha eliminado aleatoriamente una fracción 1-q de filas. El entrenamiento con Proximal Policy Optimization y una arquitectura de transformador dio un resultado inesperado: con información completa (q=1), la transición de fase desaparece por completo. Incluso para un p>0 arbitrariamente pequeño, el estado estacionario sigue una ley de área para el entrelazamiento, y la fase de volumen se reduce a un punto en p=0.

Para un sistema de 128 cúbits, el agente entrenado usa solo unos 13 estabilizadores de los 128 (con q=0.1) y aun así mantiene el entrelazamiento en un nivel de área, atrapando pares de Bell con una probabilidad del 76%.

El mecanismo consiste en crear una secuencia de "cuellos de botella": el agente elige varios enlaces equidistantes y mantiene en ellos un entrelazamiento casi nulo. Esto divide la cadena en subsistemas y limita el entrelazamiento máximo alcanzable. El perfil de entrelazamiento adquiere forma de pirámides, autosemejantes al duplicar el tamaño del sistema. Con información parcial se ha encontrado un umbral crítico $q_c$(p): por encima, la ley de área; por debajo, la ley de volumen. A medida que p aumenta, la fracción de información requerida disminuye. Para p≥$p_c^{gree}$dy, la ley de área se mantiene incluso cuando q→0, ya que el agente atrapa eficazmente pares de Bell usando el único estabilizador disponible.

Puntos críticos: estrategia aleatoria $p_c^{rand}$om ≈ 0.37, codiciosa $p_c^{gree}$dy ≈ 0.135, umbral de información para p=0.05: $q_c$ ≈ 0.2.

Antes de este trabajo no estaba claro si era posible controlar el entrelazamiento en un sistema cuántico de muchas partículas teniendo solo información parcial de su estado, ni qué estrategias se necesitarían. Ahora se ha demostrado que los agentes entrenados con refuerzo pueden mantener la ley de área del entrelazamiento incluso con una fracción pequeña de estabilizadores observados, siempre que esa fracción supere el umbral crítico. La comparación de las estrategias aleatoria, codiciosa y entrenada en un mismo modelo, variando la fracción de información disponible, reveló una transición abrupta en el comportamiento del sistema. Esto podría ser útil para desarrollar protocolos de corrección de errores cuánticos y memoria cuántica, donde se necesita suprimir el entrelazamiento con ruido teniendo acceso limitado a las mediciones.

El demonio de Maxwell con la libreta incompleta resultó no ser una fantasía, sino un algoritmo concreto. El siguiente paso es determinar los exponentes críticos cerca del umbral de información y probar las estrategias en circuitos con parámetros de compuerta continuos, acercándose a los procesadores cuánticos reales.

Para un sistema de 128 cúbits, el agente entrenado usa solo unos 13 estabilizadores de los 128 (con q=0.1) y aun así mantiene el entrelazamiento en un nivel de área, atrapando pares de Bell con una probabilidad del 76%.

La idea de un "demonio" que, con solo una parte de la información del sistema, lo mantiene alejado del caos recuerda al demonio de Maxwell de la ciencia ficción, pero aquí el demonio es una red neuronal entrenada por prueba y error.

\mathcal{N}(x) = \left(\left\lfloor \frac{x}{2} \right\rfloor + 1\right)^2
El entrelazamiento total máximo posible a través de todos los cortes, utilizado para normalizar Stot/N
p = \left(1 - \frac{p}{N}\right)^{n_B}
Equilibrio de probabilidades de creación y eliminación de entrelazamiento en los enlaces críticos
Científicos
William WoottersJohn Stewart BellErwin SchrödingerAlain AspectDavid DeutschNiels Bohr
Conceptos
aprendizaje por refuerzo agente retroalimentación aprendizaje activo código estabilizador entrenamiento en entrelazamiento cuántico propagación de información bucle de retroalimentación control en tiempo real qubit lógico teoría del control estado estable comunicación segura celda de memoria entrenamiento acoplamiento protección del entrelazamiento cuello de botella estados de bell asistente cuántico