Как роботам прокладывают курс через галактику ошибок экспресс
Стоит камере робота дёрнуться — и он роняет деталь: его нейросеть сбита с толку. Но если заглянуть в её сигналы, они напоминают созвездия в галактике: когда всё идёт гладко, они собираются в одном секторе, а перед ошибкой — резко смещаются в другой. Граница между ними прямая, как фарватер среди рифов.
Тогда инженеры приделали к этому небесному хору навигатор, похожий на штурвал, который едва заметно корректирует сигналы в реальном времени, уводя от сверхновой сбоя. Но в некоторых случаях всё заволакивает беспорядок, и штурвал дрожит. Метод WA-LQR оказался на удивление прост: он не требует переделки всей сети, только пары точных настроек. Идею плавной коррекции развивал ещё Максвелл — тот самый, что поймал электромагнитную волну, а заодно изобрёл регулятор для паровых машин. Теперь робот не уронит груз, даже если камера трясётся или захват сменили.
Оригинальная аннотация
как её написали авторы, на английском arXiv:2607.14943
World Action Models (WAMs) enable semantically- and physically-informed control but are brittle under distribution shift. In this work, we use mechanistic interpretability to study how robustness-relevant perturbations are represented in WAM activation space. Comparing activations across successful and unsuccessful rollouts, we find some WAM architectures exhibit low-dimensional linear separability for robustness-critical features, while others do not. This motivates the use of contrastive activation directions for training-free WAM steering. We also show that local linearity in WAM activation dynamics enables efficient feedback steering via model-based optimal control, yielding World-Action Linear Quadratic Regulator (WA-LQR), a minimally-invasive reduced-order LQR controller. Via mechanistic evaluations, we predict strong steerability in the Cosmos-Policy and DiT4DiT models but weak steerability in LingBot-VA, consistent with steering intervention results. On Cosmos-Policy and DiT4DiT, WA-LQR generalizes contrastive directions to new tasks and improves robustness to camera, gripper, and visual-noise perturbations over unsteered and prompt steering baselines.
Первые регуляторы для паровых машин, изобретённые в XVIII веке, работали на том же принципе: механический маятник сам перекрывал клапан при разгоне. Современный штурвал робота — прямой наследник той идеи, только вместо пара — потоки цифровых сигналов.
В фильме «ВАЛЛ-И» робот не ломался при столкновениях, а просто адаптировался. WA-LQR делает промышленных роботов такими же непотопляемыми: они лавируют в галактике сигналов, не теряя груз.