Мозг переговаривается короткими электрическими щелчками. Раньше, чтобы выучить этот язык, требовались тысячи примеров с переводом от экспериментатора. Метод MOJO идёт другим путём: как при изучении языка через погружение, он сперва слушает «поток сознания» без всяких подсказок и сам находит повторяющиеся узоры. А потом, получив крошечный словарик — образцы сигналов, привязанных к движениям или словам, — превращает невнятный шум в чёткие команды.
Эксперименты на обезьянах и мышах показали: даже одна-две подсказки резко улучшают результат, обходя классические алгоритмы, жадные до данных.
Такой каскад снижает неопределённость и позволяет работать с любыми сигналами — от одиночных нейронов до крупных групп. Заодно проясняется работа живых сетей из углерода. А поскольку самообучение не требует дорогих меток, в дело идут накопленные огромные архивы мозговых записей — что приближает эру помощников для людей с параличом. Идея не нова: ещё Джон фон Нейман размышлял о родстве разума и машины.
как её написали авторы, на английском arXiv:2607.14086
Robust and accurate neural decoders are integral to neurotechnologies such as brain-computer interfaces and closed-loop experiments. Recent work has shown that tokenizing neural data at the spike level facilitates multi-session pretraining and delivers state-of-the-art decoding performance. However, current spike-based models are restricted to supervised learning (SL), limiting training to datasets with paired behavioural labels. To address this limitation, we introduce MOJO (Masked autOencoder-based JOint training), a training framework for spike-tokenizing models that jointly leverages self-supervised learning (SSL) via masked autoencoding and SL objectives. We evaluate MOJO on three spiking datasets spanning monkey motor cortex during reaching tasks and multi-regional mouse recordings during vision and decision making tasks, demonstrating superior performance over purely SL-trained models. This improvement is especially pronounced when training with limited labelled data, particularly in few-shot finetuning, where only a small amount of labelled data from a new session is available. Incorporating SSL also yields more interpretable neuronal representations, improving performance on brain region classification and spike-statistics prediction without explicit optimization for these tasks. We further show that MOJO generalizes beyond spiking data to human electrocorticography during speech, where it continues to outperform purely SL-trained models and achieves performance comparable to neuro-foundation models (NFMs) designed specifically for continuous signals. Overall, augmenting spike-tokenizing models with SSL improves performance in label-impoverished settings and enables the use of unlabelled data across various tasks and species, while generalizing to other neural modalities. These results suggest a path towards more flexible and scalable data usage when training NFMs.
В секунде записи с сотни нейронов мелькает до 20 000 электрических разрядов — настоящий оркестр, где каждый импульс играет свою ноту.
Технология прямого чтения двигательных намерений напоминает нейроинтерфейсы из фильма «Аватар», где разум человека управляет телом аватара.