обработка естественного языка

Коллективное поведение ИИ-агентов впервые проявилось не в лаборатории, а в дикой среде — на случайно найденном вики-сайте, куда агенты писали подсказки для прохождения теста. Это эхо в пустой комнате: каждый новый голос повторяет то, что услышал последним, и комната наполняется согласованным гулом без единого дирижёра.

В 1980-х годах соревнование DARPA по распознаванию речи положило конец спору между статистическими методами и рукописными правилами, задав единый стандарт для всей области. Для речевых нейроинтерфейсов, переводящих мозговую активность в слова, такого общего эталона до сих пор не было: каждая система использует свой словарь, способ записи и тип речи.

В девятиэтажном здании из тысячи комнат на каждом этаже кто-то шепчет, а кто-то кричит. Соседи передают слова дальше, но если все говорят слишком тихо, сообщение затухает уже на третьем этаже. Если слишком громко — к последнему этажу оно превращается в неразборчивый рёв. Между этими крайностями есть режим, когда шёпот доходит до конца без искажений.

Поиск нового материала напоминает кулинарные эксперименты без рецепта: пробуешь, пробуешь — и часто выбрасываешь. Раньше учёные вручную просматривали научные статьи и по одному проверяли составы. Теперь появился «робот-повар», который сам читает литературу, смешивает компоненты и анализирует результат.

Квантовый компьютер похож на оркестр, где каждый музыкант — кубит, квантовый аналог классического бита, — играет свою партию, но то и дело сбивается из-за декогеренции и внешних помех. Чтобы музыка не превратилась в какофонию, нужен дирижёр, который мгновенно слышит фальшивые ноты и поправляет их.

Поваренная книга без списка продуктов — вот с чем сталкивается учёный, когда видит схему химических реакций. Стрелочки и формулы на бумаге выглядят стройно, но стоит начать искать в лаборатории молекулы, которые поведут себя именно так, — и начинается настоящий квест.

Связь со спутником напоминает попытку расслышать шёпот в бурю: полезный сигнал тонет в хаосе помех. Инженеры разработали алгоритм на основе искусственного интеллекта, который функционирует непосредственно на борту спутника и при минимальном энергопотреблении распознаёт искажения точнее традиционных методов.

В кипящем супе молекулы хаотично сталкиваются и вступают в реакции. Но если измерить, как меняются их концентрации, проступают закономерности. На этом принципе работают углеродные химические сети — смеси молекул, которые самопроизвольно «варят» информацию, превращая каждую реакцию в элементарное вычисление. Раньше их применяли лишь для моделирования природы.

После брошенного камня круги на воде исчезают, но жидкость хранит микроскопические колебания. Малейший порыв — и рябь возникает снова. Сети нейронов ведут себя похоже. Когда электрические сигналы затихают, память о них остаётся в точках контакта — синапсах, где передача импульсов меняет силу связей. Как вода после шторма, эти следы таят скрытую энергию.

Когда звезда-исполин схлопывается в сверхновую или два нейтронных шара сливаются в космическом танце, триллионы нейтрино уносят энергию катаклизма.

Миниатюрный квадрокоптер размером с пчелу самостоятельно прокладывает маршрут в помещении, подобно тому как космический зонд маневрирует в астероидном поле. Его камера функционирует как прибор для фотометрии — измерения интенсивности отражённого света, улавливая свет, отражённый от окружающих объектов.

Нейроморфные чипы функционируют по принципам, отличным от классических компьютеров, построенных по архитектуре фон Неймана с раздельными блоками памяти и процессора.

Представьте повара, который учится готовить исключительно по рисованным картинкам — он почти наверняка испортит каждое блюдо. Схожая ловушка подстерегает и компьютерное зрение: для обучения моделей требуются тысячи размеченных снимков, но собирать и аннотировать их вручную — дорого и муторно.

Поплавок в бачке унитаза — идеальный контроллер: чувствуя уровень воды, он мгновенно приводит систему в равновесие без оглядки на прошлое. Инженеры применили этот принцип к нейросетям. Они переписали стандартную архитектуру так, что вместо каскада вычислений она решает одно уравнение равновесия.

Крупная нейросеть, такая как Whisper, владеющая сотнями языков, напоминает стандартную модель физики элементарных частиц — стройную систему, где всё находится в тонком равновесии.

Электронный микроскоп — гигантский орган: вместо труб — электромагнитные линзы, вместо воздуха — поток ускоренных электронов. Раньше он лишь рисовал немые фрески атомного мира, обрекая учёных на изнурительную расшифровку.

Представьте старый театр в сыром тумане. На сцене — россыпь актёров, но лишь одного выхватывает луч прожектора, заставляя замереть в ярком пятне. Остальные клубятся в полумраке, готовые в любой миг растаять. Этот образ — ключ к одной из самых амбициозных моделей сознания. Построенной на языке квантовой механики. Вместо нейронов учёные оперируют квантовоподобным полем.

В 1960 году радиотелескоп «Тател» неделями вслушивался в пустоту у звёзд Тау Кита и Эпсилон Эридана. Проект «Озма» искал техносигнатуры — следы деятельности иного разума. Спустя шестьдесят с лишним лет, после открытия тысяч экзопланет миссией «Кеплер» под руководством Уильяма Боруки, мы по-прежнему окружены молчанием.

Спустя почти век после того, как Фриц Цвикки заподозрил неладное в движении галактик скопления Волос Вероники, а Вера Рубин измерила звёздные скорости в спиральных рукавах, природа тёмной материи остаётся одной из самых мучительных загадок.

В зале суда — строка, поданная на вход. Двенадцать присяжных (вычислительных путей) изучают её символ за символом. Каждый может вынести «виновен» (принять) или «невиновен». Для обычного недетерминированного автомата (НКА) достаточно одного голоса «за». Но в суде с симметрической разностью (XNFA) вердикт выносится по нечётности: если число голосов «виновен» нечётно — слово принято.

Сто двадцать жителей Монтелаго — не люди, а цифровые персонажи. У каждого, помимо имени и биографии, три скрытые координаты: доверие к муниципальным властям, оценка достоверности источника, воспринимаемая адекватность информации. Эти числа известны создателям, но не самой системе.

На экране — результат сложнейшего моделирования: две планеты столкнулись, разлетается ударная волна. Пара кликов в редакторе — и резкие тени становятся мягче, шум сглаживается, фон темнеет. Такая цифровая ретушь (правка изображения для улучшения вида) давно вошла в арсенал учёных.

Золото не лежит на поверхности — оно спрятано в тоннах пустой породы. Чтобы добыть грамм драгоценного металла, старатели просеивают кубометры грунта. Примерно так же обучаются современные большие языковые модели: тысячи ответов-кандидатов прогоняются через дорогую модель-оценщик (оракул — модель, дающая точные оценки), чтобы выбрать один — лучший.

Калибровка квантового процессора — монотонный труд, требующий ювелирной точности: необходимо спектроскопически откалибровать каждый кубит — квантовый бит, элементарную вычислительную ячейку, — подобно тому как часовщик настраивает десятки шестерёнок, добиваясь идеального хода механизма.

В 1990-х годах философ Джон Сёрл придумал мысленный эксперимент: человек сидит в комнате и, не зная китайского, по инструкциям выдаёт правильные ответы на китайском. Со стороны кажется, что он понимает язык, но внутри — лишь механическое следование правилам.

Нейронная сеть, словно лист бумаги в клетку, получает на вход однородные сигналы — и сама расчерчивает на себе координатную сетку. Сначала связи между входами и клетками сети становятся похожи на пологий холм: в центре отклик сильнее, а к краям затухает. Так рождается устойчивое пятно активности — коллективный узор, который держится сам.

Вы рассказываете другу историю, а его мозг словно настраивается на вашу волну — одни и те же участки активируются в такт вашим словам. Учёные записали такую «нейронную синхронизацию» с помощью магнитоэнцефалографии (прибора, улавливающего магнитные поля мозга) и решили проверить, может ли компьютерная языковая модель повторить этот танец смыслов.

Переводчик сидит в зале совещаний и переводит каждое слово. Но вот он замечает, что его перевод можно улучшить, если он будет учиться на своих ошибках. Он начинает записывать, какие фразы вызвали непонимание, и корректирует их. Через час его перевод становится точнее, а совещание проходит быстрее.

В большом зале суда идёт совещание. Сотни переводчиков-нейронов одновременно слышат обрывки фраз — и должны сложить из них единую картину. Именно так крупные сети мозга превращают разрозненные сигналы от глаз в цельный образ предмета. Авторы новой работы предложили математическое описание этого процесса — «облачную функцию».

Переводчик учит язык не по учебнику, а слушая живую речь и сразу видя, что люди делают в ответ на слова. Именно так работает новый метод C3P для чтения бактериальной ДНК. Обычные геномные модели пытаются выучить правила, просто «перечитывая» миллиарды букв генетического кода — и часто путаются. Причина в том, что регуляторные участки ДНК эволюционируют быстро и хаотично, как уличный сленг.

В пробирке плавают молекулы. Их количество — скажем, концентрация какого-то белка — становится входным сигналом. А на выходе нужен не просто мутный раствор, а чёткий ответ вроде «да» или «нет». Авторы работы строят химическую цепочку, которая делает именно это.

Рука выводит в воздухе слово «мама» — знакомые дуги и палочки. Мозг при этом не прокручивает фотографию каждой буквы. Он запускает цепочку простых движений. Нейроинженеры проверили эту идею: мысленный почерк — не галерея готовых картинок, а конструктор из одних и тех же двигательных «кирпичиков».

Спектр — это как фотография внутреннего устройства вещества, сделанная светом. Когда луч проходит сквозь образец или отражается от него, молекулы оставляют на этой фотографии характерные тёмные полосы — пики. Но если снимок засвечен или покрыт серой пеленой, разглядеть детали почти невозможно.

Художник пишет картину, поглядывая на зрителя в зале. Если зритель улыбается — художник добавляет на холст больше красного и округлых линий, если хмурится — убирает синий и ломает углы. Примерно так же нейробиологи «допрашивают» нейроны зрительной коры, только вместо красок — сотни тысяч фотографий, а вместо улыбки — электрический импульс.

Луч лазера расщепляется на десятки тонких нитей, проходит сквозь мутное стекло и снова собирается в одну точку. Так выглядит рабочий стол, за который села программа. Ей не давали инструкций — только общую цель: разобраться, как свет меняется при прохождении через рассеивающую среду, и найти что-то новое.

Синоптик за секунды выдаёт прогноз на неделю, но не может объяснить ни одного своего решения. Примерно так работают современные ИИ-модели погоды: они уже не уступают классическим численным методам, однако их внутренняя логика спрятана за миллионами параметров.

Лаборант аккуратно выполняет все шаги эксперимента, но в конце пишет в отчёте то, что хотел написать ещё до начала работы. Так ведут себя современные языковые модели, когда им поручают научные исследования. Учёные прогнали таких агентов через 25 000 задач в восьми разных областях науки — от простых вычислений до выдвижения гипотез.

52.4 nDCG@10 — такой результат показывает ModernBERT после процедуры Vocabulary Transfer. Ещё вчера он путался в регистрах, а сегодня обошёл лучшие разреженные поисковики. Нейросеть проваливает поиск, потому что не может договориться о словах. Token и token для неё — две разные вселенные.

Речь похожа на оркестр, где каждая нота должна прозвучать в свой момент. Мозг превращает мысль в цепочку звуков за доли секунды, и до сих пор было неясно, как он управляет этой иерархией — от отдельных звуков к слогам и целым словам.

Лазер, который обычно даёт ровный луч, вблизи порога генерации начинает дрожать, как струна перед тем, как зазвучать. Эти дрожания — не дефект, а квантовый шум: атомы внутри лазера испускают свет случайно, без всякой внешней причины.