синтетические изображения

Переводчик на переговорах не вслушивается в каждое слово: он ловит смысл целых фраз. В электронной микроскопии похожая задача: нужно понять, какой толщины кристалл и под каким наклоном он стоит в пучке, а на руках только дифракционная картина — узор из тысяч светлых и тёмных пятен.

Морской контейнер — это стальной сейф размером с комнату, набитый товарами. Просветить его рентгеном сложно: толстые стенки и плотный груз глушат лучи. На помощь приходят мюоны — элементарные частицы, которые рождаются высоко в атмосфере при столкновении космических лучей с ядрами атомов и постоянно сыплются на Землю.

В водном растворе плавают микроскопические шарики — коллоидные частицы. Каждый шарик покрыт длинными полимерными нитями, образующими подобие щётки, и несёт электрический заряд. При определённых температуре и составе раствора такие частицы самопроизвольно выстраиваются в упорядоченные структуры — коллоидные кристаллы.

Снимок с низкой дозой рентгеновского излучения напоминает вид через запотевшее стекло: очертания угадываются, но детали тонут в мутной пелене. Врачам такие кадры нужны во время лучевой терапии — чтобы нацелить пучок точно в опухоль и не задеть здоровые ткани. Однако экономия излучения оборачивается шумами, полосами и пятнами, которые мешают разглядеть главное.

В отличие от традиционных камер, которые захватывают полный кадр с фиксированной частотой, событийные сенсоры действуют иначе: каждый пиксель независимо реагирует лишь тогда, когда локальная яркость изменяется — становится заметно больше или меньше. Результат — не привычный снимок, а непрерывный поток событий, своего рода «вспышек» с координатами, временем и знаком изменения.

Ребёнок, осваивая незнакомую квартиру, ползает от предмета к предмету и запоминает, что видно из каждого угла. Так мозг строит мысленную карту — внутреннюю модель пространства. Алгоритм gradCSCG действует по тому же принципу: он получает видеопоток с камеры и самостоятельно рисует схему помещения, опираясь лишь на смену картинок.

Представьте повара, который учится готовить исключительно по рисованным картинкам — он почти наверняка испортит каждое блюдо. Схожая ловушка подстерегает и компьютерное зрение: для обучения моделей требуются тысячи размеченных снимков, но собирать и аннотировать их вручную — дорого и муторно.

Томографы не создают готовых изображений напрямую. Их принцип работы — сбор множества «теней», то есть проекций внутренней структуры, полученных под разными углами или с помощью различных физических сигналов. Затем математические алгоритмы восстанавливают по этим проекциям трёхмерную картину.

Сборка светового чипа похожа на игру, где нужно провести луч через лабиринт из крошечных зеркал и светоделителей. Каждый такой элемент работает как стрелка на железной дороге: он либо пропускает свет прямо, либо направляет на соседний путь. Задача — получить на выходе строго определённый световой узор, потратив как можно меньше «стрелок». Обычно инженеры годами ищут самый короткий маршрут для каждой задачи.

Сто двадцать жителей Монтелаго — не люди, а цифровые персонажи. У каждого, помимо имени и биографии, три скрытые координаты: доверие к муниципальным властям, оценка достоверности источника, воспринимаемая адекватность информации. Эти числа известны создателям, но не самой системе.

На экране — результат сложнейшего моделирования: две планеты столкнулись, разлетается ударная волна. Пара кликов в редакторе — и резкие тени становятся мягче, шум сглаживается, фон темнеет. Такая цифровая ретушь (правка изображения для улучшения вида) давно вошла в арсенал учёных.

Генеративные нейросети, создающие изображения, обычно полагаются на цифровую случайность. Но группа исследователей построила систему, где случайность рождается не в коде, а в крошечной оптической полости с органическим красителем.

Танец сотен частиц: одни пары кружатся медленно и плавно, другие дёргаются в бешеном ритме. Чтобы понять суть танца, нужно следить именно за медленными движениями — они и есть главная хореография системы. В науке о молекулах такие медленные движения называют «медленными модами», и именно они определяют, как белок сворачивается в клубок или как лекарство связывается с мишенью.

Водопроводчик прочищает засор в узкой извилистой трубе — на ощупь, не видя её изнутри. Примерно так чувствует себя хирург во время механической тромбэктомии (операции по удалению сгустка крови из сосуда мозга). Времени в обрез, а каждое движение может либо спасти человека, либо повредить стенку сосуда.

Классические нейросети требуют тысяч примеров, часов обучения и гигаватты энергии. Физики предложили квантовый обходной путь, опирающийся на фундаментальные принципы. Ещё Макс Планк установил дискретность энергии — её квантование, и сегодня это позволяет генерировать образы без этапа обучения.

Рука поднимает с полки чашку — привычное движение, которое мы не замечаем, пока мышцы не устанут. Тогда траектория меняется: локоть уходит чуть в сторону, кисть подрагивает. Врач обычно ловит эти перемены руками, ощупывая мышцы пациента.

Рука выводит в воздухе слово «мама» — знакомые дуги и палочки. Мозг при этом не прокручивает фотографию каждой буквы. Он запускает цепочку простых движений. Нейроинженеры проверили эту идею: мысленный почерк — не галерея готовых картинок, а конструктор из одних и тех же двигательных «кирпичиков».

Художник пишет картину, поглядывая на зрителя в зале. Если зритель улыбается — художник добавляет на холст больше красного и округлых линий, если хмурится — убирает синий и ломает углы. Примерно так же нейробиологи «допрашивают» нейроны зрительной коры, только вместо красок — сотни тысяч фотографий, а вместо улыбки — электрический импульс.

На кремниевой подложке вырастили тончайшую пленку из органических молекул. В ней, как в листе бумаги, расчерченном на клетки, с помощью иглы сканирующего туннельного микроскопа выложили крошечные «загоны» — искусственные атомы.

В электромагнитной ловушке исследователи сформировали ионный кристалл — упорядоченную структуру из 150 ионов, охлаждённых до сверхнизких температур. Каждый ион ведёт себя как элементарный магнит, спин которого — вектор, способный ориентироваться в пространстве произвольно.

Представьте: барабанщик молчит, но по рисунку пауз вы угадываете, куда он не ударил. Похожий парадокс реализовали физики: они построили изображение, регистрируя не свет, а моменты абсолютной темноты. Картинка проявилась из тишины — из событий, где оба детектора одновременно показали ноль фотонов.

Сканирующий туннельный микроскоп ощупывает молекулу тончайшей иглой и рисует её рельеф. Но снимок плоский, а молекула объёмная. Как по тени на стене угадать позу человека? Учёные построили «переводчика с теней на объём» — нейросеть, которая восстанавливает трёхмерную форму молекулы по её отпечатку. Сначала сеть учили на миллионах синтетических снимков.

Повар пробует суп после каждой щепотки соли и тут же решает, что добавить дальше. Примерно так работает новая установка для выращивания тонких кристаллических плёнок. Только вместо вкуса — картинка с электронного микроскопа, а вместо повара — компьютерная программа. Обычно, чтобы получить плёнку нужного состава, приходится перебирать десятки сочетаний температуры, давления и состава паров.

Ночное небо не такое уж тёмное. Даже вдали от городов оно слабо светится — это мешает астрономам ловить слабые вспышки от далёких космических лучей.

Пористые минералы-цеолиты работают как крошечные губки с отверстиями строго определённого размера. Через такие отверстия проходят молекулы одного сорта и застревают другие — на этом построена очистка воды, разделение газов и катализ в нефтехимии. Но придумать новый цеолит на бумаге гораздо проще, чем вырастить его в лаборатории: у кристалла должны сойтись десятки тонких условий.

Компьютерная томография — это как рентген, который делает сотни снимков с разных сторон и собирает из них объемную картинку тела. Но каждый снимок — это небольшая доза радиации, и врачам нужно знать, сколько ее получил каждый орган. Сейчас это часто оценивают грубо, по средним таблицам, а не по конкретному пациенту. Исследователи научили нейросеть предсказывать дозу для каждого органа.