сегментация опухолей

Картограф, который рисует маршрут через город, не вычерчивает каждый кирпич в стене. Ему хватает улиц, перекрёстков и расстояний. Так же и с расчётом дозы облучения при томографии груди: не нужна каждая клетка, достаточно верной общей картины. Раньше для каждой пациентки строили цифровую модель груди из миллионов крошечных кубиков (вокселей), и компьютер перебирал их часами. Расчёт занимал около 27 часов.

Радиационный онколог смотрит на снимок брюшной полости и мысленно обводит область, которую нужно облучить. Эта область не видна как отдельный орган: её границы заданы протоколом, а не тканями. Поэтому врачу нужна карта окрестностей, чтобы не задеть здоровые структуры. Модель nnU-Net начинает с той же задачи.

Радиолог смотрит на снимок брюшной полости и видит не просто органы, а их взаимное расположение: какая почка больше, где опухоль относительно сосуда. Это похоже на чтение карты, где важно не только знать, где обычно стоит город, но и уметь измерить расстояние между двумя точками на местности.

В конце каждой хромосомы лежит колпачок из повторяющихся букв ДНК — теломера. Долгое время её измеряли как среднюю длину по всем хромосомам, словно судили о библиотеке по средней толщине книг. Но у человека три конца — 17p, 20q и 12p — стабильно короче остальных, и именно они чаще связаны с поломками генома. Среднее число прятало эти различия.

Стенографистка записывает совещание, но в середине разговора у неё заканчивается бумага. Она пропускает несколько реплик, а потом продолжает с того места, где остановилась. Позже ей нужно восстановить полный текст, не переписывая весь разговор заново. Именно так работает новый метод URA-SIM для микроскопии структурированного освещения (SIM).

Морской контейнер — это стальной сейф размером с комнату, набитый товарами. Просветить его рентгеном сложно: толстые стенки и плотный груз глушат лучи. На помощь приходят мюоны — элементарные частицы, которые рождаются высоко в атмосфере при столкновении космических лучей с ядрами атомов и постоянно сыплются на Землю.

Высокочастотный ультразвук, сфокусированный в одну точку, работает как невидимая линза, собирающая солнечный свет. Внутри опухоли такая линза за секунду создаёт температуру около 72°C — как горячая вода из крана, только внутри живой ткани. При этом здоровые клетки вокруг остаются почти нетронутыми.

Два снимка одного мозга, сделанные в разное время, похожи на фотографии одного дома до и после ремонта. Чтобы понять, что изменилось, их накладывают друг на друга и анализируют различия. Но томограф — не идеальная камера: он сам добавляет искажения, будто снимок сделан через слегка неровное стекло. Раньше программы не различали, какие изменения настоящие, а какие — от аппарата.

Врач годами учится распознавать болезни по снимкам мозга. Сначала он отлично видит признаки старения, потом осваивает опухоли — и вдруг начинает путаться в том, что знал раньше. Примерно так же ведут себя и многие нейросети: новые знания затирают старые. Это явление называется катастрофическим забыванием — когда модель, обученная на новой задаче, теряет точность на предыдущих.

Фонарик светит сквозь мутное стекло: лучи изгибаются, теряют яркость и идут разными путями. Примерно так мощный ультразвук проходит через кости черепа к мозгу. Чтобы рассчитать этот путь, годами использовали громоздкие компьютерные модели, которые «жуют» данные часами. Новая работа предлагает метод быстрее и точнее — словно тот же фонарик снабдили линзой, исправляющей искажения на лету.

Спрятанный в толстой шкатулке колокольчик можно заставить звенеть, не открывая крышку. Достаточно послать звуковую волну сквозь стенки — и язычок задрожит.

Обычный фонарик даёт свет, волны которого колеблются во всех направлениях сразу. Но если пропустить свет через специальный фильтр, можно получить луч, колеблющийся строго в одной плоскости — это поляризованный свет. Когда такой луч проходит сквозь биологическую ткань, её внутренняя структура слегка меняет ориентацию колебаний.

Камешек на дне ручья лежит неподвижно, пока солнечные блики пляшут на поверхности воды. В астрономии такой же контраст: настоящая экзопланета — это камень, а мириады спеклов (пятен рассеянного звездного света) — рябь, дрожащая в инструментах.

Представьте гены как дома в городе: в одних кипит жизнь, в других — тишина. Этот «городской» генетический ландшафт — паттерны активности множества генов — проанализировали у тысячи женщин с раком молочной железы.

Ультразвуковое исследование основано на отражении звуковых волн от тканей: датчик посылает импульсы, а эхо, вернувшись с разной задержкой и интенсивностью, формирует контуры органов. Однако на снимке яичника трудно отличить безобидную кисту — полость, заполненную жидкостью, — от твёрдого ракового узла. Даже специалисты проводят границы по-разному, а это напрямую влияет на выбор лечения.

Представьте перекрученный садовый шланг: вода в нём встречает сопротивление, напор падает. Похожий процесс происходит в артериях, когда они теряют свою прямолинейную геометрию. Извитость сосудов — это не просто косметический дефект, а фактор, нарушающий гемодинамику и создающий угрозу ишемического инсульта.

Медицинские снимки, по сути, представляют собой карты плотности тканей: яркость каждого пикселя кодирует локальные свойства среды, подобно тому как фотометрия — раздел оптики, измеряющий интенсивность света — регистрирует силу излучения.

Томографы не создают готовых изображений напрямую. Их принцип работы — сбор множества «теней», то есть проекций внутренней структуры, полученных под разными углами или с помощью различных физических сигналов. Затем математические алгоритмы восстанавливают по этим проекциям трёхмерную картину.

Долгое время идентификация квантовых фаз напоминала допрос свидетеля: нужно было добраться до каждого уголка системы, чтобы выведать её тайну. В эпоху Ландау порядок связывали с нарушением симметрии и локальным параметром — всё как на ладони.

Электронный микроскоп — гигантский орган: вместо труб — электромагнитные линзы, вместо воздуха — поток ускоренных электронов. Раньше он лишь рисовал немые фрески атомного мира, обрекая учёных на изнурительную расшифровку.

Радиолог всматривается в серо-белые разводы на экране — десятки срезов тела, где нужно найти каждое подозрительное пятно. Ручная разметка одного пациента отнимает полчаса, а в крупной клинике таких пациентов — сотни. Усталость и разный опыт врачей неизбежно рождают разброс: один и тот же очаг два специалиста обведут чуть по-разному. Эту рутину берёт на себя новая модель с открытым кодом GLOW-FDG.

Представьте, что обычный фоторедактор умеет выделять объекты на снимке, а нейросеть ZooBot:3D работает с далёкими галактиками как картограф, рисующий карту неизведанной земли. Тысячи добровольцев вручную обвели спиральные рукава и перемычки — центральные звёздные полосы — на астрономических изображениях.

В маленькой чашке Петри — капля жидкости размером с булавочную головку. Обычный томограф её просто не заметит: слишком слабый сигнал. Но если поднести к капле крошечный датчик магнитного поля, картина меняется.

Многие передовые расчёты в физике упираются в каменную стену — их тормозит не недостаток идей, а арифметика. Речь об интегралах, которые выражают вероятность столкновения частиц или форму всплеска гравитационных волн. Чтобы получить число, эти интегралы нужно упростить — свести к горстке «мастер-интегралов», похожих на таблицу умножения.

Большой симфонический оркестр играет, но каждая группа инструментов ведёт свою партию, не слыша остальных. Скрипки выводят мелодию сердца, виолончели — ритм печени, а духовые — пульс мозга. Звучит разрозненно, хотя по отдельности партии безупречны.

Сфотографировать тончайшую паутинку, дрожащую на ветру, — примерно так выглядит задача заглянуть в сосуды живого мозга. Ультразвуковая локализационная микроскопия (УЛМ) превращает обычный ультразвук в инструмент, способный увидеть отдельные капилляры, но только если очень точно подобрать настройки.

Водопроводчик прочищает засор в узкой извилистой трубе — на ощупь, не видя её изнутри. Примерно так чувствует себя хирург во время механической тромбэктомии (операции по удалению сгустка крови из сосуда мозга). Времени в обрез, а каждое движение может либо спасти человека, либо повредить стенку сосуда.

Корректор проверяет рукопись перед печатью. Он не знает всех возможных ошибок, но отлично помнит, как выглядит безупречный текст. Увидев странный символ или размытое слово, он сразу обводит это место красным. Примерно так работает новая программа для проверки медицинских снимков. Исследователи научили нейросеть распознавать аномалии на снимках МРТ таза и мозга.

У одного человека болезнь начинается с дрожи в руке — чашка пляшет на блюдце, пока он несёт её к столу. У другого — ноги вдруг отказываются идти ровно: шаг становится коротким, шаркающим, будто пол внезапно покрылся липким слоем. Это не две разные болезни, а два лица одной и той же — болезни Паркинсона.

Когда нужно рассмотреть мозг изнутри, человека обычно кладут в тесную трубу магнитно-резонансного томографа или облучают рентгеном. Оба способа дороги, громоздки и не всегда доступны.

Капля крови из вены попадает под три луча, и каждый вытаскивает на свет свои улики. Инфракрасный луч заставляет молекулы дрожать — по этой дрожи узнают, сколько в пробе сахаров и жиров. Зелёный лазер рассеивается на белках и липидах, меняя цвет, — так становится видна перестройка клеточных мембран.

Рентгеновский томограф напоминает столяра, который осматривает бревно со всех сторон, чтобы понять, где внутри пустота. Он делает десятки плоских снимков-теней, поворачивая источник и детектор вокруг объекта. Потом программа-«сборщик» склеивает из этих теней объёмную модель. Самый расторопный сборщик — алгоритм FBP (фильтрованная обратная проекция).

Капля чернил в стакане воды расплывается быстро и равномерно. Но если вода зажата между плотно упакованными шариками, чернильное облачко ползёт медленно и причудливо — огибает препятствия, застревает в узких горлышках. Примерно так же движутся молекулы воды в живой ткани. В опухоли мозга клетки стоят тесно, а пространство между ними напоминает лабиринт с пережатыми ходами.

Биолог смотрит в микроскоп на десятки крошечных клеточных шариков — сфероидов. Из них позже вырастут миниатюрные подобия органов. Задача похожа на работу пекаря, который оценивает, ровно ли поднялось тесто в каждой формочке. Только вместо формочек — питательная среда, а вместо теста — живые клетки.

Опухоль языка — как незнакомец в толпе. Внешне все выглядят почти одинаково, но под поверхностью скрываются очень разные характеры. Одни опухоли ведут себя агрессивно, другие растут медленно. Врачам важно понять, с кем они имеют дело, ещё до операции. Обычно для этого берут кусочек ткани — биопсию. Но такой метод не всегда показывает полную картину, ведь опухоль неоднородна.

Нейтронный спектрометр похож на слепого геолога, который простукивает породу и по звуку угадывает, что внутри. Он посылает пучок нейтронов в кристалл и смотрит, как те разлетаются. По этому узору можно понять, как колеблются атомные магнитики — спины. Но где именно копать и как долго слушать, раньше решал человек. Теперь за пульт сел алгоритм TAS-AI. Он работает в два приёма.

Врач разглядывает снимок мозга: где-то в переплетении тканей прячется опухоль. Один взгляд выхватывает мелкие пятна и границы, другой — общую форму и расположение. Человек совмещает оба, но на сотнях снимков это утомительно. Новая программа делает то же самое автоматически. Одна её часть работает как лупа: скользит по изображению и собирает мелкие детали — текстуру, края, локальные изменения.

Врач держит в руках стопку анализов, сделанных в разное время. По отдельности каждый листок — лишь фотография одного дня, а хочется увидеть целый фильм о том, как развивалась болезнь. Нейросеть Tempo учится склеивать такие разрозненные кадры в плавную ленту.

Рентгеновский аппарат обходит грудь по дуге и делает несколько снимков под разными углами. Из этих плоских кадров компьютер собирает объёмную картинку — как из кусочков мозаики складывается целое. Но если кусочки мозаики помяты или заляпаны, картинка получается мутной. В томографии роль «помятостей» играют шумы и несовершенства съёмки. Чтобы объёмная картинка вышла чёткой, алгоритм сборки нужно настраивать.

Хирург убирает опухоль груди, но как узнать, что по краю не осталось ни одной больной клетки? Сейчас ткань отправляют в лабораторию, и ответ приходит через несколько дней. Если край оказался нечистым — нужна вторая операция. Новый метод обещает дать ответ прямо в операционной, пока пациентка ещё на столе.