метод

трёхмерная реконструкция

Процесс сборки множества двумерных изображений в трёхмерную модель.
85 статей

Описание

Трёхмерная реконструкция — это процесс получения трёхмерной модели объекта или сцены по множеству двумерных изображений. Это фундаментальный метод в компьютерном зрении и графике, лежащий в основе всего — от медицинской визуализации до автономной навигации. Основная идея заключается в использовании различий между изображениями — таких как параллакс, затенение или фокусировка — для определения глубины и формы, фактически обращая проекцию, которую выполняет камера при съёмке сцены.

История

Основы были заложены в 1970-х годах в ранних работах по стереозрению и восстановлению движения по структуре, в частности такими исследователями, как Ханс Моравек и Такео Канаде. Область быстро развивалась с появлением цифровых камер и ростом вычислительной мощности.

Как это работает

Процесс обычно включает съёмку нескольких изображений с разных точек обзора или с разными оптическими настройками. Затем алгоритмы находят соответствующие точки на изображениях и используют геометрические принципы, такие как триангуляция, для вычисления трёхмерного положения каждой точки. Более продвинутые методы используют машинное обучение для определения глубины по одному изображению или для реконструкции динамических сцен из видео, часто путём оптимизации модели, которая согласованно объясняет все наблюдаемые изображения.

Где применяется

Этот метод используется в медицинской визуализации (например, МРТ и КТ), в робототехнике для навигации, в автономных транспортных средствах, а также при создании трёхмерных моделей для виртуальной реальности и кинопроизводства.

Любопытный факт

Этот метод можно использовать для восстановления формы молекулы по изображениям с электронного микроскопа, как упоминается в заголовке «Как увидеть форму молекулы в микроскоп».

Граф понятий →

Статьи по теме · 85

Как подобрать толщину кристалла за 50 симуляций
Переводчик на переговорах не вслушивается в каждое слово: он ловит смысл целых фраз. В электронной микроскопии похожая задача: нужно понять, какой толщины кристалл и под каким наклоном он стоит в пучке, а на руках только дифракционная картина — узор из тысяч светлых и тёмных пятен.
Плоский лист сам превращается в купол: обратный дизайн полимерной тенсегрити
Лист бумаги, оставленный на мокром столе, коробится и приподнимает края. Никто не управляет этим движением, но оно происходит по тем же законам, что и рост растения: одни области листа сжимаются сильнее других, и плоская форма превращается в объёмную. Инженеры давно мечтали приручить этот процесс, чтобы плоская заготовка сама складывалась в нужную скульптуру.
Невидимая перестройка: как скрученные кристаллы находят новый порядок
Колода карт, в которой каждая карта слегка повёрнута, не может лечь ровно: рубашки и рисунки никак не совпадут. Но если карты гибкие, они начнут подстраиваться, сдвигаясь на доли миллиметра, чтобы найти идеальное совпадение. Нечто похожее происходит внутри кристаллов, когда два толстых слоя MoS2 или MoS2 с WS2 складывают с поворотом на 1–2 градуса.
Пинхол, который видит химию: трёхмерная карта элементов за один кадр
В тёмной комнате луч солнца проходит сквозь булавочный прокол в картоне — и на стене появляется перевёрнутое изображение улицы. Пинхол-камера не нуждается в линзах: крошечное отверстие само отбирает лучи, идущие от каждой точки сцены. Учёные из ESRF применили этот принцип не к свету, а к рентгеновскому излучению, и заставили камеру видеть не форму, а химический состав.
Медицинская физика2026-08-201 минarXiv:2608.19823экспресс
Кровь под двойным взглядом: фотоакустика и ультразвук в одном устройстве
Врач смотрит на экран и видит две картинки одного и того же участка тела. Одна показывает, где кровь богата кислородом, другая — как быстро она бежит по тончайшим сосудам. Раньше эти картинки делали разные приборы, и совместить их было трудно. Теперь инженеры собрали устройство, которое делает обе съёмки одновременно.
Биомолекулы2026-08-181 минarXiv:2608.17759экспресс
Белковая нить, собранная из шума: прямой путь от снимков к атомной модели
Под электронным микроскопом белок предстаёт как серия размытых теней — сотни тысяч снимков одной и той же молекулы, сделанных под разными углами и отягощённых сильным шумом. Классический подход сначала восстанавливал по этим теням объёмную «дымку» — карту распределения электростатического потенциала внутри белка.
Квантовая физика2026-08-161 минarXiv:2608.15795экспресс
Сложная квантовая система раскрывается через малые части
Квантовые системы, состоящие из множества частиц, — фундамент будущих квантовых компьютеров и защищённых коммуникационных сетей. Однако с ростом числа частиц экспоненциально растёт и сложность их описания: число возможных состояний системы увеличивается лавинообразно. Традиционный подход — полное измерение всех параметров — требует колоссальных временных затрат.
Оптика2026-08-132 минarXiv:2608.12964
Переводчик, который дописывает пропущенные реплики
Стенографистка записывает совещание, но в середине разговора у неё заканчивается бумага. Она пропускает несколько реплик, а потом продолжает с того места, где остановилась. Позже ей нужно восстановить полный текст, не переписывая весь разговор заново. Именно так работает новый метод URA-SIM для микроскопии структурированного освещения (SIM).
Разделение снимков мозга: где патология, а где артефакт
Два снимка одного мозга, сделанные в разное время, похожи на фотографии одного дома до и после ремонта. Чтобы понять, что изменилось, их накладывают друг на друга и анализируют различия. Но томограф — не идеальная камера: он сам добавляет искажения, будто снимок сделан через слегка неровное стекло. Раньше программы не различали, какие изменения настоящие, а какие — от аппарата.
Компьютерное зрение2026-08-031 минarXiv:2608.02208экспресс
Снимок всего тела как предиктор будущих заболеваний
Рентгеновский аппарат DXA делает снимок, а врач традиционно видит лишь цифры — плотность костей, процент жировой ткани. Но изображение хранит гораздо больше. Группа исследователей создала модель LeDXA, которая читает эти снимки как карту скрытых сигналов организма. Модель обучалась на 11 540 снимках проекта «Фенотип человека» без единой аннотации.
Квантовый трансформер для 600 измерений
В шумном зале переводчик пытается уловить каждое слово, но шорохи и эхо путают смысл. Примерно так же обычные компьютерные методы считают сложные квантовые системы: чем больше частиц и сильнее их связи, тем быстрее расчёты тонут в помехах. Группа физиков предложила новый подход — «Генератор Шрёдингера».
Машинное обучение2026-08-011 минarXiv:2608.00776экспресс
Химия обретает зрение: как компьютерное зрение улучшает предсказание химических реакций
Прогноз выхода химической реакции — это попытка предсказать урожай, зная лишь состав почвы. Долгое время химики опирались на длинные колонки чисел, так называемые квантовые дескрипторы, которые описывают энергию электронов, но умалчивают о форме молекулы.
Медицинская физика2026-07-172 минarXiv:2607.16491экспресс
Медицинский 3D-сканер, который учится видеть всё и сразу
Чтобы передать форму статуи в мельчайших деталях, можно разбить её на миллионы крошечных кубиков и описывать каждый — долго, тяжело, и память компьютера трещит по швам. Именно так обычно работают с трёхмерными медицинскими снимками: КТ или МРТ — это огромный массив таких кубиков (вокселей), и чтобы создать или улучшить изображение, машине приходится перелопачивать их все.
Компьютерное зрение2026-07-161 минarXiv:2607.14513экспресс
Как упаковать миллион оттенков: сферические гармоники и сжатие цвета
В трёхмерной сцене каждая точка подобна конфете с переливающейся обёрткой: её цвет меняется в зависимости от угла зрения. Чтобы описать эту игру оттенков, для каждой точки хранят десятки чисел — специальную математическую функцию, разложение в ряд, предложенное ещё Жозефом Фурье.
Мир в мерцаниях: как событийная камера восстанавливает изображение по вспышкам яркости
В отличие от традиционных камер, которые захватывают полный кадр с фиксированной частотой, событийные сенсоры действуют иначе: каждый пиксель независимо реагирует лишь тогда, когда локальная яркость изменяется — становится заметно больше или меньше. Результат — не привычный снимок, а непрерывный поток событий, своего рода «вспышек» с координатами, временем и знаком изменения.
От серии снимков к видео: как анализ мочи стал быстрее и точнее
Капля мочи под микроскопом — не плоская лужица, а многослойный объём. Представьте стопку прозрачных страниц: если фокусироваться на одной, соседние расплываются. Так и свет микроскопа, подчиняясь законам оптики, чётко показывает только один слой глубины.
TCAM-Diff: трёхмерная визуализация через теневые проекции
Объём данных одного КТ-сканирования сопоставим с несколькими полнометражными фильмами в высоком разрешении. TCAM-Diff — это алгоритмический метод, который обходит это узкое место: программа сжимает трёхмерную картину в три двумерные теневые проекции — словно скульптор восстанавливает объёмную статую по силуэтам, отбрасываемым на три перпендикулярные стены.
Геометрия воды в медицинской визуализации: как плавность контуров улучшает диагностику
Медицинские снимки, по сути, представляют собой карты плотности тканей: яркость каждого пикселя кодирует локальные свойства среды, подобно тому как фотометрия — раздел оптики, измеряющий интенсивность света — регистрирует силу излучения.
Медицинская физика2026-07-141 минarXiv:2607.12998экспресс
Фундаментальный предел разрешения в рентгеновской микротомографии
Представьте, что вы фотографируете статую в полумраке. Перед вами дилемма: сделать один яркий снимок или серию тусклых кадров с разных ракурсов. В первом случае качество ограничено фотонным шумом — зернистостью, возникающей из-за нехватки фотонов, во втором — детали накладываются друг на друга, и восстановить объёмную структуру становится сложнее.
Как томограф восстанавливает объём по теням: от тепловых потоков Фурье до медицинской визуализации
Томографы не создают готовых изображений напрямую. Их принцип работы — сбор множества «теней», то есть проекций внутренней структуры, полученных под разными углами или с помощью различных физических сигналов. Затем математические алгоритмы восстанавливают по этим проекциям трёхмерную картину.
Нейросеть слышит магнитную музыку
Рентгеновский магнитный круговой дихроизм — это точный инструмент, давно позволяющий разделить спиновые и орбитальные магнитные моменты. Однако классический подход напоминает оценку оркестра по громкости: он опирается на правила сумм, сводящие всю тонкую структуру спектра к паре интегралов. Увы, такой метод чувствителен к фону и требует трудоёмкой очистки данных.
Системы и управление2026-07-131 минarXiv:2607.11187экспресс
Самоорганизующийся флот: как децентрализованный алгоритм снижает затраты на ремонт
Представьте флот из множества кораблей, напоминающий галактику — огромную звёздную систему, где каждый элемент подчиняется общей динамике. Время от времени один из кораблей выходит из строя, взрываясь подобно сверхновой — катастрофическому событию, которое может нарушить целостность всего соединения. Если вовремя не заменить повреждённую единицу, флот теряет боеспособность.
Оптика2026-07-111 минarXiv:2607.10295экспресс
Искусственный ум нашёл рецепт световых схем
Сборка светового чипа похожа на игру, где нужно провести луч через лабиринт из крошечных зеркал и светоделителей. Каждый такой элемент работает как стрелка на железной дороге: он либо пропускает свет прямо, либо направляет на соседний путь. Задача — получить на выходе строго определённый световой узор, потратив как можно меньше «стрелок». Обычно инженеры годами ищут самый короткий маршрут для каждой задачи.
Тройной вальс чёрных дыр: как хаос рождает слияния
В сердце почти каждой галактики дремлет сверхмассивная чёрная дыра — невидимый дирижёр звёздного оркестра. Когда галактики сталкиваются, их центральные монстры сближаются, закручиваясь в гравитационном танце. Иногда к дуэту присоединяется третий партнёр, и тогда начинается тройной вальс, исход которого непредсказуем.
Ретушь по правилам: где кончается наука и начинается обман
На экране — результат сложнейшего моделирования: две планеты столкнулись, разлетается ударная волна. Пара кликов в редакторе — и резкие тени становятся мягче, шум сглаживается, фон темнеет. Такая цифровая ретушь (правка изображения для улучшения вида) давно вошла в арсенал учёных.
Аромат материи: как квантовый парфюмер находит сплавы с идеальными свойствами
Создание материала с заданными свойствами — искусство, которое долго полагалось на интуицию и везение. Природа не даёт подсказок: десятки элементов в менделеевской таблице, и число их сочетаний уходит в бесконечность. Прежде материаловеды напоминали алхимиков, пробующих всё подряд, или полагались на статистические модели, терявшие силу за границами известного.
Компьютерное зрение2026-06-242 минarXiv:2606.26279экспресс
Как мозг делится опытом между задачами
Мозг не учит каждую задачу с нуля — он переносит опыт с одного дела на другое. Но как узнать, какие задачи действительно родственны? Нейробиологи придумали остроумный ход: дать искусственной сети «подсмотреть» активность мозга во время одной задачи и попробовать предсказать активность во время другой. Если получается хорошо — значит, задачи близки.
Нейросеть обучается видеть невидимую поляризацию в гексагональных детекторах
Рентгеновские детекторы устроены подобно пчелиным сотам: в шестиугольных ячейках то здесь, то там регистрируются вспышки — следы попадания отдельных фотонов. Традиционные алгоритмы вынуждены растягивать эту естественную гексагональную структуру на прямоугольную сетку, что порождает артефакты — ложные призраки поляризации, искажающие реальную картину.
Прикладная физика2026-06-072 минarXiv:2606.08524экспресс
Акустическая маскировка: звук подменяет реальность
Если хлопнуть в ладоши в пустой комнате, эхо расскажет о её размерах и форме. Каждый предмет — стул, книга, человек — добавляет в это эхо свою подпись: звук отражается от него особым образом. Авторы статьи придумали, как полностью переписать эту звуковую подпись. Они окружили область пространства замкнутой поверхностью из микрофонов и динамиков.
Космология2026-05-301 минarXiv:2606.00803экспресс
Как увидеть невидимую паутину космоса
Сквозь рябь на воде камешки на дне бассейна кажутся сдвинутыми и искажёнными. Похожим образом гравитация невидимой тёмной материи искривляет свет далёких галактик — это явление называют слабым линзированием. Но рябь в бассейне живёт только на поверхности, а тёмная материя распределена в объёме, на разной глубине.
Медицинская физика2026-05-121 минarXiv:2605.11637экспресс
Как разглядеть деталь, не облучая лишний раз
Рентгеновский томограф напоминает столяра, который осматривает бревно со всех сторон, чтобы понять, где внутри пустота. Он делает десятки плоских снимков-теней, поворачивая источник и детектор вокруг объекта. Потом программа-«сборщик» склеивает из этих теней объёмную модель. Самый расторопный сборщик — алгоритм FBP (фильтрованная обратная проекция).
Медицинская физика2026-05-092 минarXiv:2605.12544экспресс
Сосудистый близнец из цифр
Сосуды внутри черепа похожи на серпантин горной дороги — крутые повороты, сужения, неожиданные изгибы. Когда в таком серпантине возникает пробка, кровь перестаёт нормально поступать к мозгу. Чтобы предсказать беду, врачам нужно видеть весь поток целиком: где он ускоряется, где закручивается в водоворот. Полную картину даёт специальная МРТ, похожая на замедленную киносъёмку жидкости.
Квантовая физика2026-05-051 минarXiv:2605.04162экспресс
Световой чип как квантовый пинбол-автомат
Стеклянный чип, пронизанный 128 световодами, превращён в подобие квантового пинбол-автомата. Роль шариков исполняют фотоны — кванты света, а вместо механических флипперов маршрутами управляют микронагреватели, мгновенно изменяющие оптические пути. Экспериментальная задача: запустить до четырёх идентичных фотонов и зарегистрировать их итоговое распределение на выходе.
Как мозг выносит мусор: карта течений
Реку, которая течёт не в открытом русле, а внутри губки, и её течение меняется от места к месту, можно сравнить с глимфатической системой мозга. Это сеть тончайших каналов вокруг сосудов, по которым спинномозговая жидкость просачивается вглубь ткани и вымывает отходы, накопившиеся за день.
Медицинская физика2026-04-282 минarXiv:2604.25356экспресс
Рентген-детектив без шпаргалок
Фруктовый смузи пробуют через две разные трубочки. Одна пропускает только крупные кусочки, другая — только жидкость. По отдельности ощущения обманчивы, но вместе они дают ключ: вот, кажется, банан, а здесь — клубника.
Световой томограф стал проще и точнее
Свет, проходя через мутную среду вроде молока или живой ткани, рассеивается во все стороны. Восстановить, где именно свет поглощался сильнее, — всё равно что по луже на асфальте угадать форму упавшего предмета. Оптическая томография решает эту задачу, но обычно требует больших вычислительных ресурсов.
Магнитные узоры под микроскопом
Магнитная плёнка толщиной в десятки атомов хранит информацию крошечными магнитными вихрями. Но заглянуть внутрь и увидеть эти вихри напрямую нельзя: прибор чувствует лишь слабое магнитное поле вокруг плёнки. По такому полю восстановить узор намагниченности — всё равно что угадать форму невидимого рельефа по тени на стене.
Как разглядеть детали в мутном снимке
Рентгеновский аппарат обходит грудь по дуге и делает несколько снимков под разными углами. Из этих плоских кадров компьютер собирает объёмную картинку — как из кусочков мозаики складывается целое. Но если кусочки мозаики помяты или заляпаны, картинка получается мутной. В томографии роль «помятостей» играют шумы и несовершенства съёмки. Чтобы объёмная картинка вышла чёткой, алгоритм сборки нужно настраивать.
Оптика2026-04-232 минarXiv:2604.21742экспресс
Лазер, который видит и форму, и состав
Обычный лидар похож на художника, который рисует пейзаж, но видит только серые тени. Он точно измеряет расстояние до каждой точки, но не может сказать, что это: камень, дерево или пластик. Чтобы узнать состав, нужен спектрометр — отдельный прибор, который работает медленно и не поспевает за быстрым сканером. Новая система решает эту проблему иначе.
Медицинская физика2026-04-221 минarXiv:2604.20939экспресс
Рентген учится выбирать ракурсы
Томограф похож на фотографа, который обходит предмет по кругу и делает снимки с разных сторон. Обычно он щёлкает через равные промежутки и тратит на каждый кадр одинаковое количество света. Но если нужно снять быстро и не потратить лишнюю плёнку, приходится выбирать: какие ракурсы важнее и куда направить больше света.