Камеры беспилотного автомобиля улавливают свет, словно телескопы, направленные на далёкую галактику. Каждый кадр — отрывочное наблюдение; вместе они должны сложиться в карту пути.
Компьютер, подобно астроному, не склеивает снимки, а генерирует несколько возможных видов сверху и сравнивает их с реальными данными. Лучший вариант выбирается по энтропии — мере неуверенности, которая падает, когда чертёж совпадает с действительностью. Отдельные кадры обрабатываются как в фотометрии, где по яркости и тени восстанавливают облик объекта. А сам подход «смотреть в разное время» прямо заимствован из транзитного метода поиска экзопланет: там учёные замечают миры по мельчайшим колебаниям света звезды.
В итоге беспилотник получает чёткую схему, не боящуюся ни дождя, ни грязи. Испытания подтвердили: метод точнее прежних находит полосы и строит безопасный маршрут.
В природе идею «вида сверху» используют хищные птицы: сокол-сапсан замечает добычу с высоты многоэтажки благодаря тому, что его мозг моментально склеивает картинку с двух глаз в объёмную картину.
В фильме «Из машины» андроид за рулём полагается только на датчики, не строя карту. Сегодняшние алгоритмы делают именно это — превращают разрозненные сигналы в целостную схему для серийных авто.