Современные системы машинного зрения обретают автономность: инженерам удалось реализовать алгоритм распознавания образов непосредственно на миниатюрном чипе, избавив камеру от необходимости передавать данные на громоздкий компьютер. Принцип работы напоминает стратегию телескопа, охотящегося за экзопланетами: вместо пассивного сканирования всего поля зрения камера избирательно фокусируется на значимых объектах — движущихся целях, контурах, лицах. Ключевой элемент обработки — свёртка, математическая операция, лежащая в основе свёрточных нейросетей. Представьте трафарет, который вы накладываете на фотографию: он не просто выделяет края, а вычисляет, насколько каждый фрагмент изображения похож на искомый шаблон — будь то вертикальная линия или дуга. Этот «трафарет» (фильтр свёртки) скользит по кадру, перемножая свои значения с яркостями пикселей и суммируя результат, создавая карту признаков. Такая аппаратная реализация позволяет обойти традиционный этап разложения цветного изображения на отдельные цветовые слои, который требует последовательной обработки и замедляет конвейер. В результате энергопотребление падает втрое, а потеря точности распознавания составляет лишь 5% — компромисс, оправданный для мобильных устройств. Специализированный процессор, архитектура которого заточена исключительно под задачи компьютерного зрения, достигает скорости 34 кадра в секунду — это быстрее, чем длится одно моргание человека (около 100–150 миллисекунд). Энергозатраты на обработку одного кадра сопоставимы с одиночным кликом компьютерной мыши, что открывает путь к принципиально новым сценариям: дронам, способным часами патрулировать территорию без подзарядки, и роботам, реагирующим на изменения среды с минимальной задержкой.
Один кадр обрабатывается за 29 миллисекунд — это втрое быстрее, чем длится моргание (100–150 миллисекунд).
Словно миниатюрный Джарвис, этот чип распознаёт объекты в реальном времени, умещаясь в корпусе с почтовую марку и тратя энергии не больше, чем мигающая лампочка.