Кремниевая сетчатка: нейрон учится видеть как глаз экспресс
Камера смартфона снимает всё подряд, а глаз сразу выделяет главное. Сетчатка не просто передаёт картинку в мозг — она прямо на месте подчёркивает контуры, гасит лишний шум и подстраивается под яркость. Инженеры давно пытаются повторить этот трюк в «умном» железе, чтобы камеры тратили меньше энергии и быстрее принимали решения.
Новый оптический нейрон — крошечный прибор из полупроводника — работает как живая клетка сетчатки. Он превращает свет в последовательность электрических всплесков (спайков): чем ярче свет, тем чаще всплески. Частота меняется от нуля до двух тысяч раз в секунду, а отклик занимает микросекунды — настоящая нейронная скорость. Для сравнения: человеческий глаз реагирует на изменение картинки за 30–60 миллисекунд, то есть в десятки раз медленнее.
Прибор умеет то, что умеет сетчатка: усиливать перепады яркости на границах предметов и подавлять однородный фон — так называемое контрастное окружение. Он различает цвета, имитируя реакцию колбочек, и адаптируется к уровню освещения, чтобы не «ослепнуть» при выходе из тени на солнце. Когда из таких нейронов собрали импульсную нейросеть, она научилась лучше распознавать замаскированные объекты — точность выросла на десятки процентов по сравнению с обычными архитектурами.
Это шаг к камерам, которые видят как глаз: не сливают гигабайты сырого видео, а передают только важные события. Дрон с такой сетчаткой заметит человека в кустах, не тратя энергию на разглядывание неподвижного неба.
Сетчатка лягушки вообще не передаёт в мозг неподвижные объекты — она реагирует только на движение. Описанный нейрон тоже можно настроить на игнорирование статичного фона, экономя ещё больше энергии.
В романе «Ложная слепота» Питера Уоттса вампиры обладают сетчаткой, способной видеть движение с нечеловеческой чёткостью — примерно такую задачу решает импульсная камера на новых нейронах.