Человеческий слух фокусируется на знакомом, но новая система работает иначе: она ловит любой звуковой всплеск, даже тот, что не встречался ранее. Это аудио диаризация — не просто поиск конкретных шумов, а нарезка всей аудиозаписи на фрагменты, где отмечен момент старта и финиша каждого события. Такой подход не требует списка известных звуков, он похож на чуткого часового, который реагирует на малейшее движение.
Технически метод опирается на ту же идею, что и спектроскопия: сложный звук раскладывается на простые волны, как свет на радужные полосы. Эту возможность два века назад открыл Жозеф Фурье. А энтропия, мера неожиданности, помогает отделить важные сигналы от фона.
Такой «всеслышащий» алгоритм пригодится в умных домах, чтобы заметить сбой техники, или в дикой природе для мониторинга животных. А ещё — это шаг к помощникам для людей с нарушением слуха. Ведь по-настоящему важно не только распознавать привычное, но и вовремя уловить незнакомое.
Даже во сне наш мозг мгновенно реагирует на незнакомые звуки: резкий шорох разбудит быстрее, чем привычный шум. Этот принцип и заложен в новую систему.