Способность получать согласованные результаты при использовании одних и тех же данных и методов.Воспроизводимость — это свойство результата, измерения или вычисления, позволяющее другому человеку получить тот же итог, следуя той же процедуре на тех же входных данных. Это практическая проверка того, является ли утверждение фактом о мире или случайностью конкретной установки. В науке воспроизводимость отличает находку от анекдота: если результат не удаётся воспроизвести, на нём нельзя строить дальнейшее, потому что никто не может сказать, отражает ли он реальность или незамеченную ошибку. Это понятие особенно важно в областях, где результаты получаются через сложные цепочки обработки данных, моделирования или статистического анализа, поскольку каждое звено цепочки — это возможность для ошибки или недокументированного выбора. Воспроизводимость также лежит в основе доверия: рецензенты, читатели и исследователи, использующие результаты дальше, полагаются на неё, решая, какие результаты заслуживают того, чтобы считаться установленным знанием.
Механизм в принципе прост: записать всё необходимое для повторения работы — исходные данные, точные шаги анализа, программное обеспечение и его версию, использованные параметры — а затем поручить кому-то другому (или тому же человеку позже) снова выполнить эти шаги. Если одни и те же входные данные и одни и те же операции дают одни и те же выходные данные, результат воспроизводим. В вычислительной работе это часто означает публикацию кода и данных вместе со статьёй, чтобы анализ можно было перезапустить, а не просто прочитать. Когда результат не воспроизводится, само расхождение информативно: оно указывает на скрытую переменную, ошибку в коде или шаг, который никогда не был полностью описан.
Воспроизводимость — стандартное требование в вычислительной физике, климатическом моделировании и исследованиях машинного обучения, где журналы и финансирующие организации всё чаще просят авторов публиковать код и данные, чтобы опубликованные результаты можно было независимо перезапустить.
Статей пока нет