Совокупность точек данных, используемая для обучения или тестирования моделей.Набор данных — это структурированная совокупность точек данных, каждая из которых представляет отдельное наблюдение или пример, используемая для обучения или тестирования моделей машинного обучения. В физике и материаловедении наборы данных являются сырьём, из которого модели извлекают закономерности — например, сопоставляя молекулярные структуры с их свойствами или предсказывая результаты столкновений частиц. Качество, размер и разнообразие набора данных напрямую определяют, чему модель может научиться и насколько хорошо она обобщает на новые, ранее не встречавшиеся случаи.
Концепция набора данных как формального объекта возникла с развитием статистики и машинного обучения в середине XX века. В физике практика обмена большими экспериментальными наборами данных стала распространённой благодаря крупным коллаборациям, таким как проект «Геном человека» (1990-е годы), а позднее — с открытыми публикациями данных ЦЕРН и астрономических обзоров.
Наборы данных обычно организованы в виде таблиц или массивов, где каждая строка — это образец, а каждый столбец — признак (вход) или метка (выход). Для обучения модель получает множество примеров и корректирует свои внутренние параметры, чтобы минимизировать разницу между своими предсказаниями и истинными метками. Отдельный тестовый набор, не использовавшийся при обучении, применяется для оценки производительности. В физике наборы данных часто получают из симуляций, экспериментов или тщательно отобранной литературы, и они могут включать неопределённости или физические ограничения.
Наборы данных питают модели машинного обучения, используемые для предсказания свойств материалов, ускорения симуляций, классификации астрономических объектов и анализа данных о столкновениях частиц, как подчёркивается в приведённых заголовках статей.
Качество набора данных часто важнее его размера: небольшой, тщательно подобранный набор с точными метками может превзойти большой, но зашумлённый, как подчёркивается в статье «Твердотельные батареи: ключ к успеху — не объём данных, а их качество».











