مخطط القلب ليس مجرد خط متموج على الورق. فيه، كما في مذكرات شخصية، تُسجَّل حالة القلب بأكملها: النظم، وسماكة الجدران، وإشارات إلى مشاكل مستقبلية. لكن البرامج التي تتعلم قراءة هذه المذكرات تُدرَّب حاليًا على مهام ضيقة جدًا — بشكل أساسي على البحث عن اضطرابات النظم. هذا مثل تعليم شخص فهم كتاب من خلال إظهار قائمة الأخطاء المطبعية فقط.
قرر مؤلفو الدراسة التحقق من مدى إنصاف تقييم هذه البرامج. أخذوا خمسة أساليب شائعة للتعلم واختبروها عبر ستة امتحانات مختلفة: ثلاثة قياسية (تلك التي تبحث عن اضطرابات النظم)، وثلاثة جديدة — البحث عن أمراض القلب الهيكلية، وتقييم الضغط داخل القلب، والتنبؤ بحالة المريض في المستقبل. اتضح أن الجميع يظهرون نتائج جيدة في الامتحانات القديمة، لكن الصورة تتغير في الجديدة. علاوة على ذلك، تبين أن مجموعة أرقام عشوائية لم تتعلم إطلاقًا، تؤدي في العديد من المهام أداءً لا يقل عن الخوارزميات المدربة. هذا مثل شخص لا يعرف اللغة يخمن معنى كتاب من غلافه — ويصيب في كثير من الأحيان مثل الخبير.
ما الذي يقترحه المؤلفون؟ أولاً، توسيع قائمة المهام: إضافة البحث عن التغيرات الهيكلية في القلب (مثل سماكة الجدران) والتنبؤ بما سيحدث للمريض مع مرور الوقت. ثانيًا، مقارنة النتيجة دائمًا مع "متعلم" عشوائي بسيط. إذا لم تتفوق البرامج الذكية على المجموعة الفارغة، فإن نجاحها لا يعني شيئًا. هذا مثل الرياضة: لا يُحتسب الرقم القياسي إلا إذا تم كسر نتيجة مبتدئ.
هذا النهج قد يغير المجال بأكمله: بدلاً من السباق وراء أرقام جميلة في اختبارات ضيقة، سيبدأ العلماء في حل المشكلات المهمة حقًا للأطباء والمرضى. مخطط القلب مصدر معلومات ثمين جدًا لإهداره في تخمين الأخطاء المطبعية.
كما كتبه المؤلفون، بالإنجليزية arXiv:2602.17531
This position paper argues that current benchmarking practice in 12-lead ECG representation learning must be fixed to ensure progress is reliable and aligned with clinically meaningful objectives. The field has largely converged on three public multi-label benchmarks (PTB-XL, CPSC2018, CSN) dominated by arrhythmia and waveform-morphology labels, even though the ECG is known to encode substantially broader clinical information. We argue that downstream evaluation should expand to include an assessment of structural heart disease and patient-level forecasting, in addition to other evolving ECG-related endpoints, as relevant clinical targets. Next, we outline evaluation best practices for multi-label, imbalanced settings, and show that when they are applied, the literature's current conclusion about which representations perform best is altered. Furthermore, we demonstrate the surprising result that a randomly initialized encoder with linear evaluation matches state-of-the-art pre-training on many tasks. This motivates the use of a random encoder as a reasonable baseline model. We substantiate our observations with an empirical evaluation of five representative ECG pre-training approaches across six evaluation settings: the three standard benchmarks, a structural disease dataset, hemodynamic inference, and patient forecasting.
مجموعة أرقام عشوائية لم ترَ أي مخطط قلب على الإطلاق، تظهر في بعض المهام الطبية نتائج لا تقل عن الخوارزميات المدربة على آلاف التسجيلات.