يستخرج تخطيط التحجم الضوئي عن بعد (rPPG) النبض من فيديو عادي للوجه، لكن تغير لون الجلد الناتج عن النبض ضعيف ويسهل إخفاؤه بالإضاءة والحركة وخصائص الكاميرا. تختلف مجموعات البيانات الحالية في ظروف التسجيل، مما يجعل نقل النماذج بينها مهمة غير بديهية. تُظهر الشبكات العصبية العميقة مثل RhythmFormer دقة عالية، لكن منطقها الداخلي يظل غير شفاف. فسرت الدراسات السابقة سلوك النموذج بصريًا فقط دون التحقق كميًا من أن المناطق المميزة تؤثر فعلاً على التوقع. يقف هذا العمل بجانب الأبحاث حول كشف النوبات عبر تخطيط كهربية الدماغ وتحليل إيقاع القلب، لكنه يتميز بأنه أول من يختبر بشكل منهجي نقل التفسيرات بين مجموعات البيانات وعلاقتها بموثوقية النموذج.
درّب الباحثون ثمانية نماذج مستقلة من RhythmFormer، نموذجًا واحدًا لكل حالة من مجموعة NCKU-rPPG: ثلاثة مستويات إضاءة (40 و200 و700 لوكس)، والكلام، ودوران الرأس، وثلاثة أوضاع للدراجة الثابتة. لكل مقطع فيديو مدته 5.12 ثانية، تم تقييم معدل ضربات القلب. ثم طُبقت على النماذج أربع طرق للتفسير: الانتباه الخام (raw attention)، وattention rollout، وattention flow، وBeyond Intuition. تم تقييم التفسيرات كميًا من حيث تغطية الجلد (نسبة الإسناد التي تقع على قناع الوجه) ومعامل الدقة SaCo الذي يقيس توافق ترتيب أهمية المناطق مع التأثير الفعلي لإخفائها على التوقع. للمقارنة، استُخدمت المجموعة العامة UBFC-rPPG.
أظهرت طريقة Beyond Intuition أعلى تغطية جلد وسيطية وSaCo على مجموعتي البيانات: 0.789 و0.837 على Static level 3 مقابل 0.826 و0.917 على UBFC-rPPG. ومع ذلك، داخل نفس المشارك، لم ترتبط تغطية الجلد ولا SaCo بخطأ معدل النبض أو ارتباط شكل الموجة أو نسبة الإشارة إلى الضوضاء: 186 من أصل 252 معاملًا كانت أقل من |ρ|=0.10، ووصل 28 فقط إلى p<0.05 مقابل 13 متوقعًا عشوائيًا. على مستوى السيناريوهات الثمانية، فقط تغطية الجلد بطريقة Beyond Intuition تبعَت مؤشرات الجودة: ρ=−0.43 للخطأ، و+0.57 لارتباط الموجة، و+0.43 لنسبة الإشارة إلى الضوضاء. تدهورت طريقة Beyond Intuition بشكل حاد عند 40 لوكس: انخفضت التغطية الوسيطية إلى 0.180 وSaCo الوسيطي إلى −0.178، بينما أدت الحركة إلى تفاقم التقييمات أكثر ولكن دون هذا الانهيار في التفسيرات.
يختلف هذا العمل عن الأبحاث المجاورة في أنه بدلاً من التقييم البصري للخرائط الحرارية، يقدم مقاييس كمية ويختبر انتقالها بين مجموعات البيانات. يُظهر أن تغطية الجلد وSaCo تحملان معلومات مكملة لمقاييس الدقة، لكنها ليست بديلاً عنها. الإسناد إلى الجلد لا يضمن تقييمًا دقيقًا للنبض. هذا يوضح تفسير التفسيرات في مهام المراقبة الفسيولوجية ويؤكد الحاجة إلى الحذر عند استخدام الذكاء الاصطناعي القابل للتفسير (XAI) كمؤشر على الموثوقية.
يمكن تطوير الموضوع باختبار نفس الطرق على بنى أخرى للشبكات العصبية، لأن جميع الاستنتاجات مبنية على RhythmFormer فقط. إعادة التدريب ببذور عشوائية مختلفة ومقارنة النماذج المدربة على ظروف مجمعة ستساعد في فصل تأثيرات الظروف عن العشوائية. من المهم أيضًا توحيد دقة التفسيرات المكانية وقياس تسرب الانتباه متعدد القفزات على Static level 3 مباشرة.
ستؤثر النتائج على تطوير أنظمة المراقبة عن بعد لإيقاع القلب، خاصة في التطبيقات السريرية حيث تكون قابلية التفسير مهمة. كما ستضع معيارًا للتقييم الكمي للتفسيرات في الرؤية الحاسوبية للإشارات الفسيولوجية.
إعادة التدريب بعدة بذور عشوائية واختبار نقل التفسيرات إلى بنى أخرى. إجراء تجارب مضبوطة بنفس المعالجة المسبقة على NCKU-rPPG وUBFC-rPPG للتحقق المباشر من النقل.
يرتبط العمل مباشرة بالمشكلة غير المحلولة المتعلقة بقابلية تفسير الشبكات العصبية العميقة في التصوير الطبي: كيف نميز التفسيرات المعقولة عن الصحيحة فعلاً؟ كما يتناول مسألة موثوقية النماذج عند تغير ظروف التسجيل، وهو أمر حاسم لنقل النتائج المخبرية إلى الممارسة السريرية الحقيقية.
هذا القسم موجَّه إلى مؤلف العمل وزملائه. الأعمال المجاورة عثر عليها بحثٌ دلالي في أرشيفنا، لا بتطابق الكلمات. نحن لا نقيّم العمل: نعرض الحقل من حوله.
ماذا يفعل هذا العمل
درّب المؤلفون ثماني نماذج من نوع RhythmFormer على سيناريوهات NCKU-rPPG وطبّقوا أربع طرق للتفسير، مع تقييم تغطية الجلد ومعامل الدقة SaCo. كما تحققوا من إمكانية نقل التفسيرات إلى UBFC-rPPG وعلاقتها بخطأ النبض على مستوى المشاركين والسيناريوهات.
أين تكمن قوته
لأول مرة يتم التحقق كمياً من نقل التفسيرات بين مجموعات البيانات وربطها بمقاييس الدقة، وليس فقط عبر التقييم البصري للخرائط الحرارية.
إلى أين يمكن المضي
يستحق التجربة
لماذا قد يكون هذا مهمًا
إذا أمكن نقل التفسيرات بين مجموعات البيانات وربطها بالموثوقية، فإن ذلك يوفر أداة لمراقبة أنظمة rPPG في الظروف الواقعية حيث قد تكون الأخطاء خطيرة.
أعمال قريبة في أرشيفنا
الأرشيف خالٍ حول هذا العمل: أقرب تحليل عند 0.55 فقط، مقابل 0.64 المعتادة. يبدو أن الحفر بجواره كان نادرًا.
عند الإضاءة الخافتة جدًا (40 لوكس)، توقف نموذج Beyond Intuition عن التركيز على الجلد، وأصبحت تفسيراته أسوأ من العشوائية. في حين أن الحركة، التي أدت إلى تدهور أكبر في دقة النبض، لم تسبب مثل هذا الخلل في التفسيرات.
فكرة قراءة النبض من الوجه دون لمس تذكرنا بالماسحات الطبية في الخيال العلمي، مثل جهاز tricorder من "ستار تريك" الذي يقيم العلامات الحيوية عن بعد. كما أن مسألة ما إذا كان يمكن الوثوق بتفسيرات الذكاء الاصطناعي تثار في مسلسل "ويست وورلد"، حيث يظل سلوك الذكاء الاصطناعي غير شفاف لمبتكريه.