النسيان اللغوي للشبكات العصبية: يوجد حل! سريع

الأصل: "Unified Gradient Projection: Language-Balanced Continual Learning for Multilingual Low-Resource ASR"
arXiv:2607.11163 · 2026-07-13 · CC BY 4.0 · 1 دقيقة
تساعد طريقة UGP نماذج التعرف على الكلام في تعلم اللغات النادرة دون نسيان القديمة.

شبكة عصبية كبيرة مثل Whisper تتقن مئات اللغات وتشبه النموذج المعياري للكون: كل شيء متوازن. لكن تدريبها على لغة نادرة يخل بالتوازن – تتحول اللغة إلى ثقب أسود يجذب كل موارد التدريب. تبدأ الشبكة في نسيان باقي اللغات.

طريقة الإسقاط التدريجي الموحد (UGP) تمنع الاختلال. تعمل كـ مجال جاذبية يوزع 'الانتباه' بالتساوي بين اللغات. لا تنحرف التدرجات – اتجاهات ضبط الشبكة – لصالح لغة واحدة، ويبقى انحناء الزمكان للمعرفة متجانسًا. إنتروبيا النسيان – مقياس الفوضى – تسعى إلى الصفر.

من المدهش أن الدماغ البشري يحل مهمة مماثلة أثناء النوم: فبمعالجة تجارب اليوم، يعزز جميع الذكريات بالتساوي كي لا يضيع شيء. تفعل UGP للشبكات العصبية ما يفعله النوم للبشر.

يمكن للدماغ البشري عند تعلم لغة جديدة أن 'يوقف' اللغة القديمة مؤقتًا – وهذا يُعرف بالتداخل اللغوي. تعاني الشبكات العصبية من تأثير مشابه، لكنها على عكسنا، تنسى إلى الأبد بدون طرق خاصة.

المساعد المثالي C-3PO من 'حرب النجوم' يعرف ملايين اللغات ولا يخلط بينها أبدًا – ربما يكون مزودًا بنظام مماثل لـ UGP.

العلماء
Jacob BekensteinStephen HawkingBernhard RiemannJoseph WeberKarl SchwarzschildKip Thorne
المفاهيم
التعلم ذاتي الإشراف (Self-Supervised Learning) التعرف على الكلام التعلم بإشراف ضعيف إكس جي بوست نماذج اللغة الكبيرة اكتساب اللغة العصبي خوارزمية جينية تعميم وحدة معالجة الرسوميات معالجة اللغة الطبيعية الشبكات العصبية للتعلم التنبؤي الشبكات التوليدية التنافسية التقارب المنتظم (uniform convergence)