كيف تخلصت الشبكة العصبية المولدة للأصوات من وزنها الزائد سريع
الشبكة العصبية التي تولد الأصوات من النصوص تشبه مطبخاً يحضّر فيه عشرات الطهاة كل «طبق». كثير منهم لا يضيفون شيئاً سوى الإشارات الخاطئة وإهدار الموارد. أجرى العلماء مراجعة: باستخدام مطيافية (تحليل طيف المعلمات) حددوا من هو ضروري حقاً، واستغنوا عن الزائدين — بإزالة الوصلات غير المفيدة. بعد هذا التنظيف، تخلص النموذج من 83% من معلماته وأصبح يعمل أسرع بنسبة 39%. جودة الصوت لم تنخفض لأغلب الاستفسارات، بل تحسّنت لبعض الجرسات الصوتية. لكن أصوات الطلقات النارية وصفارات الإنذار وآلات الحفر عانت في البداية — كما لو أن المطبخ فقد فجأة أدواته المعتادة.
في النهاية، النسخة المخففة لا تقل كفاءة عن النموذج الأصلي. النموذج المخفف يتطلب حسابات وطاقة أقل، لذا يمكن تشغيله مباشرة على الهاتف الذكي دون الحاجة إلى سحابة. بإزالة الصابورة، نخفض فعلياً الإنتروبيا (مقياس الفوضى) لنظام، تاركين كفاءة نقية. الشبكات العصبية الخفيفة ستفتح الباب لذكاء اصطناعي واسع الانتشار لا يعتمد على خوادم قوية.
غالباً ما تحمل الشبكات العصبية صابورة: فشبكة ResNet-50 الشهيرة يمكن تقليمها بنسبة 90% دون فقدان الدقة.