مبدأ

مبدأ الإنتروبيا القصوى

The maximum entropy principle asserts that the probability distribution which best represents the current state of knowledge is the one with the largest entropy.
19 مقالات ذات صلة · 2 من عمل هنا

الوصف

في عام 1957، نشر الفيزيائي الأمريكي إدوين جاينز مقالةً قلبت النظرة إلى الترموديناميك. أظهر أن الفيزياء الإحصائية المتوازنة يمكن استنتاجها من وصفة واحدة: تعظيم إنتروبيا شانون تحت قيود مفروضة بالكميات العيانية (macroscopic quantities) المعروفة. الإنتروبيا (entropy) هي مقياس لعدم اليقين، طرحها كلود شانون عام 1948 لنظرية الاتصال. لاحظ جاينز: إن كنا لا نعرف سوى متوسط الطاقة ولا شيء غيره، فإن أكثر التوزيعات تواضعاً وأقلها تحكماً هو توزيع بولتزمان (Boltzmann distribution). احتضن المبدأ كلاً من الإحصاء الكمومي والكلاسيكي. واليوم تجاوز الفيزياء بكثير: من التعلم الآلي وعلم الأعصاب إلى توزيع الموارد في الشبكات وتوليف الفراء الواقعي في التحريك (animation).

التاريخ

في عام 1948، طرح كلود شانون الإنتروبيا كمقياس للمعلومات. وفي عام 1957، أظهر إدوين جاينز في مقالته 'نظرية المعلومات والميكانيكا الإحصائية' (Information Theory and Statistical Mechanics) أن تعظيم إنتروبيا شانون تحت قيود الكميات العيانية المعروفة يُنتج تلقائياً توزيعات الفيزياء الإحصائية. انتشر المبدأ في نظرية الاحتمالات، والإحصاء، وعلوم الحاسوب، وكذلك في معالجة الإشارات ونمذجة المناخ. وبشكل مستقل، طور ليون بريليون (Leon Brillouin) أفكاراً مشابهة.

كيف يعمل

يسمح المبدأ بالحصول على نماذج احتمالية من معلومات غير كاملة. عملياً، تُحل مشكلة تحسين مشروط: تعظيم الإنتروبيا تحت قيود ممثلة بمتوسطات دوال معينة. يُطبق في التعرف على الكلام، والرؤية الحاسوبية، واستعادة الصور المقطعية، كما في بناء التنبؤات الجوية. حدوده: إن كانت القيود ناقصة أو سيئة الصياغة، فقد يُنتج المبدأ توزيعات خاطئة؛ بالإضافة إلى أنه يفترض أن الإنتروبيا تعكس عدم اليقين بشكل كافٍ.

في التطبيق

يُستخدم مبدأ الإنتروبيا القصوى لاستعادة صور الدماغ المقطعية (tomographic scans) من بيانات غير مكتملة، ولبناء تنبؤات الطقس ونماذج المناخ، ولتوليف الأنسجة (textures) في الرسوميات الحاسوبية، كما يُشكل أساس خوارزميات ضغط الصور والفيديو.

حقيقة طريفة

بفضل مبدأ الإنتروبيا القصوى، تحول برامج نقل الأسلوب (style transfer) الصورة الفوتوغرافية إلى لوحة بأسلوب فان غوخ. تبحث الخوارزمية عن نسيج ذي إنتروبيا قصوى يشبه ضربات ريشة الفنان، وتُطبق هذا 'الاضطراب' على الصورة.

مقالات ذات صلة · 25

الفوضى في الكيمياء: كيف يكشف فقدان المعلومات عن إنتروبيا كولموغوروف–سيناي
اكتب الوصفة، ثم راجعها بعد ساعة: إن انحرفت النسب ولو بغرام واحد، ضاع الطعم. وهكذا تقريبًا تسلك التفاعلات الكيميائية في الأنظمة المفتوحة: أدنى فرق في التراكيز الابتدائية يكبر مع الزمن ليُفضي إلى حالات مختلفة تمامًا. هذه هي الفوضى، وهي في الأنبوب المخبري تبدو كتقلبات غير متوقعة في اللون أو درجة الحرارة.
قياس الفوضى دون إتلاف نسخ إضافية
الحالة الكمومية مثل الطقس في الجبال: تتغير من نظرة إلى أخرى. لتقدير عدم يقينها، يصنع الفيزيائيون نسخًا ويجرون قياسات. كل نسخة هي مقياس حرارة ينكسر بعد الاستخدام. السؤال: كم عدد موازين الحرارة اللازمة لمعرفة درجة الحرارة بالدقة المطلوبة؟ في السابق، كانت الإجابات متباينة. قال المنظرون: «لا يمكن أن يكون أقل من كذا».
سر العودة السريعة: طريقة جديدة لتقييم الاستقرار
النظام المستقر يعمل مثل كرة في وعاء: دفعة – وتتدحرج عائدة إلى القاع. انتشار المسارات المحتملة – عدم اليقين – يتقلص مع مرور الوقت. لكن السرعة تعتمد على ميل الجدران. في الأنظمة المعقدة، يكون لهذا 'الوعاء' مناطق مختلفة الانحدار. في السابق، كان وقت العودة يُقدر بناءً على أقل المناطق انحداراً – وهو إجراء احترازي يبالغ في تقدير الوقت.
طهي بلا تأخير: كيف تكتسب الشبكات موثوقية فائقة
تخيّل طاهيًا محترفًا في ساعة الذروة: فجأة يتعطل الموقد أو ينفد مكوّن رئيسي. بدلًا من الذعر، يعيد فورًا ترتيب الوصفات — يسرّع طهي بعض الأطباق، ويبطئ أخرى، معيدًا توزيع الموارد أثناء العمل. هذا المبدأ في التكيف الديناميكي هو أساس الجيل الجديد من الشبكات فائقة الموثوقية. تُقسَّم البيانات فيها إلى كتل قصيرة وتُوجَّه عبر مسارات مثلى، وتصبح العملة الرئيسية هي زمن الإرسال — التأخير (latency).
كيف تساعد الإنتروبيا الروبوتات في إيجاد الطريق أسرع
تمشط مجموعة بحثية حقلًا ضبابيًا. في البداية ينتشر الأفراد على نطاق واسع: "درجة حرارة" البحث المرتفعة تعني تنوعًا كبيرًا في المحاولات. وعند اكتشاف أثر، يتقاربون. لكن سرعة التقارب حاسمة — فتضييق الدائرة مبكرًا قد يجعل أفضل اكتشاف بعيدًا عنهم. يقيّم المنسق تشتت الباحثين ويصدر أوامره بالتسريع أو الإبطاء. في الروبوتيات، تعمل الإنتروبيا كمنسق — إنها مقياس لعدم اليقين والتنوع.
كيف يولد الفوضى الكمومية التوازن الحراري
قطعة السكر الملقاة في الشاي تذوب، وسرعان ما يصبح السائل كله حلوًا بنفس القدر. هذا الطريق إلى التوازن مألوف لدرجة أنه يبدو بديهيًا. لكن إذا نظرنا إلى عالم الذرات، حيث يخضع كل شيء لميكانيكا الكم، تتشوش الصورة: تهتز الجسيمات بشكل متشابك، والحرارة والبرودة مجرد إحساسات متوسطة من مليارات الحركات الفردية.
كيف يساعدك تحيز التأكيد على التفكير بشكل أسرع
اعتدنا أن نعتقد أن ملاحظة تأكيدات تخميناتنا فقط هي خطأ. لكن حسابات حديثة مستوحاة من سلوك الموجات تقلب هذه النظرة. اتضح أن عادة البحث عن المألوف هي أفضل وسيلة لتقليل الضجيج المعلوماتي (يسميه العلماء الإنتروبيا). وقد أوضح جون فون نيومان أن الاحتمالات قد تتصرف لا كنسب مئوية، بل كموجات متداخلة.
ست قواعد لنظام حي
الحياة رقصة مستمرة بين النظام والفوضى. ففي منتصف القرن الماضي، لاحظ إرفين شرودنغر أن الكائن الحي لا يتغذى على المادة بقدر ما يتغذى على «الإنتروبيا السلبية» الإنتروبيا — أي القدرة على الحفاظ على انتظامه من خلال زيادة الفوضى حوله.
لغز الفوضى: لماذا تلتزم الإنتروبيا بقواعد صارمة
الإنتروبيا هي مقياس للفوضى. مجموعتان من أوراق اللعب المخلوطة، إذا سُكِبَتا في كومة واحدة، لن تصبحا أكثر فوضوية من مجموع فوضاهما المنفصلتين. هذه هي قاعدة الجمعية التحتية: الكل ليس أكثر فوضوية من أجزائه. وإذا أضفت بطاقة الجوكر، فإنها تُحدث اضطراباً أكبر في المجموعة المخلوطة سلفاً مقارنة بالمجموعة المرتبة - هذه هي الفوقية التركيبية، حيث يتفاعل النظام بحدة أكبر مع الجديد كلما كان 'ممزوجاً' أكثر.
كيف تقيس الفوضى في نظام دون معرفة قوانينه
تقاطع مزدحم بلا إشارة مرور. سيارات تتحرك، تتوقف، تغير مسارها — ومن الخارج يبدو أن الفوضى تسود. لكن إذا راقبت لفترة أطول، يمكنك ملاحظة إيقاع: التدفق يزداد تارة ويقل تارة أخرى. في الفيزياء، يُسمى هذا الإيقاع للاضطراب الإنتروبيا — وهي تُظهر مدى بُعد النظام عن التوازن الهادئ، مثل الماء في غلاية تغلي.
كيف نستخرج قوانين الطبيعة من الضوضاء
تسجيل من مسجّل صوتي في ساحة مدينة. يُسمع همهمة الحشد، وخطوات الأقدام، ومقاطع من أحاديث، وضجيج السيارات. وفي مكان ما وسط هذه الفوضى الصوتية، يعزف موسيقي الشارع لحنًا بسيطًا على الناي. ليس من السهل سماعه، فثمة الكثير من الأصوات المختلطة. تقريبًا هذه هي المهمة التي تحلها خوارزمية جديدة باسم Edwin (ضغط إنتروبيا قصوى مع اكتشاف نماذج غير خطية قابلة للتفسير).
منظم حرارة يعشق لصق الاحتمالات
قدر الماء على الموقد يهدأ عاجلاً أم آجلاً: تتساوى درجة الحرارة، ويتوقف السائل عن الغليان. يسمي الفيزيائيون هذا بالتوازن الحراري (thermal equilibrium) — وهي حالة تتوزع فيها الطاقة بالطريقة الأكثر احتمالاً. منذ مئة عام، اشتُقّت قاعدة بسيطة لمثل هذا السكون: كل حصة من الطاقة تصل إلى الجسيمات بشكل مستقل، مثل تذاكر اليانصيب.
عندما يلد الفوضى النظام
لنفترض أننا نضع حفنة من العملات المعدنية على الطاولة. كل عملة تمثل نتيجة محتملة: صورة، كتابة، أو شيء آخر. إذا عرفنا مدى فوضوية هذه المجموعة (إنتروبياها)، فما التوليفات الاحتمالية التي ستظهر أكثر؟ اتضح أن الإجابة تعتمد على مقدار الفوضى التي سمحنا بها. الإنتروبيا هنا ليست مجرد مقياس للاضطراب، بل طريقة لقول كم عدد الخيارات المختلفة التي لا يزال من الممكن تحقيقها.
عوالم شبه متعامدة
ألقِ على الطاولة عشر عملات معدنية. عدد توافيق الصورة والكتابة سيتجاوز الألف بقليل. لعشرين عملة — يصبح المليون. العدد ينمو بمعدل 2 مرفوعًا لأس عدد العملات، وهذا سريع. لكن الأنظمة الكمومية أغنى بكثير. كل جسيم هنا ليس عملة بوجهين، بل سهمًا قادرًا على الإشارة في أي اتجاه. للسهم الواحد اتجاهات كثيرة، وعندما يكون عدد الجسيمات N، فإن العدد الإجمالي للاتجاهات المستقلة يساوي q مرفوعًا للأس N.
الوعي كخلل في منظم الحرارة
يحافظ منظم الحرارة على درجة حرارة الغرفة عند 20 درجة. افتح النافذة في الشتاء – سيشغل التدفئة ليعيد التوازن. الدماغ يفعل شيئًا مشابهًا: فهو يتنبأ باستمرار بما سيحدث بعد لحظة، ويصحح نفسه إذا أخطأ. هكذا يتعلم. لكن أين مكان الوعي في هذه الآلية – إحساس طعم التفاحة أو ألم الحرق؟ نظريتان نظرتا إلى هذا من جانبين مختلفين.
بصريات2026-04-171 دarXiv:2604.16692سريع
الجزيئات تنتظم في صفوف: كيف نرى ترتيبها الحقيقي
الغشاء الرقيق لخلية شمسية أو شاشة يشبه حشدًا كثيفًا في ساحة: كل شخص متجه في اتجاه معين، ومن اتجاه نظر الجميع يعتمد ما إذا كان الضوء سيعبر الحشد أو يعلق فيه. في الإلكترونيات العضوية، تلعب الجزيئات دور المارة. حتى الآن، كانت الأجهزة قادرة على قياس الاتجاه العام للحشد فقط — متوسط ميل الرؤوس ومدى التشتت.
كيف يتحول البروتون الكمومي إلى سائل ساخن
في مصادم الهادرونات الكبير، لا تتصادم الأنوية فحسب، بل أيضًا البروتونات المنفردة. حتى في مثل هذه الأنظمة الصغيرة، تُلاحظ سلوكيات جماعية تشبه تدفق السوائل. لكن البروتون جسم كمومي، حالته توصف بالدالة الموجية، وليس بدرجة الحرارة والضغط.
لماذا يزداد وزن الماء عند 4 درجات؟
الماء هو السائل الشائع الوحيد الذي لا ينكمش فورًا عند التبريد. يذوب الجليد فيزداد الماء كثافة، لكن فقط حتى 4 درجات مئوية. بعد ذلك، مع مزيد من التبريد، يتمدد مرة أخرى. هذا السلوك الغريب يفسر كيف تبقى الأسماك حية في البرك المتجمدة: الماء الأكثر كثافة يغوص إلى القاع، بينما تبقى الطبقة الباردة الأخف في الأعلى، وتتحول إلى جليد.
الوثبة الكمومية نحو السكون
في العالم الكمومي، يشبه الطريق إلى السكون أحيانًا سباقًا متناقضًا: عند الانطلاق من نقطة أبعد عن خط النهاية، يصل النظام إلى التوازن بسرعة أكبر. يعود هذا التأثير، وهو النظير الكمومي لظاهرة مبيمبا، إلى النمو المتسارع لـ الإنتروبيا — مقياس الفوضى. فالتغيير القوي في البداية يشبه إطلاق سيل من التغيرات، مما يُسرّع الوصول إلى الهدوء.
لماذا لا يستطيع العصبون أن يصادق الجميع
يشبه العصبون في الدماغ شخصًا يوزع بطاقاته الشخصية في مؤتمر مزدحم. في البداية يتعرف بسهولة، لكن مع امتلاء دفتر العناوين، يتطلب كل اتصال جديد جهدًا أكبر — إذ يتبقى القليل من المساحة الفارغة. هذه القاعدة الخاصة بـ«الازدحام» جعلها المؤلفون أساس النموذج: كلما زادت الروابط الواردة لدى العصبون، زادت صعوبة تكوين رابط إضافي.
وصفة كمومية للمزج المثالي: طيف التشابك في الأنظمة الفوضوية
حدد الفيزيائيون قوانين كمية دقيقة تحكم نمو التشابك الكمومي في الأنظمة الفوضوية. في نموذج نظري يخضع فيه النظام لنَبضات دورية — مثلما يعجن الطاهي العجين بإيقاع منتظم — تتبع الباحثون تطور إنتروبيا التشابك، وهو مقياس الاضطراب الكمومي.
لماذا بعض الدوامات قابلة للتنبؤ والبعض الآخر ليس كذلك
في التدفق المضطرب — كما في النهر الجارف — تنتقل الطاقة باستمرار من الدوامات الكبيرة إلى الصغيرة. أحيانًا تنشأ ارتفاعات قوية بشكل خاص، تشبه الضربات المفاجئة للموجة على الشاطئ. تساءل العلماء: هل يمكن معرفة مسبقًا متى ستضرب مثل هذه «الموجة»؟ اتضح أن الإجابة تعتمد على نوع الدوامات الموجودة في التدفق في تلك اللحظة.
كيف تختار أفضل نموذج دون تخمين؟
لفهم آلية عمل جهاز ما، يجب تحريكه. الطفل الذي يفكك منبهًا لا يكتفي بالنظر إلى التروس، بل يدير العجلة ويستمع إلى تغير صوت التكتكة. وكذلك العلماء: بدلاً من الملاحظة السلبية، يرسلون إشارات مختارة بعناية إلى مدخلات النظام ويراقبون الاستجابة. في الدراسة الجديدة، اقترح الباحثون طريقة تختار تلقائيًا الإشارة الأكثر "خبثًا" — تلك التي تؤدي إلى أكبر تباين في توقعات النماذج المختلفة حول النظام.
الإنتروبيا مصدرًا للجسيمات: من البتات إلى المادة
في عام 1989، صاغ جون ويلر فكرة جريئة: «it from bit» — كل شيء موجود من المعلومات. لفترة طويلة، بقيت هذه الفكرة استعارة جميلة، لكن الفيزيائيين الآن وجدوا آلية ملموسة تحول البتات إلى جسيمات. اتضح أن إنتروبيا التشابك، وهي مقياس الترابط الكمي، يمكن أن تلعب دور القائد الذي يوجه نشوء المادة. نموذج المرآة المتحركة، وهو حدود تحاكي أفق الحدث، سمح باشتقاق صيغ صريحة.
ممحاة تمسح الماضي: كيف تولد المعلومات الكمومية اللارجعة
ترتطم موجة بالرمال، تاركة نمطًا من الزبد والأصداف. بعد لحظة تتراجع، لكن الآثار لم تعد كما كانت: الرمال انماعت، والأصداف انقلبت. شيء مشابه يحدث في العالم الكمومي عندما ينتقل نظام من حالة غير متوازنة إلى التوازن. ينص القانون الثاني للديناميكا الحرارية على أن إنتروبيا نظام معزول لا تتناقص، لكن لماذا يحدث ذلك ظل لغزًا لأكثر من مئة عام.