آخر تحديث: 2026-06-22

حجم الدُّفعة الفعلي

حجم الدُّفعة الفعلي هو عدد أمثلة التدريب المسهِمة في تحديث محسِّن واحد. على جهاز واحد يساوي الدُّفعة الصغرى، لكن التدريب الموزَّع ينشر العمل عبر مسرّعات كثيرة وكثيرًا ما يجمع عدة مرورات قبل كل تغيير للأوزان، فقد تكون الدُّفعة الشاملة التي يراها المحسِّن فعلًا أكبر بمئات المرات مما يتسع على رقاقة واحدة. تعيد هذه الحاسبة بناء ذلك الرقم الشامل، والرموز التي يمثّلها، من المضاعِفات الثلاثة التي تنتجه.

لماذا تهم الدُّفعة الشاملة

تكاد كل جداول معدل التعلّم وأطوال الإحماء ونتائج التقارب في الأدبيات تُذكَر بدلالة الدُّفعة الشاملة لا الدُّفعة الصغرى لكل جهاز. والفريق الذي يتوسّع من 8 إلى 64 جهازًا دون إعادة حساب الدُّفعة الفعلية يغيّر ديناميكيات التحسين صامتًا — فالكود نفسه يخطو الآن خطوة أكبر بثمانية أمثال لكل تحديث — وقد يتباعد أو يتجمّد. فمعرفة الدُّفعة الفعلية شرط مسبق لضبط معدل التعلّم أو إعادة إنتاج وصفة منشورة أو مقارنة جولتين على حجمي عنقود مختلفين.

الصيغة

تتضاعف ثلاثة عوامل مستقلة معًا. عند وجود دُفعة صغرى لكل جهاز $b$، وعدد نسخ متوازية بيانيًا $d$، وخطوات تراكم تدرّج $a$، تكون الدُّفعة الفعلية $B$ والرموز لكل خطوة محسِّن $T$ عند طول تسلسل $L$

تعالج كل نسخة متوازية بيانيًا دُفعتها الصغرى وتُمتوسَط التدرجات، فتضرب النسخ الدُّفعة. ويجمع التراكم $a$ مرورًا متتاليًا قبل تحديث واحد، فيضربها مجددًا. وعدد الرموز هو ببساطة عدد التسلسلات مضروبًا في طول كل تسلسل.

مثال محلول

لنأخذ دُفعة صغرى من 8 تسلسلات على كلٍّ من 64 جهازًا، مع 4 خطوات تراكم وسياق من 4,096 رمزًا:

يرى المحسِّن 2,048 تسلسلًا — أي نحو 8.4 ملايين رمز — لكل تحديث، رغم أن أي جهاز لا يحمل قط أكثر من 8 تسلسلات في المرة الواحدة. ومضاعفة خطوات التراكم إلى 8 ترفع الدُّفعة الفعلية إلى 4,096 دون أي تغيير في ذاكرة كل جهاز، بكلفة ضعف عدد المرورات بين التحديثات.

الحدود

يغطّي هذا النموذج التكرار المتوازي بيانيًا وتراكم التدرّج، وهما العاملان اللذان يغيّران الدُّفعة الشاملة. ويتجاهل عمدًا التوازي التنسوري والأنبوبي والتسلسلي: فتلك تقسّم نموذجًا أو تسلسلًا واحدًا عبر الأجهزة لتلائم الذاكرة، لكنها لا توسّع الدُّفعة الشاملة، فينبغي ألا تُعدّ الأجهزة التي تُجزَّأ بينها نسخة ضمن $d$. كما يفترض رقم الرموز طول تسلسل ثابتًا؛ والدُّفعات متغيرة الطول أو المحزومة تحتاج محاسبة رموز منفصلة. ويُغطَّى الجانب الذاكري من اختيار الدُّفعة الصغرى في حاسبة ذاكرة تراكم التدرّج، وكيفية توسّع الإنتاجية بإضافة الأجهزة في حاسبة توسّع التوازي البياني.