مقاييس السعة والأداء
قِس مدى امتلاء الخدمة، ومدى بطء أبطأ طلباتها، وكم متسعًا بقي قبل أن يلاحظ المستخدمون، ثم تنبأ بالطلب بمدى لا برقم واحد، لتصل السعة قبل الحاجة لا بعد الشكوى.
الملخص والدافع
يخبرك التوافر هل تجيب الخدمة. وتخبرك السعة والأداء كم تجيب جيدًا، وإلى متى ستظل تفعل ذلك مع نمو الطلب. صفحة دفع تستجيب في ثماني ثوانٍ "متاحة" بمعظم تعريفات التوافر و"معطلة" بتعريف كل عميل. وقاعدة بيانات عند 95 في المئة من تخزينها سليمة اليوم وانقطاع الشهر القادم. ويغطي هذا الموضوع القياسات التي تسد هذه الفجوات.
تخطيط السعة ممارسة تحديد الموارد التي تحتاجها خدمة لتلبية طلب متغير. وفي ITIL 4 تقع هذه في ممارسة إدارة السعة والأداء، التي تهدف إلى ضمان أن تحقق الخدمات الأداء المتفق عليه والمتوقع وأن تلبي الطلب الحالي والمستقبلي بكلفة فعالة. وتصف الممارسة ذلك على ثلاثة مستويات: الأعمال (ما ستطلبه المنظمة من خدماتها)، والخدمة (كيف تتصرف الخدمة تحت الحمل)، والمكوّن (كيف يتصرف كل خادم أو قاعدة بيانات أو رابط شبكة أو طابور). وتعمل القياسات في هذا الموضوع في الغالب على مستويي الخدمة والمكوّن، وتحتاج إلى مدخلات من مستوى الأعمال للتنبؤ بأي شيء.
وتعامل هندسة موثوقية المواقع (SRE) التأخر والحركة والأخطاء والتشبع أربع إشارات تستحق المراقبة في أي نظام موجه للمستخدم، وتربط أهداف الأداء بأهداف مستوى الخدمة (انظر الموضوع 5.2، مؤشرات مستوى الخدمة وأهدافها وميزانيات الخطأ). وتقابل فرق أجايل السعة سؤال تسليم: هل يستطيع الإصدار القادم حمل الحمل المتوقع، ومن يملك الجواب؟ ومعاملة الأداء معيار قبول يُفحص في خط التسليم تنقل الحوار إلى وقت أبكر.
وتتكرر مصطلحات عدة في هذا الموضوع. الاستخدام (utilization) حصة سعة مورد المستخدمة خلال فاصل، مثل حصة زمن المعالج المشغول. التشبع (saturation) مقدار العمل المنتظر لأن المورد مستخدم بالكامل، مثل طول طابور التشغيل أو الطلبات المتراكمة. يقول الاستخدام كم المورد مشغول. ويقول التشبع هل العمل يصطف عليه، والطوابير هي ما يشعر به المستخدمون. والتأخر (latency) الزمن بين الطلب والاستجابة. والإنتاجية (throughput) المعدل الذي تكمل به الخدمة العمل، مثل الطلبات في الثانية. والمتسع (headroom) الفجوة بين حمل الذروة الحالي والحمل الذي تتوقف عنده الخدمة عن بلوغ أهدافها. والطلب (demand) العمل الذي يطلبه المستخدمون والأعمال من الخدمة، وهو غير العمل الذي تكمله: الخدمة المحمّلة فوق طاقتها تكمل أقل مما طُلب منها.
وخاصية واحدة لطوابير الانتظار تفسر لماذا تتصرف هذه القياسات كما تتصرف. تُظهر نظرية الطوابير أنه في خدمة بوصول عشوائي ينمو زمن الانتظار ببطء ما دام الاستخدام معتدلًا ثم يرتفع بحدة حين يقترب الاستخدام من الاستعمال الكامل. وقانون ليتل يربط متوسط عدد الطلبات في نظام بمعدل الوصول ومتوسط الزمن الذي يقضيه كل منها فيه. والمورد عند استخدام متوسط عالٍ قريب من حافة. وشكل المنحنى بالضبط يعتمد على الخدمة، فاعثر عليه باختبار نظامك أنت عبر اختبار الحمل بدل استعارة عتبة من مقالة عامة.
ويحتاج التأخر عناية خاصة لأن المتوسط يخفي التجربة المهمة. والمئين يذكر القيمة التي تقع دونها حصة معينة من الملاحظات: المئين 95 (p95) هو التأخر الذي تتفوق عليه 95 في المئة من الطلبات. وتأخر الذيل يميل إلى الهيمنة في الأنظمة التي يتفرع فيها إجراء مستخدم واحد إلى استدعاءات داخلية كثيرة. أبلغ بالمئينات بدل المتوسط وحده (انظر الموضوع 1.6، الإلمام الإحصائي لمقاييس الخدمة، والموضوع 3.3، زمن الاستجابة للحوادث وحلّها، الذي يسوق الحجة نفسها لزمن الحل).
وأخيرًا، تعتمد السعة على التنبؤ بالطلب، وللطلب أنماط: دورات يومية وأسبوعية وموسمية مرتبطة بالتقويم والحملات وإطلاق المنتجات. ويغير التوسع الآلي إحساس ذلك، لأن المنصات السحابية تستطيع إضافة موارد في دقائق، لكنه لا يزيل الموضوع. فللتوسع الآلي حدود وتأخر وكلفة واعتماديات لا تتوسع، مثل قاعدة بيانات أو واجهة طرف ثالث. وجانب الكلفة ينتمي إلى FinOps (انظر الموضوع 7.6، مقاييس FinOps وتكاليف السحابة).
وتغطي المواضيع المجاورة حساب التوافر (انظر الموضوع 5.3، مقاييس التوافر) وتصميم التنبيهات (انظر الموضوع 5.5، مقاييس جودة المراقبة والتنبيهات) وحمل المناوبة (انظر الموضوع 5.7، مقاييس العمل الروتيني والمناوبة). والموضوع هنا موارد الخدمة نفسها وأزمنة استجابتها.
المبادئ الأساسية
- قِس التشبع كما تقيس الاستخدام. يُظهر الاستخدام كم المورد مشغول، ويُظهر التشبع هل العمل ينتظر. والمستخدمون يعيشون الانتظار.
- أبلغ بالتأخر توزيعًا. استخدم المئينات لكل عملية موجهة للمستخدم، وأبقِ الذيل البطيء مرئيًا. ومتوسط توزيع منحرف يصف تقريبًا لا أحد.
- اربط الأهداف بتجربة المستخدم. العتبة ذات معنى حين تُرد إلى شيء يهتم به مستخدم أو الأعمال، لا إلى ما تصادف أن ترسمه أداة.
- خطط بالمدى وراجعه. التنبؤ مدى بافتراضات معلنة. قارنه بما حدث وتعلم من الخطأ.
- اعرف حدودك بالاختبار. السعة فرضية حتى يؤكدها اختبار حمل واقعي. كرر الاختبار بعد التغييرات المهمة.
- صِف الأنظمة لا الناس. هذه القياسات تخص الخدمات والمكوّنات والفرق. وليست بطاقة درجات للأفراد.
- زِن الكلفة مقابل الخطر. السعة الاحتياطية تكلف مالًا، والسعة الناقصة تكلف عملاء. اجعل المفاضلة مرئية لتُختار لا ينجرف إليها.
تعريفات المقاييس
يسرد الجدول سبعة قياسات. الساعات والحدود مذكورة في كل صيغة. وتستخدم القياسات القائمة على المئينات نافذة ثابتة مذكورة في السجل، وتُحسب من الملاحظات الخام أو من المدرجات التكرارية، لا متوسط متوسطات أبدًا.
| المقياس | التعريف | الصيغة | الوحدة | مصدر البيانات | ممارسة ITIL | المقابل في أجايل | التكرار |
|---|---|---|---|---|---|---|---|
| استخدام الموارد | حصة سعة المورد المستخدمة خلال فاصل، تُبلَّغ مئينًا عاليًا من سلسلة الفواصل | السعة المشغولة / السعة الكلية، لكل فاصل من 1 إلى 5 دقائق؛ أبلغ بالوسيط والمئين 95 على نافذة المراجعة؛ نوافذ الصيانة التي استُنزف فيها المورد مستبعدة | نسبة مئوية | مراقبة البنية التحتية ومقاييس المنصة السحابية | إدارة السعة والأداء؛ إدارة المراقبة والأحداث | معايير القبول التشغيلية في تعريف الإنجاز؛ إشارات موارد SRE | أسبوعي |
| التشبع | مقدار العمل المنتظر لمورد مستخدم بالكامل | طول الطابور أو طابور التشغيل أو الطلبات المعلقة أو المقيّدة، لكل فاصل؛ أبلغ بالمئين 95 وحصة الفواصل التي فيها أي انتظار؛ الفواصل بلا طلب مستبعدة | عدد، أو نسبة مئوية من الفواصل | قياس التطبيق والبنية التحتية عن بعد | إدارة السعة والأداء؛ إدارة المراقبة والأحداث | إشارة التشبع في SRE؛ حد العمل قيد التنفيذ على طابور خدمة | أسبوعي |
| مئين التأخر | الزمن المستغرق للإجابة عن طلب لعملية واحدة موجهة للمستخدم، يُبلَّغ عند الوسيط وp95 وp99 | زمن الاستجابة من استلام الطلب عند الحافة إلى آخر بايت مرسل، لكل طلب ناجح؛ الطلبات الفاشلة تُبلَّغ أخطاء لا استجابات سريعة؛ قِس على نافذة متحركة | مللي ثانية | سجلات موازن الحمل أو البوابة، التتبع، مراقبة المستخدمين الحقيقيين | إدارة مستوى الخدمة؛ إدارة السعة والأداء | مؤشر التأخر وهدف مستوى الخدمة في SRE | مستمر، يُراجع أسبوعيًا |
| المتسع | الحمل المتبقي الذي تستطيع الخدمة حمله قبل أن تخرق أهدافها | (حمل الانهيار المختبر أو المنمذج - حمل الذروة الحالي) / حمل الذروة الحالي؛ الذروة هي أكثر ساعة ازدحامًا في النافذة؛ حمل الانهيار هو الحمل الذي يُخرق عنده هدف التأخر أول مرة في اختبار، لا أقصى حد للعتاد | نسبة مئوية، أو أيام بالنمو الحالي | نتائج اختبارات الحمل والقياس عن بعد للحركة | إدارة السعة والأداء؛ إدارة مستوى الخدمة | المتطلبات غير الوظيفية واختبارات الأداء في خط التسليم | شهري، وقبل الإطلاقات الكبرى |
| خطأ التنبؤ | الفرق بين الطلب المتنبأ به والطلب الفعلي لفترة | القيمة المطلقة (ذروة التنبؤ - الذروة الفعلية) / الذروة الفعلية، لأفق معلن؛ يُجمَّد التنبؤ عند بداية الأفق ولا يُنقَّح بعده؛ الأحداث الفريدة غير المتنبأ بها تُسرد لا تُزال | نسبة مئوية | سجل التنبؤ والقياس عن بعد للحركة | إدارة السعة والأداء؛ التخطيط المرتبط بالطلب في إدارة الشؤون المالية للخدمة | تنبؤ الإصدار وخارطة الطريق؛ التنبؤ بالطلب في SRE | ربع سنوي |
| زمن انتظار السعة | الزمن اللازم لإدخال سعة جديدة الخدمة بعد قبول الحاجة | تبدأ الساعة حين يُوافق على طلب السعة وتتوقف حين تحمل السعة حركة الإنتاج؛ أبلغ بالوسيط والمئين 85؛ الطلبات الملغاة مستبعدة | أيام | سجلات الطلبات في أداة إدارة الخدمة، سجلات التغيير، سجلات التهيئة | إدارة السعة والأداء؛ إدارة طلبات الخدمة؛ تمكين التغيير | زمن الانتظار لبند قائمة مهام للمنصة (انظر الموضوع 2.2، زمن الانتظار وزمن الدورة وكفاءة التدفق) | ربع سنوي |
| تغطية اختبار الأداء | حصة الخدمات الحرجة التي لها اختبار حمل حديث وواقعي | الخدمات الحرجة التي لها اختبار حمل ناجح أحدث من عمر معلن، على بيئة وحمل تمثيليين / الخدمات الحرجة في السجل؛ حد العمر مكتوب | نسبة مئوية | مخزن نتائج الاختبارات وسجل الخدمات | إدارة السعة والأداء؛ إدارة الإصدار | الاختبارات غير الوظيفية في خط التسليم المستمر | ربع سنوي |
تجيب هذه معًا عن أربعة أسئلة: كم هي ممتلئة، وكم هي بطيئة، وكم متسعًا بقي، وكم بسرعة نستطيع الاستجابة حين يتغير الجواب.
التوصيات
ابدأ بالمستخدم، ثم المورد
1. اختر العمليات القليلة التي يهتم بها المستخدمون وقِسها. للخدمة مئات نقاط النهاية وحفنة رحلات مهمة، مثل تسجيل الدخول والبحث والدفع وتنزيل كشف. اتفق عليها مع ملّاك المنتج والعملاء، وضع توقع تأخر لكل منها. وهذه ترتبط طبيعيًا بمؤشرات مستوى الخدمة (انظر الموضوع 5.2، مؤشرات مستوى الخدمة وأهدافها وميزانيات الخطأ).
2. اقرن كل مخطط مورد بمخطط تشبع. عرض استخدام المعالج وحده يدعو إلى الطمأنينة الكاذبة بأنه "بلغ 70 في المئة فقط". أضف الطابور أو الطلبات المنتظرة أو عدد التقييد بجانبه. وحين يظهر التشبع قبل أن يبدو الاستخدام مقلقًا فقد وجدت القيد الحقيقي، وكثيرًا ما لا يكون المورد الذي كنت تراقبه، بل مجمع اتصالات أو حد خيوط أو حد معدل على واجهة شريك.
3. فضّل الذيل المشغول على المتوسط الهادئ. المتوسطات على يوم تمزج جوف الليل بذروة الغداء. انظر إلى أكثر الفترات ازدحامًا وسجّل تاريخ أسوأ الفواصل وسببها. وسؤال التخطيط كيف تتصرف الخدمة في أسوأ ساعة متوقعة.
أبلغ بالتأخر بصدق
4. انشر المئينات لكل عملية وسمِّ النافذة. اذكر الوسيط وp95 وp99 لكل عملية مهمة على نافذة متحركة، وقل أي الطلبات مُدرجة. لا تحسب متوسط مئينات عبر الخوادم أو العمليات أبدًا، لأن النتيجة لا تقابل تجربة أي مستخدم حقيقي؛ ادمج المدرجات التكرارية أو الملاحظات الخام بدلًا من ذلك. وإن كانت العينة صغيرة فقل ذلك، فـp99 من بضع مئات من الطلبات رقم مشوش (انظر الموضوع 1.6، الإلمام الإحصائي لمقاييس الخدمة).
5. قِس حيث المستخدم كما تقيس حيث الخادم. تستبعد توقيتات جهة الخادم الشبكة والمتصفح والجهاز. أضف مراقبة المستخدمين الحقيقيين أو فحوصًا اصطناعية لتميز بين خلفية بطيئة وميل أخير بطيء.
6. احتسب الأخطاء والمهلات المنتهية مع التأخر لا بدلًا منه. الخدمة التي تفشل سريعًا تبدو سريعة في مخطط التأخر، والخدمة التي تنتهي مهلتها تبدو بطيئة لسبب خاطئ. أبلغ بمعدل الخطأ مع مئين التأخر ليتعذر على فشل سريع أن يجامل النتيجة.
اعثر على الحدود، ثم اترك متسعًا
7. اختبر نقطة الانهيار عن قصد. شغّل اختبارات حمل تعيد تشغيل مزيجًا واقعيًا من العمليات، وارفع الحمل تدريجيًا، ودوّن أين يُخرق هدف التأخر أول مرة وأي مورد يتشبع أولًا. اختبر على بيئة تشبه الإنتاج في الجوانب المهمة، واكتب الجوانب التي لا تشبهه فيها. واختبار فاشل في مكان آمن أرخص حادثة ستحظى بها (انظر الموضوع 4.5، مقاييس الإصدار والنشر، لوضع الفحوص في خط التسليم).
8. ضع المتسع سياسة وراجعه مفاضلةً. قرر كم هامشًا تحتفظ به الخدمة فوق ذروتها المتوقعة ولماذا. والخدمات الحرجة الموجهة للعملاء تبرر أكثر، والخدمات الدفعية الداخلية أقل. والرقم خيار أعمال بشأن الكلفة والخطر، فسجّل التعليل وأعد النظر فيه حين تتغير كلفة انقطاع أو سعر السعة. لا تنسخ رقمًا من منظمة أخرى.
تنبأ بالطلب مع من يعرفونه
9. اسأل الأعمال عمّا هو قادم، واكتب التنبؤ. الحملات التسويقية والعملاء الجدد والمواعيد التنظيمية والأحداث الموسمية تغير الطلب قبل أن تُظهره الحركة بوقت طويل. احتفظ بسجل تنبؤ قصير بالتاريخ والافتراضات والمدى والمالك ومصدر كل مدخل. والتنبؤ الذي يُعطى مدى، مثل حالات دنيا ومتوقعة وعليا، أصدق من رقم واحد وأنفع لتقرير كم يُشترى.
10. سجّل درجة للتنبؤ واستخدم الخطأ لتحسينه. بعد كل فترة قارن التنبؤ المجمَّد بما حدث، باستخدام خطأ التنبؤ، واسرد أسباب الإخفاقات الكبيرة. والأسباب الشائعة حملة غير معلنة وتغير في سلوك المستخدمين واعتمادية تحركت. والغاية ليست خطأ صفرًا، فهو غير ممكن، بل أن تتعلم أي المدخلات موثوقة، وتوسّع المدى حيث لا تكون.
سهّل إضافة السعة
11. قصّر زمن انتظار السعة قبل أن تطارد الدقة. إن استغرقت السعة الجديدة أسابيع لتصل فعليك التنبؤ بعيدًا إلى الأمام وحمل احتياطي أكبر. وإن استغرقت دقائق فتستطيع العمل أقرب إلى الحاجة. انظر إلى الخطوات بين "موافَق عليه" و"يحمل حركة"، مثل الشراء والموافقة والتهيئة والإعداد والاختبار، وأزل أطول الانتظارات أولًا (انظر الموضوع 4.3، مقاييس تمكين التغيير). وبمصطلحات ITIL هذا خيار استراتيجية سعة: قيادة الطلب أو مطابقته أو التأخر عنه؛ فاختر بوعي، لكل خدمة.
12. عامل التوسع الآلي نظامًا يُقاس. سجّل كم مرة يُطلق التوسع وكم تستغرق السعة الجديدة لتصير نافعة وكم مرة تبلغ حدها الأقصى المهيأ وكم تكلف. موسِّع آلي عالق عند حده خطة سعة فشلت أصلًا. وراجع هذه مع منظور الكلفة ليُناقش الأداء والإنفاق معًا (انظر الموضوع 7.5، تكلفة الخدمة واقتصاديات الوحدة).
طرق التلاعب وضوابط الحماية
| المقياس | كيف يُتلاعب به | ضابط الحماية المقترن (مقياس أو ممارسة) |
|---|---|---|
| استخدام الموارد | المتوسط على فواصل طويلة لإخفاء الذروات؛ عدّ السعة المحجوزة الخاملة "مستخدمة"؛ الإبلاغ عن الموارد الأهدأ فقط | المئين 95 في ساعة الذروة بجانب المتوسط؛ قياس التشبع؛ قائمة الموارد ضمن النطاق تُراجع مقابل خريطة الخدمة |
| التشبع | رفع حدود الطابور فلا يُبلَّغ عن شيء مرفوض أو مقيَّد؛ نقل الانتظار إلى طابور آخر غير مقيس | مئين التأخر ومعدل الخطأ للعملية نفسها؛ زمن الطابور من البداية إلى النهاية لا مرحلة واحدة؛ مراجعة كل الطوابير في المسار |
| مئين التأخر | الإبلاغ بالمتوسط أو الوسيط فقط؛ إسقاط الطلبات البطيئة أو الفاشلة من العينة؛ القياس من موقع داخلي سريع؛ استبعاد "القيم الشاذة" | p95 وp99 تُعرضان دائمًا؛ معدل الخطأ والمهلات بجانب التأخر؛ مقارنة مراقبة المستخدمين الحقيقيين بتوقيت جهة الخادم؛ حجم العينة الخام معروض |
| المتسع | اختيار حمل اختبار لطيف؛ اختبار بيئة أكبر من الإنتاج؛ تعريف نقطة الانهيار بأنها أقصى حد للعتاد | مراجعة حمل الاختبار مقابل شكل حركة الإنتاج؛ قائمة مكتوبة بالفروق بين الاختبار والإنتاج؛ إعادة اختبار المتسع بعد التغييرات ذات الصلة |
| خطأ التنبؤ | تنقيح التنبؤ بعد الواقعة؛ وضع مدى واسع جدًا فتكون كل نتيجة "ضمن المدى"؛ إزالة الأشهر المفاجئة بوصفها "أحداثًا غير متنبأ بها" | تنبؤ مجمَّد ومؤرَّخ في السجل؛ عرض عرض المدى مع الخطأ؛ كل حدث مستبعد مسرود ومراجَع |
| زمن انتظار السعة | بدء الساعة متأخرًا بتأخير سجلات الموافقة؛ إغلاق الطلبات عند وضع الطلبية لا حين تحمل السعة حركة؛ تقسيم الطلبات | ساعة معرَّفة من الموافقة إلى حمل الحركة؛ مقارنة عينة من الطلبات المغلقة بسجلات التهيئة؛ عدد الطلبات المعاد فتحها |
| تغطية اختبار الأداء | إجراء اختبار تافه لادعاء التغطية؛ تقليص قائمة الخدمات الحرجة؛ إبقاء اختبار قديم ناجح في السجلات | تسجيل عمر الاختبار وواقعية الحمل؛ مراجعة قائمة الخدمات الحرجة مقابل كتالوج الخدمات وتاريخ الحوادث؛ الإبلاغ بالاختبارات الفاشلة كما بالناجحة |
القراءة الصحية تُظهر استخدامًا بدورات يومية مرئية ومتسع، وتشبعًا يظهر نادرًا وقصيرًا، ومئينات تأخر ثابتة أو متحسنة في أكثر الساعات ازدحامًا، وخطأ تنبؤ معروفًا ويتقلص ببطء. والعلامة الصحية أن المفاجآت تُناقش مع أسبابها. والأرقام المثالية ينبغي أن تثير الشك، لأنها تعني عادةً أن القياس لطيف.
المفاضلات: المزايا والعيوب
| النهج | نقطة القوة | نقطة الضعف |
|---|---|---|
| العمل بمتسع سخي | يمتص المفاجآت؛ يحمي التأخر والتوافر | كلفة أعلى؛ يخفي عدم الكفاءة وضعف التنبؤ |
| العمل بحد أدنى مع توسع آلي سريع | كلفة أقل؛ السعة تتبع الطلب | يعتمد على سرعة التوسع وحدوده؛ قد لا تتوسع الاعتماديات؛ أصعب استدلالًا أثناء حادثة |
| أهداف تأخر بالمئينات | تعكس ما تشعر به الطلبات البطيئة؛ تقاوم حيل المتوسطات | تحتاج بيانات أكثر وعينات أكبر؛ مشوشة عند المئينات العالية للخدمات قليلة الحركة |
| التأخر بالمتوسط أو الوسيط فقط | بسيط وثابت | يخفي الذيل الذي يقود الشكاوى والانصراف |
| اختبارات حمل اصطناعية | مضبوطة وقابلة للتكرار وآمنة | واقعية بقدر نموذج الحمل والبيئة فقط |
| قياس الإنتاج عن بعد أساسًا | يعكس السلوك الحقيقي والمزيج الحقيقي | لا يكشف الحدود إلا بعد بلوغها؛ لا يستطيع الاستكشاف فوق الطلب الحالي |
| نماذج تنبؤ مفصلة | تلتقط الموسمية والنمو | تحتاج بيانات ومهارة؛ إحساس زائف بالدقة حين تضعف المدخلات |
| مدى بسيط متفق عليه مع الأعمال | سهل الشرح والتحديث؛ يركز على الافتراضات | أخشن؛ يعتمد على مدخلات صادقة من الأعمال |
اختر أخف طريقة تدعم القرار. ولمعظم الخدمات يكفي نظر أسبوعي إلى استخدام ساعة الذروة والتشبع ومئينات التأخر، واختبار حمل قبل التغييرات الكبرى، ومراجعة تنبؤ ربع سنوية. وأضف النمذجة حيث كلفة الخطأ كبيرة.
أسئلة للنقاش مع فريقك
1. أي ثلاث رحلات مستخدمين هي الأهم، وأي زمن استجابة يتوقعه المستخدمون لكل منها؟ اطلب من المجموعة تسمية الرحلات، ثم قارنوها بما ترسمه اللوحات. وعلى الميسّر أن يلحّ على توقع يمكن تتبعه إلى مستخدم أو عميل، لا تفضيل هندسي.
2. أين تقترب خدمتنا من حافة، وكيف نعرف؟ ابحثوا عن موارد مثل مجمعات الاتصالات أو حدود الخيوط أو حد معدل شريك. واسألوا متى اختُبر كل منها آخر مرة حتى نقطة انهياره. وإن لم يعرف أحد فهذا أول عمل.
3. كيف نبلّغ بالتأخر اليوم، وماذا سيقول أبطأ واحد في المئة من المستخدمين؟ اعرضوا المتوسط والوسيط وp95 وp99 لعملية واحدة جنبًا إلى جنب وناقشوا الفجوة. واسألوا أي الطلبات مستبعدة ولماذا، وهل تُحتسب الطلبات الفاشلة.
4. كم متسعًا نحتفظ به، ومن اختاره، ومتى أعدنا النظر في الاختيار آخر مرة؟ ناقشوا كلفة الهامش وكلفة انقطاع في أكثر الأيام ازدحامًا. واتفقوا على تاريخ مراجعة والدليل الذي سيغير الهامش.
5. ما مدى جودة آخر ثلاثة تنبؤات بالطلب لدينا، وماذا تعلمنا؟ قارنوا التنبؤات المؤرخة بالفعلي وأسباب الإخفاقات الكبيرة. واسألوا ماذا عرفت الأعمال ولم تتلقه العمليات. وقرروا مدخلًا واحدًا يُضاف إلى سجل التنبؤ، مثل التقويم التسويقي أو جدول الإطلاق.
6. لو احتجنا ضعف السعة الشهر القادم، فما الذي سيوقفنا؟ اسردوا كل خطوة من الطلب إلى حركة الإنتاج وعلّموا أين تنتظر. أدرجوا الشراء والموافقات والترخيص والاعتماديات التي لا تتوسع. وعلى الميسّر أن يبحث عن أطول انتظار غير تقني، فكثيرًا ما يكون موافقة أو عقدًا. واتفقوا على خطوة واحدة تُقصَّر وقيسوا الأثر عبر زمن انتظار السعة.
المنظورات الأربعة
فرق المنتج والتسليم
أدرج توقع أداء في معايير القبول للميزات التي تمس المسارات المزدحمة، وشغّل اختبار حمل في خط التسليم حيث يكون عمليًا، وأخبر العمليات بالإطلاقات مبكرًا. واحذر عادة معاملة الأداء مهمة "تقوية" لاحقة، فتتحول إلى عمل غير مخطط (انظر الموضوع 2.9، العمل التشغيلي والعمل غير المخطط).
فرق الخدمة والعمليات
تملك فرق العمليات القياس عن بعد وخطة السعة والاستجابة حين يُبلَغ حد. وتحتاج التشبع وتأخر الذيل على اللوحات التي تستخدمها فعلًا، وسجل تنبؤ مشتركًا مع الأعمال، ونتائج اختبار موثوقة. وينبغي لها تسجيل كل حادثة متصلة بالسعة بسببها (انظر الموضوع 4.1، مقاييس إدارة المشكلات، والموضوع 3.4، مقاييس الحوادث الكبرى).
القيادة والحوكمة
يقرر القادة كم مخاطرة وكلفة تقبلها المنظمة، وسياسة المتسع هي حيث يظهر هذا القرار. اطلبوا مئينات التأخر والمتسع لكل خدمة حرجة، مع خطأ التنبؤ بجانبها، وعاملوا طلبات السعة قرارات استثمار تحمل دليلًا. وعلى هيئات الحوكمة مقاومة هدف استخدام واحد على مستوى المنظمة، فهو يدفع كل خدمة إلى النقطة نفسها على الحافة.
العملاء والمستخدمون
يشعر العملاء بالبطء عدم موثوقية، قبل أن يتغير أي رقم توافر بوقت طويل. اذكر الأداء بمئينات عند حمل معلن، وشارك كيف تتعامل الخدمة مع فترات الذروة (انظر الموضوع 5.1، مقاييس SLA وOLA وXLA، والموضوع 6.2، اتفاقيات مستوى التجربة).
عمليًا: مثال على أجايل ITIL
يشغّل متجر تجزئة إلكتروني متوسط الحجم واجهة متجر وخدمة دفع وخدمة طلبات، تملك كلًّا منها فرقة منتج، وفريق منصة يوفر البنية التحتية المشتركة. كل الأرقام في هذا المثال توضيحية.
تُظهر المراجعة الأسبوعية لفريق المنصة بحث الواجهة بتأخر وسيط 180 مللي ثانية وp95 يساوي 420 مللي ثانية، كلاهما ضمن الهدف، واستخدام معالج عند المئين 95 لساعة الذروة 58 في المئة. وقبل ثلاثة أسابيع من تخفيضات مخططة تبلّغ قائدة دعم أن العملاء يقولون إن الموقع "يزحف" خلال حملات المساء. واللوحة خضراء.
ينظر الفريق في p99 للبحث في أكثر ساعات التخفيضات السابقة ازدحامًا فيجده 3.1 ثانية، مقابل هدف p99 يساوي 1.5 ثانية. ويروي التشبع بقية القصة: مجمع الاتصالات إلى قاعدة بيانات المنتجات يُظهر طلبات منتظرة في 14 في المئة من فواصل الدقيقة أثناء الذروة، بينما لم يتجاوز استخدام المعالج 60 في المئة. لم يكن القيد المعالج قط. كان حد مجمع وُضع حين كانت الحركة ثلث اليوم.
يجري مالك المنتج وقائد المنصة اختبار حمل عند 1.5 ضعف ذروة العام الماضي، باستخدام مزيج الإنتاج من العمليات. ويُظهر الاختبار خرق هدف p99 عند 1.15 ضعف ذروة العام الماضي، فالمتسع 15 في المئة مقابل سياسة 40 في المئة للخدمات الموجهة للعملاء. ويوحي التقويم التسويقي بطلب 1.6 ضعف ذروة العام الماضي في يوم الافتتاح. وكان التنبؤ القديم، المجمَّد في السجل، قد وضع المدى بين 1.2 و1.4، وكان الخطأ مقابل تخفيضات العام الماضي 22 في المئة، في معظمه من حملة بريد إلكتروني غير معلنة.
القرار، المسجل في سجل القرارات، من أربعة أجزاء. أولًا، رفع حد المجمع وإضافة نسخ قراءة وإعادة الاختبار. ثانيًا، إضافة قائمة تحقق جاهزية تخفيضات إلى عملية الإصدار لتصل الحملات إلى سجل التنبؤ قبل ستة أسابيع على الأقل. ثالثًا، إضافة p99 وتشبع المجمع إلى المراجعة الأسبوعية. رابعًا، الاتفاق مع المالية على كلفة السعة الإضافية لنافذة التخفيضات، باستخدام توسع مجدول بدل احتياطي على مدار العام.
وبعد التغييرات يُظهر اختبار ثانٍ ثبات هدف p99 حتى 1.8 ضعف ذروة العام الماضي. وظهر خطر التلاعب أثناء المراجعة. فقد اقترح متعاقد "مكسبًا سريعًا" باستبعاد الطلبات الأبطأ من 5 ثوانٍ من تقرير التأخر، بحجة أنها قيم شاذة. ورفض الفريق: فالطلبات المستبعدة هي بالضبط العملاء الذين اشتكوا. وكان ضابط الحماية إبقاء معدلي الخطأ والمهلات بجانب كل مئين تأخر وتسجيل حجم العينة. وأثناء التخفيضات بلغ p99 ذروته 1.2 ثانية، وبقي تشبع المجمع دون 1 في المئة من الفواصل، وكان خطأ التنبؤ 9 في المئة، مسجلًا في السجل بسبب الإخفاق المتبقي.
النظرة حسب القطاع
الشركات الناشئة. الحركة صغيرة والنمو غير مؤكد، فالقياسات الرخيصة تتفوق على المتقنة. تتبع مئينات التأخر للرحلتين أو الثلاث التي تدر مالًا، وراقب التشبع على قاعدة البيانات، وشغّل اختبار حمل بسيطًا قبل الإطلاقات. وضع تنبيه إنفاق حتى لا يصير خلل أو ارتفاع حركة فاتورة.
الأعمال الصغيرة. الخدمات غالبًا مستضافة أو مشتراة، فالسعة شأن مورد. اطلب من المورد تقارير أداء وسعة كتابةً، وتعرّف ما يقوله العقد عن فترات الذروة، وراقب منظور العميل ببضعة فحوص اصطناعية. وتتبع المتسع على النظام الواحد الذي لا تستغني عنه الأعمال.
المؤسسات الكبرى. تتشارك خدمات كثيرة البنية التحتية، فتظهر مشكلات السعة في المكان الخطأ. استثمر في خريطة خدمات تربط الخدمات بالمكوّنات التي تستخدمها، وعملية تنبؤ مشتركة مع وحدات الأعمال، وتعريفات موحدة لمئينات التأخر عبر الفرق. وضع سياسة المتسع بحسب حرجية الخدمة.
الحكومة والقطاع العام. يتشكل الطلب بمواعيد يحددها القانون، مثل مواعيد تقديم الضرائب ومطالبات الاستحقاقات والانتخابات، والفشل في تلك التواريخ علني. ينبغي للتنبؤات استخدام التقويم القانوني، وقد تحتاج سعة الذروة إلى التعاقد قبلها بأشهر. وتطيل آجال المشتريات زمن انتظار السعة، فقسها وخطط حولها. وينبغي للتقارير العامة عن أداء الخدمة ذكر المئين وظروف الحمل (انظر الموضوع 8.5، التقارير التنظيمية والحكومية).
دراسة الجدوى: الدوافع والعائد على الاستثمار وإجمالي تكلفة الملكية
للكلفة أربعة أجزاء. الأول القياس عن بعد: الأجهزة وتخزينها. والثاني الاختبار: بيئة تمثيلية ونماذج حمل تحتاج صيانة. والثالث روتين التخطيط: صيانة سجل التنبؤ ومراجعة الخطأ كل ربع. والرابع السعة الاحتياطية نفسها، وهي كثيرًا ما تكون أكبر كلفة وأحقها بأن تُجعل صريحة.
ويأتي العائد من حوادث متصلة بالسعة أقل، وقرارات أفضل بشأن متى تُشترى السعة ومتى لا، وإنفاق متجنَّب على سعة تُظهر البيانات أنها غير لازمة. لا تعد بنسبة توفير مسبقًا. بل قِس نمطك: عدد الحوادث ذات السبب المتصل بالسعة لكل ربع، وحصة الذروات التي تطلبت إجراءً طارئًا، والإنفاق على سعة خاملة نسبة إلى سياسة المتسع المتفق عليها، واتجاه خطأ التنبؤ. ويعامل كتاب غوغل SRE الموثوقية قرارًا اقتصاديًا.
وتهيمن على إجمالي تكلفة الملكية الأشخاص وبيئة الاختبار. ويستطيع فريق صغير أن يبدأ بالمراقبة القائمة ومراجعة أسبوعية واختبار حمل واحد لأهم رحلة.
الأنماط المضادة والمزالق
- الإبلاغ بمتوسط الاستخدام قصة سعة. يخفي المتوسط الذروة والحافة. أبلغ بالمئين العالي لساعة الذروة وقياس التشبع.
- متوسط التأخر على لوحة المديرين التنفيذيين. الذيل يقود الشكاوى. أظهر p95 وp99 مع معدلات الخطأ وحجم العينة.
- استبعاد "القيم الشاذة" من التأخر. أبطأ الطلبات مستخدمون حقيقيون. أبقِها، وحقق في السبب بدل تقليم البيانات.
- متوسط المئينات عبر الخوادم. النتيجة لا تصف أحدًا. ادمج المدرجات أو الملاحظات الخام قبل حساب المئين.
- خطط سعة مبنية على حركة العام الماضي وحدها. الطلب يعتمد على أحداث الأعمال. أدرج تقويم الأعمال وراجع خطأ التنبؤ.
- الاختبار في بيئة لا تشبه الإنتاج. النتيجة الناجحة تعطي ثقة زائفة. سجّل الفروق وصحّح لها، أو اختبر في الإنتاج بأمان.
- استخدام قياسات السعة لترتيب المهندسين أو الفرق. الاستخدام والتأخر يصفان الأنظمة. راجعها بدلالة تصميم الخدمة والطلب، وأبقِ الأفراد خارج الصورة.
نموذج النضج
| البُعد | 1 البدء | 2 التطوير | 3 التوحيد | 4 الإدارة | 5 التنسيق |
|---|---|---|---|---|---|
| قياس الاستخدام والتشبع والتأخر | متوسطات من بضعة خوادم؛ تنبيهات على استخدام المعالج العالي | بعض الفرق ترسم مئينات التأخر والطوابير | تعريفات مشتركة: مئينات لكل عملية رئيسية، والتشبع بجانب الاستخدام، ونوافذ مكتوبة | تُتتبع مقابل الأهداف، وتُقرن بمعدلات الخطأ، وتُراجع أسبوعيًا | تُنقَّح التعريفات بالاشتراك مع الموردين والعملاء؛ تُوفَّق منظورات جهة المستخدم وجهة الخادم |
| الحدود والمتسع | الحدود مجهولة حتى يقع فشل | اختبارات حمل عرضية قبل الإطلاقات الكبرى | اختبارات حمل على الخدمات الحرجة مقابل سياسة متسع مكتوبة | يُتتبع المتسع لكل خدمة ويُعاد اختباره بعد التغييرات ذات الصلة | تُعدَّل سياسة المتسع من بيانات الكلفة والخطر والحوادث عبر الفرق والموردين |
| التنبؤ | تخمينات ظرفية وقت الطلب | تحتفظ الفرق المنفردة بتنبؤات في رؤوسها أو جداولها | سجل تنبؤ مشترك بمدى وملّاك، تغذيه تقويم الأعمال | يُسجَّل خطأ التنبؤ ويُراجع مع أسباب الإخفاقات | تُبنى التنبؤات مع الأعمال والموردين؛ تُحسَّن المدخلات روتينيًا |
| تسليم السعة | تُضاف السعة بعد حادثة | طلبات قياسية للحالات الشائعة | مسار موثق من الموافقة إلى حركة الإنتاج، مع قياس زمن انتظار السعة | تُستهدف أطول الانتظارات بتحسين ممول | تُضاف السعة آليًا ضمن السياسة؛ يُراجع سلوك التوسع والكلفة معًا |
قائمة التحقق
- رحلات المستخدمين الحرجة مسماة، لكل منها توقع تأخر متفق عليه مع مالكها.
- يُبلَّغ بالتأخر وسيطًا وp95 وp99 لكل عملية، مع ذكر النافذة وحجم العينة.
- تُحسب المئينات من المدرجات التكرارية أو الملاحظات الخام، لا متوسطًا عبر الخوادم أبدًا.
- كل مخطط استخدام بجانبه مخطط تشبع.
- معدلا الخطأ والمهلات معروضان بجانب كل مئين تأخر.
- لكل خدمة حرجة اختبار حمل، وفروق الحمل والبيئة مكتوبة.
- توجد سياسة متسع لكل حرجية خدمة، والتعليل مسجل.
- سجل تنبؤ مؤرخ يحمل المدى والافتراضات والملّاك، ويغذيه تقويم الأعمال.
- يُراجع خطأ التنبؤ كل ربع، وتُسجَّل أسباب الإخفاقات الكبيرة.
- يُقاس زمن انتظار السعة من الموافقة إلى حمل الحركة.
- تُراجع حدود التوسع الآلي وتأخره وكلفته مع مالك الخدمة.
- لا قياس سعة أو أداء يُبلَّغ لكل فرد.
مطالبات الذكاء الاصطناعي
راجع تقرير تأخر بحثًا عن تشويه خفي.
Here is how we report latency for [operation or service]: [description of the
measurement point, the window, the statistics shown, and which requests are
included or excluded]. Our users care about [user journey or expectation].
Identify ways this report could understate the experience of the slowest users,
such as averaging, exclusion rules, sampling, or measurement location. Suggest
what to show instead and what additional data I would need. Do not invent
benchmark values or thresholds; ask me for the ones you need. List your
assumptions.
صُغ خطة اختبار حمل لخدمة.
I need a load test plan for [service name]. Its main user journeys are
[journeys], its dependencies are [dependencies], and its production traffic mix
is roughly [description of mix]. The test environment differs from production
in these ways: [differences]. Propose a workload model, a ramp pattern, the
measures to record (latency percentiles, error rate, utilization, saturation),
the stop conditions, and the questions the results should answer. Do not
assume tool features or invent target values. List your assumptions and the
risks of the test.
نظّم تنبؤًا بالطلب مع الأعمال.
I am preparing a capacity forecast for [service] covering [horizon]. Known
inputs: [historical traffic description], [business events and dates], and
[planned changes]. Draft a forecast register layout with low, expected, and high
cases, the assumptions behind each, the owner of each input, and a review
routine that scores forecast error. Suggest questions to ask [business
stakeholders]. Do not invent growth rates or seasonal factors. List your
assumptions.
اعثر على القيد الحقيقي من الأعراض.
A service shows these symptoms during peak load: [symptoms, for example slow
p99, queue growth, error types]. Utilization data: [summary of resource
utilization]. Saturation data: [summary of queues, pools, throttling].
Architecture notes: [short description]. List the resources and limits that
could be the constraint, the evidence that would distinguish between them, and
the cheapest next test for each. Do not claim a cause that the data does not
support. List your assumptions.
مهارات الذكاء الاصطناعي
- مهارة مقاييس أجايل ITIL: استخدمها للعثور على الموضوع الذي يعرّف قياس سعة أو أداء وساعاته وضابط الحماية الذي ينتمي بجانبه.
- مهارة صيانة مقاييس أجايل ITIL: استخدمها للتحقق من أن موضوع سعة أو أداء معدَّلًا يُبقي كل مقياس مقرونًا بطريقة تلاعب وضابط حماية.
النقاط الرئيسية
- قِس التشبع مع الاستخدام، لأن المستخدمين يشعرون بالطابور لا بالنسبة المئوية.
- أبلغ بالتأخر مئينات لكل عملية، مع معدلات الأخطاء وحجم العينة، ولا تحسب متوسط مئينات أبدًا.
- اعثر على الحدود بالاختبار وضع المتسع سياسة مسجلة توازن الكلفة والخطر.
- تنبأ بالطلب مدى مع الأعمال، وجمّد التنبؤ، وتعلم من الخطأ.
- قصّر زمن انتظار السعة وقِس التوسع الآلي، لتتبع السعة الحاجة.
- صِف الخدمات والأنظمة لا الناس، وعامل الأرقام التي تبدو مثالية دافعًا لفحص القياس.
المراجع والقراءة الإضافية
- Beyer, B., Jones, C., Petoff, J., and Murphy, N. R. (eds.), Site Reliability Engineering: How Google Runs Production Systems, O'Reilly Media, 2016, https://sre.google/sre-book/table-of-contents/
- Google, "Monitoring Distributed Systems," chapter in Site Reliability Engineering, 2016, https://sre.google/sre-book/monitoring-distributed-systems/
- Beyer, B., Murphy, N. R., Rensin, D. K., Kawahara, K., and Thorne, S. (eds.), The Site Reliability Workbook: Practical Ways to Implement SRE, O'Reilly Media, 2018, https://sre.google/workbook/table-of-contents/
- Dean, J., and Barroso, L. A., "The Tail at Scale," Communications of the ACM, 56(2), 2013.
- Little, J. D. C., "A Proof for the Queuing Formula: L = λW," Operations Research, 9(3), 1961.
- Gregg, B., Systems Performance: Enterprise and the Cloud, 2nd edition, Addison-Wesley, 2020.
- Allspaw, J., The Art of Capacity Planning, O'Reilly Media, 2008.
- Gunther, N. J., Guerrilla Capacity Planning, Springer, 2007.
- Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
- AXELOS (now PeopleCert), ITIL 4 Foundation and the ITIL 4 practice guide for capacity and performance management, 2019 onwards.
- Wikipedia, Capacity planning.
- Wikipedia, Site reliability engineering.
- Wikipedia, Latency (engineering).
- Wikipedia, Throughput.
- Wikipedia, Queueing theory.
- Wikipedia, Little's law.
- Wikipedia, Load testing.
- Wikipedia, Percentile.
- Wikipedia, Tail latency.
- Wikipedia, Forecasting.
- Wikipedia, Seasonality.
- Wikipedia, Autoscaling.