مقاييس العمل الروتيني والمناوبة
لا تكون الخدمة أوثق من المناوبة التي ترعاها، فقِس المقاطعات وحمل الليل وحصة الوقت الضائعة في العمل اليدوي المتكرر للمناوبة ككل، واستخدم الأرقام لتمويل الوقاية والأتمتة، لا لمقارنة الناس أبدًا.
الملخص والدافع
كثيرًا ما توصف الموثوقية بدلالة النظام: التوافر والتأخر ومعدلات الخطأ. وخلف كل خدمة لها مستخدمون في منتصف الليل نظام بشري يستجيب حين يفشل النظام. ولهذا النظام البشري حدود. فمناوبة تُستدعى كثيرًا، أو توقظ أشخاصًا كثيرين، أو تقضي معظم أسبوعها في مهام يدوية متكررة، ستبطؤ وترتكب أخطاء أكثر وتفقد ناسًا في النهاية. وقد تبدو القياسات الأخرى في الجزء 5 سليمة حتى اللحظة التي يغادر فيها الناس الذين يمسكونها معًا.
تنظم هذا الموضوع فكرتان. الأولى عمل الاستدعاء (on-call): مناوبة أشخاص يمكن الوصول إليهم وجاهزين للاستجابة للتنبيهات خارج أنماط العمل العادية. والصفحة (page) تنبيه يقاطع مستجيبًا، عادةً عبر جهاز نداء أو مكالمة هاتفية أو إشعار فوري. والمناوبة الواحدة (shift) امتداد واحد من واجب الاستدعاء، مثل يوم أو أسبوع أو ليلة. ودورة المناوبة (rotation) مجموعة الأشخاص الذين يتناوبون الورديات. والفكرة الثانية العمل الروتيني (toil)، وهو مصطلح من هندسة موثوقية المواقع (SRE)، انضباط تشغيل الخدمات بأساليب هندسة البرمجيات. وفي كتاب غوغل Site Reliability Engineering العمل الروتيني عمل تشغيلي مرتبط بتشغيل خدمة إنتاج، يميل إلى أن يكون يدويًا ومتكررًا وقابلًا للأتمتة وتكتيكيًا وبلا قيمة دائمة وينمو بنمو الخدمة. وليس هو الأعباء العامة مثل الاجتماعات، وليس مجرد عمل لا يحبه أحد.
لا تملك ITIL 4 ممارسة تسمى "إدارة العمل الروتيني". فالمادة موزعة على ممارسات عدة. وتنتج إدارة الحوادث وإدارة المراقبة والأحداث الصفحات. وتزيل إدارة المشكلات الأسباب التي تواصل إنتاجها. وتنتج إدارة طلبات الخدمة وإدارة النشر كثيرًا من العمل اليدوي المتكرر. وتملك إدارة القوى العاملة والمواهب والتحسين المستمر الجانب البشري. والمقابل في أجايل اتفاقية الفريق على العمل غير المخطط والوتيرة المستدامة، وعادة DevOps أن الفريق الذي يبني خدمة يحمل أيضًا جزءًا من جهاز الاستدعاء لها.
والقياسات هنا عن الحمل والاستدامة. أما معالجة الحوادث فتنتمي إلى مواضيع أخرى (انظر الموضوع 3.3، زمن الاستجابة للحوادث وحلّها، والموضوع 3.4، مقاييس الحوادث الكبرى)، وكذلك جودة التنبيهات الفردية (انظر الموضوع 5.5، مقاييس جودة المراقبة والتنبيهات). ويسأل هذا الموضوع ما كلفة إبقاء الخدمة تعمل على أفراد المناوبة، وهل هذه الكلفة مستدامة.
لماذا ينتمي هذا إلى الموثوقية
للإرهاق عواقب تشغيلية. فـالحرمان من النوم يضعف الحكم وزمن رد الفعل، والمستجيبون المتعبون عند بدء حادثة يستغرقون وقتًا أطول لتشخيصها وأكثر عرضة لارتكاب خطأ ثانٍ أثناء إصلاح الأول. وإجهاد الإنذار هو الأثر المرتبط لكثرة التنبيهات: يكف الناس عن معاملة كل منها عاجلًا. والاحتراق المهني النتيجة الأطول أمدًا لإفراط مستمر في الحمل، ويظهر تسربًا ومرضًا وانسحابًا، وهي بطيئة ومكلفة وصعبة العكس. والفريق الذي يقيس موثوقية الخدمة دون قياس استدامة مناوبته يراقب الأثر ويتجاهل جزءًا من السبب.
يصف هذا الموضوع المناوبات والورديات والخدمات، ولا يرتب الأفراد أبدًا. فرؤية ITIL تبدأ من الحادثة والخدمة، ورؤية SRE من كلفة وقت الأشخاص، ورؤية أجايل من السعة للعمل المخطط.
المبادئ الأساسية
- قِس المناوبة لا الشخص. أبلغ بالحمل لكل خدمة ووردية وموضع في المناوبة. عدد صفحات الشخص يعتمد على الوردية التي سحبها، وجدول الترتيب يعلّم الناس إخفاء المقاطعات.
- عُدّ متى تحدث المقاطعات كما تعدّ مدتها. صفحة من خمس دقائق عند الثالثة صباحًا قد تكلف نوم ليلة.
- عرّف العمل الروتيني تعريفًا ضيقًا ودع الفريق يصنفه. العمل الروتيني نوع محدد من العمل، لا مرادف لعمل لا يحبه الناس.
- عامل الحمل إشارة للاستثمار. حجم صفحات مرتفع أو حصة عمل روتيني مرتفعة دليل على أن خدمة أو أداة أو مستوى توظيف يحتاج عملًا.
- اقرن كل قياس حمل بقياس جودة. صفحات أقل خبر سار فقط إن بقيت الحوادث تُكشف.
- أظهر التوزيعات وشارك البيانات مع المناوبة أولًا. الوردية المتوسطة تخفي حفنة ليالٍ فظيعة، والمناوبون أفضل من يحكم هل تطابق الأرقام تجربتهم.
تعريفات المقاييس
يعطي الجدول المجموعة الأساسية. كل قياس زمني أو عددي يذكر أين يبدأ وأين يتوقف وما يُستبعد. ويجب تعريف "خارج ساعات العمل" مرة لكل مناوبة نافذةً مكتوبة بالتوقيت المحلي، تشمل عطلات نهاية الأسبوع والعطلات الرسمية، لأن أفراد مناوبة موزعة قد يكون لهم ساعات محلية مختلفة.
| المقياس | التعريف | الصيغة | الوحدة | مصدر البيانات | ممارسة ITIL | المقابل في أجايل | التكرار |
|---|---|---|---|---|---|---|---|
| الصفحات لكل وردية | عدد الصفحات المسلَّمة إلى مناوبة خلال وردية واحدة | عدد الصفحات المسلَّمة بين بداية الوردية ونهايتها، عدّ واحد لكل وردية، بعد دمج الصفحات المكررة لمجموعة التنبيه نفسها ضمن 5 دقائق (نافذة الدمج إعداد للفريق). صفحات الاختبار والصفحات المرسلة خطأً مستبعدة. أبلغ بالوسيط والمئين 90 عبر الورديات، إضافة إلى أكثر وردية ازدحامًا | صفحات لكل وردية | أداة الاستدعاء؛ جدول المناوبة | إدارة الحوادث؛ إدارة المراقبة والأحداث | سياسة العمل غير المخطط؛ الوتيرة المستدامة | مراجعة أسبوعية، اتجاه شهري |
| حصة الصفحات خارج ساعات العمل | حصة الصفحات التي تصل خارج نافذة العمل المكتوبة | الصفحات المسلَّمة خارج نافذة العمل / كل الصفحات المسلَّمة، على الفترة. تُحدد النافذة لكل مناوبة بالتوقيت المحلي؛ والعطلات تُحتسب خارج النافذة | نسبة مئوية | أداة الاستدعاء؛ تقويم المناوبة | إدارة الحوادث؛ إدارة المراقبة والأحداث | اتفاقية العمل على الإتاحة | شهري |
| معدل مقاطعة الليل | كم مرة تتضمن وردية صفحة واحدة على الأقل في نافذة النوم المحمية | الورديات التي فيها صفحة واحدة على الأقل في نافذة النوم المحمية (مثلًا من 22:00 إلى 07:00 بالتوقيت المحلي، يحددها الفريق) / كل الورديات في الفترة. الصفحة التي يُقرّ بها آليًا بلا استجابة بشرية مستبعدة | نسبة مئوية من الورديات | أداة الاستدعاء؛ سجل الإقرار | إدارة الحوادث؛ إدارة القوى العاملة والمواهب | الوتيرة المستدامة؛ فحص صحة الفريق | شهري |
| حصة العمل الروتيني من الوقت | حصة وقت عمل المناوبة المصروفة على العمل الروتيني | الساعات التي تسجلها المناوبة على عمل مصنف روتينيًا / مجموع ساعات العمل التي تسجلها المناوبة، على شهر. الاجتماعات والتدريب والإجازات مستبعدة من البسط والمقام. يتبع التصنيف الخصائص الست للعمل الروتيني، ويطبقها الفريق | نسبة مئوية من الوقت | أخذ عينات الوقت أو وسوم المهام في متتبع العمل؛ مراجعة تصنيف الفريق | التحسين المستمر؛ إدارة النشر؛ إدارة طلبات الخدمة | حصة العمل غير المخطط؛ تخصيص السعة في العمل المخطط | شهري، مع مراجعة ربع سنوية للتصنيف |
| العمل الروتيني حسب المصدر | توزيع ساعات العمل الروتيني على مصادر مسماة مثل إعادة التشغيل اليدوي وطلبات الوصول وتجديد الشهادات وفرز التذاكر | ساعات العمل الروتيني لكل مصدر / مجموع ساعات العمل الروتيني، بسرد أعلى خمسة مصادر ومجموعة "أخرى". الاستثناءات نفسها لحصة العمل الروتيني من الوقت | نسبة مئوية من ساعات العمل الروتيني حسب المصدر | أخذ عينات الوقت أو وسوم المهام في متتبع العمل | إدارة المشكلات؛ إدارة طلبات الخدمة | قائمة بنود التحسين المتراكمة | ربع سنوي |
| معدل الصفحات المتكررة | حصة الصفحات الناتجة عن حالة سبق أن استدعت المناوبة ضمن نافذة معلنة | الصفحات التي تطابق مجموعة تنبيهها أو رمز سببها صفحة أسبق خلال 30 يومًا / كل الصفحات في الفترة. رمز السبب يضعه المستجيب عند الإغلاق؛ والرموز غير المضبوطة تُبلَّغ منفصلة | نسبة مئوية | أداة الاستدعاء؛ رموز أسباب سجل الحادثة | إدارة المشكلات؛ إدارة الحوادث | إجراءات الاستعادة الرجعية؛ قائمة الدين التقني المتراكمة | شهري |
| عمق المناوبة | كم مستجيبًا مؤهلًا يتشاركون جهاز الاستدعاء مقارنة بعدد الأدوار المطلوب ملؤها | عدد الأشخاص الذين أكملوا جاهزية الاستدعاء والمتاحين للورديات / عدد مواضع الورديات في دورة المناوبة. الإجازات والإعارة تقلل الإتاحة. يُبلَّغ نسبة لكل مناوبة، لا لكل شخص أبدًا | نسبة | جدول المناوبة؛ قائمة فحص الجاهزية | إدارة القوى العاملة والمواهب | الفريق متعدد الوظائف؛ مصفوفة المهارات | ربع سنوي |
| العمل الروتيني المزال | ساعات العمل الروتيني المتكرر التي أُخرجت من عمل المناوبة بتغيير أتمتة أو تصميم | ساعات العمل الروتيني الشهرية المقدرة لمصدر قبل التغيير ناقص الساعات نفسها بعده، مقيسة على دورتين على الأقل بعد التسليم. الساعات الموفَّرة بتنظيف لمرة واحدة مستبعدة | ساعات في الشهر | أخذ عينات الوقت قبل وبعد؛ تذكرة التحسين | التحسين المستمر؛ إدارة المشكلات | بند تحسين سُلِّم | ربع سنوي |
عدد الصفحات عدد مقاطعات لا حوادث: فحادثة واحدة قد تولد اثنتي عشرة صفحة. وتعتمد حصة العمل الروتيني من الوقت على تسجيل صادق، فعاملها تقديرًا متفقًا عليه.
التوصيات
عرّف المصطلحات قبل أن تعدّ
1. اكتب ما يُعدّ صفحة ووردية وخارج ساعات العمل. تعدّ الفرق أشياء مختلفة تحت الكلمة نفسها. فقد تكون الصفحة أي إشعار، أو تلك التي تبلغ إنسانًا فقط، أو التي تحتاج إجراءً فقط. اختر تعريفًا واحدًا، وحدد نافذة الدمج للمكررات، وسجّل نافذة العمل بالتوقيت المحلي. وبدون هذا ستتغير الأرقام حين تُعاد تهيئة أداة، وسيضلل الاتجاه.
2. اتفق على ما هو العمل الروتيني، بأمثلة من خدمتك أنت. ابدأ من الخصائص الست في كتاب SRE. اكتب قائمة قصيرة بأمثلة وغير أمثلة، مثل إعادة تشغيل مهمة عالقة (روتيني) وتصميم أداة استرداد جديدة (هندسة) واجتماع تخطيط (أعباء عامة). وراجع القائمة حين تظهر خلافات.
3. اختر كيف ستقيس حصة العمل الروتيني، وقبل حدودها. الخيارات الرخيصة أخذ عينات الوقت ووسوم المهام في متتبع العمل وتقدير قصير كل أسبوعين. ولا شيء منها دقيق، فاختر الأقل أعباءً وشغّله ربعًا واحكم على الاتجاه أكثر من القيمة المطلقة.
قِس الحمل على المناوبة
4. أبلغ بالصفحات لكل وردية توزيعًا. الوردية المتوسطة تخفي ما تشعر به المناوبة. أظهر الوسيط والمئين 90 وأكثر وردية ازدحامًا، وأضف ملاحظة عما حدث في تلك الوردية. وجود وسيط هادئ مع ذيل فظيع يعني بضع ليالٍ سيئة، وهذه مشكلة مختلفة عن مناوبة مشغولة باستمرار. انظر الموضوع 1.6، الإلمام الإحصائي لمقاييس الخدمة، لقراءة المئينات.
5. ضع التوقيت بجانب الحجم. تُظهر حصة الصفحات خارج ساعات العمل ومعدل مقاطعة الليل أين يقع الحمل. خمس صفحات في ساعات المكتب إزعاج؛ وخمس بين منتصف الليل والخامسة صباحًا كلفة مختلفة. أظهر الاثنين في الصفحة نفسها.
6. انظر إلى التوزيع عبر الورديات لا عبر الأشخاص. مناوبة تجمع فيها وردية متكررة واحدة (مثل عطلة نهاية الأسبوع أو تسليم الاثنين) معظم الصفحات تحتاج إصلاحًا مختلفًا عن مناوبة يتوزع فيها الحمل بالتساوي. أبلغ بحصة الصفحات بحسب موضع الوردية واليوم. وحين تُبلَّغ البيانات بالأفراد المسمين فتوقع أن تُقرأ ترتيبًا، فلا تنتج ذلك المنظور.
7. احتسب حمل الحوادث الكبرى منفصلًا. قد تولد حادثة كبرى مقاطعات في ليلة واحدة أكثر من شهر عادي. أبلغ بها سطرًا مستقلًا حتى لا يشوه حدث واحد الاتجاه (انظر الموضوع 3.4، مقاييس الحوادث الكبرى).
اربط الحمل بالأسباب وبالإصلاحات
8. اربط الصفحات بالمشكلات، وتتبع التكرارات. يُظهر معدل الصفحات المتكررة كم من الحمل يأتي من أسباب معروفة أصلًا. ومعدل تكرار مرتفع حجة لإدارة المشكلات لا لاستجابة أسرع. غذِّ أعلى الأسباب المتكررة إلى قائمة المشكلات المتراكمة وسجّل الرابط (انظر الموضوع 4.1، مقاييس إدارة المشكلات، والموضوع 4.6، الدين التقني والأخطاء المعروفة).
9. رتّب مصادر العمل الروتيني وهاجم الأكبر. يُظهر مخطط باريتو لساعات العمل الروتيني بحسب المصدر عادةً أن بضعة مصادر مسؤولة عن معظم الوقت. اختر الأكبر، وقرر هل يمكن إزالته بالتصميم أو أتمتته أو تسليمه للفريق المالك للسبب، وجدوِله كعمل الميزات. وفضّل إزالة الحاجة على أتمتة الخطوة، لأن الخطوة الآلية ما زالت تحتاج إلى صيانة.
10. قِس العمل الروتيني المزال لا الأتمتات المكتوبة. أتمتة لا يستخدمها أحد لا تزيل شيئًا. قِس ساعات العمل الروتيني قبل وبعد، على دورتين على الأقل، وسجّل جهد بناء الأتمتة وصيانتها. هذا هو العائد الصادق، ويمنع برنامج "أتمتة" يضيف سكربتات دون إزالة عمل. انظر الموضوع 3.7، مقاييس الخدمة الذاتية والأتمتة، لتبني المستخدمين للأتمتة.
أبقِ النظام مستدامًا
11. ضع حدود المناوبة في اتفاقية فريق، ثم راقب عمق المناوبة. اتفقوا على كم مرة يستطيع الشخص أن يكون مناوبًا، وكم ليلة متتالية مقبولة، وأي راحة تتبع ليلة سيئة. ويُظهر عمق المناوبة هل لدى المناوبة ما يكفي من المؤهلين للحد المتفق عليه. مناوبة اسمها ثمانية أشخاص لكنها فعليًا ثلاثة، لأن الآخرين ليسوا جاهزين بعد أو في إجازة، لا تحقق الحد، أيًّا كان ما يقوله الجدول.
12. استخدم الأرقام لتطلب شيئًا محددًا. رقم الحمل يدعم طلبًا: تغيير في التوظيف، أو وقتًا يُقتطع من عمل الميزات لسداد العمل الروتيني، أو تغييرًا في عتبات التنبيه، أو إيقاف خدمة. اذكر الطلب بجانب الرقم وإلا كف الناس عن التسجيل (انظر الموضوع 1.4، حوكمة المقاييس وملكيتها).
طرق التلاعب وضوابط الحماية
| المقياس | كيف يُتلاعب به | ضابط الحماية المقترن (مقياس أو ممارسة) |
|---|---|---|
| الصفحات لكل وردية | رفع عتبات التنبيه أو كتم التنبيهات فينخفض العدد؛ دمج تنبيهات غير متصلة في صفحة واحدة؛ نقل الصفحات إلى طابور تذاكر لا يراقبه أحد | تغطية الكشف والحوادث التي أبلغ عنها العملاء وفاتتها المراقبة (انظر الموضوع 5.5، مقاييس جودة المراقبة والتنبيهات)؛ زمن الكشف (انظر الموضوع 3.3، زمن الاستجابة للحوادث وحلّها) |
| حصة الصفحات خارج ساعات العمل | إعادة تعريف نافذة العمل لتكون أوسع؛ إعادة جدولة المهام وعمليات النشر لتنتقل الصفحات إلى ساعات المكتب دون تقليلها؛ إعادة تصنيف الصفحات "منخفضة الإلحاح" | الحجم الكلي للصفحات بجانب الحصة؛ نافذة العمل المكتوبة تحت ضبط التغيير؛ مراجعة ما انتقل |
| معدل مقاطعة الليل | تأخير الإقرار حتى الصباح؛ الإقرار الآلي بالصفحات؛ عدّ الصفحات التي بلغت إنسانًا فقط | زمن الإقرار بحسب الساعة (انظر الموضوع 3.3، زمن الاستجابة للحوادث وحلّها)؛ الصفحات بلا استجابة بشرية تُبلَّغ منفصلة؛ أثر العملاء ليلًا |
| حصة العمل الروتيني من الوقت | إعادة تصنيف العمل الروتيني "هندسة" أو "عمل مشاريع"؛ تسجيل أقل مما صُرف؛ وسم ما يسهل وصفه فقط | تدقيق دوري للبنود المصنفة من شخص خارج المناوبة؛ رأي الفريق نفسه في كيف شعر الأسبوع؛ حصة الوقت المصروفة على عمل التحسين المخطط |
| العمل الروتيني حسب المصدر | تقسيم مصدر كبير إلى عدة صغيرة فلا يبرز أي منها؛ ترك مصدر بلا اسم في "أخرى" | سقف لمجموعة "أخرى" (مثلًا أقل من خُمس ساعات العمل الروتيني، إعداد للفريق)؛ أخذ عينات من بنود "أخرى" كل ربع |
| معدل الصفحات المتكررة | إغلاق الصفحات برمز سبب جديد في كل مرة فتفوت المطابقات؛ توسيع رموز الأسباب حتى يصير كل شيء متميزًا؛ إطالة النافذة أو تقصيرها | تدقيق رموز الأسباب على عينة؛ تكرار مجموعة التنبيه نفسها عبر الحوادث (انظر الموضوع 4.1، مقاييس إدارة المشكلات) |
| عمق المناوبة | عدّ أشخاص لم يكملوا الجاهزية؛ عدّ أشخاص نادرًا ما يتوفرون؛ حشو الجدول | حصة الورديات التي غطتها المجموعة الاسمية فعلًا؛ عدد الورديات الفعلي بحسب الموضع، يُبلَّغ بلا أسماء؛ إكمال قائمة فحص الجاهزية |
| العمل الروتيني المزال | عدّ التنظيفات لمرة واحدة وفورات متكررة؛ تجاهل جهد بناء الأتمتة وصيانتها؛ ادعاء وفورات بلا قياس قبل وبعد | ساعات قبل وبعد مقيسة على دورتين؛ جهد صيانة الأتمتة؛ حصة العمل الروتيني من الوقت في الأرباع التالية |
القراءة الصحية مناوبة وسيط ورديتها هادئ وأسوأ ورديتها نادرة، مع صفحات قليلة ليلًا وحصة متناقصة من الصفحات المتكررة وحصة عمل روتيني تنخفض لأن المصادر أُزيلت لا لأنها أُعيد تصنيفها. وهي تُظهر أيضًا الجهد المبذول للوصول إلى ذلك: عمل تحسين يظهر في الخطة وممول ومُسلَّم. وإن انخفضت أعداد الصفحات بينما يبلّغ العملاء عن حوادث أكثر لم تلتقطها المراقبة، فالأرقام تتحسن بالنظر بعيدًا.
المفاضلات: المزايا والعيوب
| النهج | نقطة القوة | نقطة الضعف |
|---|---|---|
| عدّ الصفحات من أداة الاستدعاء | آلي ورخيص ويصعب الجدال فيه | يعدّ المقاطعات لا كلفتها؛ ضبط التنبيهات يغير العدد دون تغيير الحمل |
| أخذ عينات الوقت للعمل الروتيني | دقة معقولة لجهد متواضع | يحتاج انضباطًا؛ العينات الصغيرة مشوشة |
| الإبلاغ على مستوى المناوبة | يطابق كيفية تنظيم العمل؛ آمن للمشاركة على نطاق واسع | قد يخفي شخصًا يعاني؛ يحتاج قناة حوار داعمة بجانبه |
| سقف صارم للعمل الروتيني (مثل هدف كتاب SRE بإبقائه دون 50 في المئة من الوقت) | إشارة واضحة تطلق استجابة | يمكن بلوغ الرقم بإعادة التصنيف؛ يحتاج السقف دعم الإدارة |
التوتر المركزي بين القبول والاستثمار. من السهل معاملة الحمل العالي ثمنًا عاديًا لخدمة مهمة ومطالبة الناس بامتصاصه، ومن السهل وضع سقف لا يملك أحد سلطة إنفاذه. والطريق عبر ذلك أن تقرن كل قياس بقرار: عتبة يتوقف عندها الفريق ويتخذ إجراءً، ومالك مسمى للإجراء، وتاريخ للنظر مجددًا. وأرقام مستوى المناوبة آمنة وأحيانًا خشنة أكثر من اللازم. وحين يعاني شخص فالحوار ينتمي إلى ذلك الشخص ومديره، باستخدام روايته هو للأسبوع.
أسئلة للنقاش مع فريقك
1. كيف كان إحساس أكثر ورديتنا ازدحامًا في الربع الأخير، وماذا تقول الأرقام عنها؟ ابدأوا بالقصة قبل المخطط. اطلبوا من المناوبين وصف الوردية، ثم قارنوها بأرقام الصفحات لكل وردية ومقاطعة الليل. فإن قللت الأرقام من التجربة فاكتشفوا ما المفقود، مثل مكالمات غير مسجلة أو عمل بعد الصفحة. والتقطوا تلك القائمة تحسينًا تاليًا للقياس.
2. ما الذي نقول إنه عمل روتيني في فريقنا، وما الذي نقول إنه ليس كذلك؟ ضعوا خمس مهام حديثة أو ست على لوح واطلبوا من كل شخص تصنيفها روتينية أو هندسة أو أعباء عامة مقابل الخصائص الست. توقعوا الخلاف وعاملوه مفيدًا: فالخلافات تُظهر أين التعريف غامض. اتفقوا على تعريف عامل للربع القادم واكتبوا مثالين لكل صنف. وتجنبوا الجدل هل العمل ممتع، لأن السؤال هل هو يدوي ومتكرر وقابل للأتمتة.
3. أي تنبيه أو مهمة سنحذف أولًا لو استطعنا؟ اطلبوا التنبيه أو المهمة المتكررة التي يخشاها الجميع، ثم اسألوا ما الذي يمنعنا من إزالتها: كلفة الإصلاح أم مالك مفقود أم اعتقاد أنها مطلوبة. وعلى الميسّر أن يبحث عن عمل رخيص الإزالة ومالكه ليس في الغرفة. واختموا باختيار بند واحد لجولة التخطيط القادمة.
4. كم شخصًا يستطيع أخذ وردية فعلًا اليوم، وأي حدود مستعدون للالتزام بها؟ عُدّوا الجاهزية بصدق: من تدرب ومن متاح ومن عليه قيود. قارنوا النتيجة بحجم المناوبة الاسمي. واسألوا أي تكرار للاستدعاء وأي عدد ليالٍ متتالية تعدّه المجموعة مقبولًا، ثم افحصوا هل تحققه الممارسة الحالية.
5. لو خفضنا عدد صفحاتنا إلى النصف بحلول الربع القادم، فكيف سنعرف أننا لم نكف عن الاستماع فحسب؟ هذا السؤال عن ضابط الحماية. اطلبوا من المجموعة سرد طرق انخفاض عدد الصفحات دون تحسن الخدمة، مثل رفع العتبات أو دمج التنبيهات أو تجاهل مصدر. ثم اسألوا ماذا سنرى في تقارير العملاء وقياسات الكشف لو حدث ذلك. واتفقوا على ضابط الحماية وضعوه في الصفحة نفسها مع الحجم.
6. من يرى هذه الأرقام، وماذا نريد منه أن يفعل بها؟ تتبعوا مسار قياسات الحمل من المناوبة إلى المديرين والقادة. اسألوا ما الذي يُرجَّح أن يستنتجه كل جمهور، وهل يمكن قراءة أي منظور ترتيبًا. اتفقوا على الشكل الذي يصعد إلى أعلى: على مستوى المناوبة، بسياق، مع طلب مرفق. ودوّنوا أي قلق من إمكانية التعرف على الأفراد.
المنظورات الأربعة
فرق المنتج والتسليم
تولد فرق التسليم كثيرًا من حمل الاستدعاء عبر التغييرات التي تصدرها. والفرق التي تشغّل ما تبنيه تستطيع رؤية الرابط بين إصدار والصفحات التي تتبعه. وينبغي لها إدراج العمل الروتيني وعمل الاستدعاء في تخطيط السعة، وجدولة إزالة العمل الروتيني عملًا عاديًا في قائمة المهام، ومراقبة جودة التغيير بجانب السرعة (انظر الموضوع 2.8، مقاييس DORA).
فرق الخدمة والعمليات
تحمل فرق العمليات جهاز الاستدعاء في أغلب الأحيان وترى الكلفة البشرية أولًا. وينبغي لها امتلاك التعريفات، وتشغيل أخذ عينات الوقت أو الوسم، ونشر أرقام مستوى المناوبة، وإحضار أعلى مصادر العمل الروتيني والأسباب المتكررة إلى الفرق المالكة بالدليل. وخطرها امتصاص الحمل بهدوء بدافع الاحتراف. وسجل هادئ ووقائعي لليالي والأسابيع طلب مساعدة أنجع من شكوى، ولا ينبغي أن تتحول السجلات إلى ترتيب للأشخاص الذين استجابوا.
القيادة والحوكمة
يقرر القادة التوظيف والأولويات وهل يُموَّل عمل العمل الروتيني. والقائد الذي يقرأ حصة عمل روتيني مرتفعة أداءً رديئًا يعلّم الفريق خفضها بإعادة الوسم. والقائد الذي يقرؤها فاتورة عن عمل اختارت المنظمة ألّا تموله ينال بيانات صادقة وخطة. وينبغي للحوكمة أن تتوقع حدًّا لحمل المناوبة واستجابة مرئية حين يُتجاوز (انظر الموضوع 9.2، مقاييس الرضا والرفاه).
العملاء والمستخدمون
لا يرى المستخدمون المناوبة، لكنهم يشعرون بآثارها: تشخيص أبطأ من مستجيبين متعبين، وحوادث متكررة من أسباب غير مصلحة، ورحيل أشخاص كانوا يعرفون الخدمة. وحيث يمتد المستخدمون عبر مناطق زمنية كثيرة، تشكل احتياجاتهم خارج ساعات العمل المناوبة، وكلفة تغطيتها موضوع مشروع لحوار مستوى الخدمة (انظر الموضوع 5.1، مقاييس SLA وOLA وXLA).
عمليًا: مثال على أجايل ITIL
يشغّل متجر تجزئة إلكتروني متوسط الحجم منصة طلبات وخدمة حسابات العملاء وتكاملًا مع المستودع. وتتشارك مناوبة من ستة مهندسين من فريقي منتج ومجموعة عمليات صغيرة وردية استدعاء أسبوعية. كل الأرقام في هذا المثال توضيحية.
تُظهر المراجعة الشهرية وسيطًا من 9 صفحات لكل وردية ومئينًا 90 يساوي 31. وكانت أكثر الورديات ازدحامًا 58 صفحة. ونحو نصف الصفحات يصل خارج ساعات العمل، و6 من 8 ورديات في الربع تضمنت صفحة بين 22:00 و07:00. ويوحي أخذ عينات الوقت بأن العمل الروتيني يستغرق 55 في المئة من وقت العمل.
تزامنت أكثر الورديات ازدحامًا مع انتهاء صلاحية شهادة على تكامل المستودع استدعت المناوبة 22 مرة في ليلة واحدة. وتنبيه مساحة قرص واحد على خادم دفعي يمثل نحو ربع الصفحات، وأُغلق معظمها بمسح مجلد مؤقت يدويًا. ومعدل الصفحات المتكررة 41 في المئة. ويُظهر منظور باريتو أن تجديدات الشهادات اليدوية وتنظيف القرص وطلبات الوصول تستغرق معظم ساعات العمل الروتيني.
يأخذ الفريق ثلاثة بنود إلى الأسابيع الأربعة القادمة: أتمتة تجديد الشهادات، وإصلاح سبب امتلاء المجلد المؤقت، ونقل طلبات الوصول إلى نموذج خدمة ذاتية يملكه فريق الهوية. وتضع اتفاقية عمل حدًّا بوردية واحدة من أربع لكل شخص ويوم راحة بعد ليلة بثلاث صفحات أو أكثر. وعمق المناوبة 6 أشخاص لحاجة متفق عليها من 8، فيبدأ مهندسان من فريق ثالث تدريب الجاهزية.
ويظهر خطر التلاعب في المراجعة التالية. فقد انخفضت الصفحات لكل وردية إلى وسيط 4 ومئين 90 يساوي 12. ويسر ذلك أحد المديرين. وينبه عضو في الفريق إلى أن عتبة تنبيه القرص رُفعت 20 نقطة وأن الخادم الدفعي امتلأ مرتين بلا صفحة. وارتفعت حوادث أبلغ عنها العملاء بشأن طلبات دفعية متأخرة. والتقط ضابط الحماية، الحوادث التي أبلغ عنها العملاء وفاتتها المراقبة، ذلك. فيُعكس تغيير العتبة، ويُجدول تنظيف المجلد إصلاحًا، ويضيف الفريق قاعدة أن أي تغيير عتبة يُسجَّل بسببه ويُراجع بعد شهر. وحصة العمل الروتيني في الربع التالي 38 في المئة (توضيحي) وتُبلَّغ مع طريقة أخذ العينات بجانبها.
النظرة حسب القطاع
الشركات الناشئة. كثيرًا ما لا تكون لدى الفريق الصغير مناوبة رسمية، فالجميع في الاستدعاء طوال الوقت والكلفة غير مرئية. عُدّ الصفحات وإيقاظات الليل في جدول بيانات واكتب أكبر ثلاث مهام متكررة. والمؤسسون الذين يحملون جهاز الاستدعاء بأنفسهم خطر على الأعمال لا وسام التزام.
الأعمال الصغيرة. قد يدير شخص أو اثنان كل تقنية المعلومات. قِس ما لا يحتاج أدوات: المكالمات خارج الساعات والمهام المتكررة والإجازات التي لا يمكن أخذها. وقد يتولى مزود خدمات مُدارة جزءًا من المناوبة إن نص العقد على أزمنة الاستجابة والساعات. وعمق المناوبة كثيرًا ما يكون واحدًا، وهذا الخطر الرئيسي.
المؤسسات الكبرى. يجلب الحجم مناوبات تتبع الشمس ومنصات مشتركة وموردين عدة. عرّف القياسات مرة واحدة، وضع نوافذ عمل محلية لكل منطقة، وتجنب المتوسط عبر مناوبات لخدمات شديدة الاختلاف. وتحد قواعد التوظيف في بعض البلدان من واجب الاستدعاء وتشترط فترات راحة، وهذه تنتمي إلى حدود المناوبة.
الحكومة والقطاع العام. قد تحتاج الخدمات تغطية على مدار الساعة بحكم القانون أو العقد، والتوظيف مقيد بالمشتريات والتصنيف الوظيفي. وكثيرًا ما تحكم اتفاقيات التوظيف حدود المناوبة وقواعد الراحة، فقِس مقابلها وأبلغ حين تُتجاوز. والمساءلة العامة تجعل الإبلاغ الصريح أقيم وأصعب: ابنِ قناة آمنة لبيانات الحمل، واذكر صراحة أنها تصف النظام والتوظيف لا الأفراد (انظر الموضوع 8.5، التقارير التنظيمية والحكومية).
دراسة الجدوى: الدوافع والعائد على الاستثمار وإجمالي تكلفة الملكية
الدافع حماية جودة الخدمة والاحتفاظ بالأشخاص المهرة. فالمستجيبون المتعبون يشخصون ببطء أكبر، وحين يغادر ذوو الخبرة تذهب المعرفة معهم. واستبدال شخص له كلف حقيقية في التوظيف والتهيئة وانخفاض الإنتاج خلال فترة التعلم، وتستطيع المنظمة تقدير هذه الكلف من سجلاتها. والعمل الروتيني أيضًا يأخذ السعة من التحسين. وفريق يقضي معظم وقته في عمليات يدوية لا يستطيع تقليل الحوادث التي تسببها.
وكلفة القياسات متواضعة. فأداة الاستدعاء تعدّ الصفحات أصلًا، وأخذ عينات الوقت يكلف دقائق لكل شخص كل أسبوعين. والكلفة الأكبر التصرف بناءً على النتائج: وقت هندسي لإزالة العمل الروتيني، وتوظيف لمناوبة مستدامة، ووقت مراجعة. واحتسب صيانة الأتمتة كلفة، لأن خطوة آلية غير مصانة تصير حادثة الغد.
ويظهر العائد صفحات أقل من أسباب معروفة، ومقاطعات ليل أقل، وساعات عمل روتيني أُعيدت إلى عمل التحسين، وتسربًا أقل من المناوبة، وتشخيصًا أسرع. لا ينطبق رقم عالمي، فقدّر رقمك أنت. وبالنسبة لمصدر عمل روتيني، اضرب الساعات الشهرية في كلفة ساعية محملة متفق عليها مع المالية، وقارنها بجهد إزالته، وراجع بعد دورتين. وللاستدامة، سجّل المغادرات والغيابات الطويلة من المناوبة وقارنها بقياسات الحمل عبر الزمن، معاملًا الرابط فرضية تُختبر لا سببًا مثبتًا. وحيث يلزم رقم فاذكره تقديرًا وأظهر مدخلاته (انظر الموضوع 7.7، العائد على الاستثمار ودراسة الجدوى).
الأنماط المضادة والمزالق
- ترتيب الناس بالصفحات. يحول قياس نظام إلى درجة أداء ويعلّم المستجيبين تجنب الورديات وإخفاء المقاطعات. أبلغ بحسب المناوبة وموضع الوردية والخدمة.
- خفض الصفحات بكتم التنبيهات. ينخفض العدد ويضعف الكشف. اقرن الحجم بالكشف والحوادث التي أبلغ عنها العملاء، وراجع كل تغيير عتبة.
- تسمية كل شيء عملًا روتينيًا. تعريف واسع يشمل الاجتماعات والمشكلات الصعبة يدمر الإشارة. استخدم الخصائص الست واحتفظ بقائمة أمثلة.
- هدف عمل روتيني بلا سلطة خلفه. سقف لا يستطيع إطلاق قرار يصير رقمًا يتجادل فيه الناس. اتفق سلفًا على ما يحدث عند تجاوزه ومن يقرر.
- الأتمتة قبل الفهم. قد تُدمج الأتمتة عملية رديئة وتضيف صيانة. اسأل أولًا هل يمكن إزالة الحاجة بالتصميم، وقِس العمل الروتيني المزال بعدها.
- المتوسط عبر خدمات غير متشابهة. متوسط بين خدمة مستقرة وأخرى هشة لا يصف أيًّا منهما. أظهر كل خدمة ومناوبة منفصلة.
- القياس بلا فعل. أرقام حمل بلا استجابة تعلّم الناس أن البيانات لا تهم. أرفق بكل نتيجة قرارًا ومالكًا وتاريخ مراجعة.
نموذج النضج
| البُعد | 1 البدء | 2 التطوير | 3 التوحيد | 4 الإدارة | 5 التنسيق |
|---|---|---|---|---|---|
| التعريفات والبيانات | الصفحات والعمل الروتيني توصف بالإحساس؛ لا تعريف مشترك | بعض المناوبات تعدّ الصفحات؛ العمل الروتيني يُناقش ولا يُقاس | تعريف مكتوب واحد للصفحة والوردية وخارج ساعات العمل والعمل الروتيني؛ بيانات الاستدعاء تجمعها أداة | تُتتبع التوزيعات والتوقيت؛ تؤخذ عينات العمل الروتيني شهريًا وتُدقَّق | تُراجع التعريفات عبر الفرق والموردين؛ يُعدَّل جهد أخذ العينات بقيمة الأجوبة |
| استدامة المناوبة | غير رسمية؛ الأشخاص القلائل أنفسهم يمتصون جهاز الاستدعاء | توجد جداول؛ الحدود تُناقش ولا تُكتب | حدود مكتوبة للتكرار والراحة؛ عمق المناوبة معروف | تُراقب الحدود وتُراجع الانتهاكات بإجراء | تُتقاسم المناوبات عبر الفرق والموردين ويُوازن الحمل مع تغير الخدمات |
| استخدام الأرقام | تُستخدم للوم أو تُتجاهل | تُعرض على المديرين | تُعرض على المناوبة أولًا، مع القرارات التي تدعمها | تُقرن بضوابط حماية وتُراجع على إيقاع يقود إلى تغيير ممول | تُشارَك مع القادة والشركاء لتخطيط التوظيف ونطاق الخدمة |
قائمة التحقق
- الصفحة والوردية ونافذة خارج ساعات العمل ونافذة الدمج معرَّفة كتابةً.
- للعمل الروتيني تعريف مكتوب بأمثلة وغير أمثلة من خدمتنا.
- تُبلَّغ الصفحات لكل وردية وسيطًا ومئينًا عاليًا وأكثر وردية ازدحامًا.
- حصة الصفحات خارج ساعات العمل ومعدل مقاطعة الليل مبلَّغان بجانب الحجم.
- يُبلَّغ بالحمل لكل مناوبة وموضع وردية وخدمة، لا لكل شخص مسمى أبدًا.
- تؤخذ عينات حصة العمل الروتيني من الوقت وفق جدول، وطريقتها مكتوبة.
- أعلى خمسة مصادر عمل روتيني وأعلى أسباب الصفحات المتكررة في قائمة التحسين المتراكمة.
- حدود المناوبة وقواعد الراحة في اتفاقية فريق، ويُفحص عمق المناوبة كل ربع.
- لكل قياس حمل ضابط حماية في الصفحة نفسها، بما في ذلك الكشف والحوادث التي أبلغ عنها العملاء.
- تنتهي كل مراجعة بقرار ومالك وتاريخ.
- تُسجَّل تغييرات العتبات والتنبيهات بسبب وتُراجع بعد شهر.
مطالبات الذكاء الاصطناعي
راجع حمل مناوبة وابحث عن أنماط.
I help run the on-call rotation for [service or group of services]. The rotation
has [number] people and a shift length of [length]. Our working window is
[hours and time zone], and our protected sleep window is [hours]. Below is
anonymized paging data for [period], with columns [list columns]:
[paste data with names removed]
Describe the distribution of pages per shift, the share of pages out of hours,
and the share of shifts with a night interruption. Point out the busiest shifts,
repeating alert groups, and any pattern by day or shift position. Report at
rotation and service level only, never by person. Do not invent benchmark values
or targets. List your assumptions and what you could not determine from the data.
صنّف المهام عملًا روتينيًا أو هندسة أو أعباء عامة.
Our team runs [service]. We define toil as work that is manual, repetitive,
automatable, tactical, without enduring value, and growing with the service.
Here is a list of recent tasks with approximate hours: [paste list].
For each task, say whether it fits toil, engineering, or overhead, and name which
of the six characteristics it meets or misses. Flag tasks that are borderline and
say what extra information would settle them. Suggest how each toil source might
be removed by design, automated, or handed to an owning team, without inventing
savings. List your assumptions and questions for the team.
صُغ طرق التلاعب وضوابط الحماية لقياسات الحمل لدينا.
We report these on-call and toil metrics for [rotation name]: [list metrics with
definitions]. They are shown to [audience] to support [decision]. Our data comes
from [paging tool, work tracker, survey].
For each metric, list realistic ways it could improve without the rotation being
better off, and propose a guardrail metric or practice that would reveal each one.
Then say how the guardrail itself could be gamed. Do not invent benchmark values.
List your assumptions and any definitions I should tighten.
مهارات الذكاء الاصطناعي
- مهارة مقاييس أجايل ITIL: استخدمها للعثور على المواضيع وضوابط الحماية ذات الصلة حين تضيف قياس استدعاء أو عمل روتيني إلى لوحة.
- مهارة صيانة مقاييس أجايل ITIL: استخدمها للتحقق من أن تعديلات هذا الموضوع تُبقي كل مقياس مقرونًا بطريقة تلاعب وضابط حماية.
النقاط الرئيسية
- قِس الحمل على المناوبة، بحسب الوردية والخدمة ووقت اليوم، ولا ترتب الناس فيها أبدًا.
- عُدّ متى تحدث المقاطعات كما تعدّ كم عددها، لأن صفحات الليل تكلف أكثر من صفحات ساعات المكتب.
- عرّف العمل الروتيني تعريفًا ضيقًا بخصائصه الست، وقدّر حصته من الوقت بطريقة بسيطة، واحكم على الاتجاه.
- اربط الصفحات ومصادر العمل الروتيني بعمل المشكلات وبتغييرات الأتمتة أو التصميم، وقِس العمل الروتيني المزال فعلًا.
- اقرن كل قياس حمل بضابط حماية مثل الكشف والحوادث التي أبلغ عنها العملاء، حتى لا تُشترى أرقام أدنى بالنظر بعيدًا.
- عامل الحمل الثقيل طلبًا للاستثمار، بقرار ومالك وتاريخ مراجعة.
المراجع والقراءة الإضافية
- Beyer, B., Jones, C., Petoff, J., and Murphy, N. R. (eds.), Site Reliability Engineering: How Google Runs Production Systems, O'Reilly Media, 2016. Chapter "Eliminating Toil", https://sre.google/sre-book/eliminating-toil/
- Beyer, B., Jones, C., Petoff, J., and Murphy, N. R. (eds.), Site Reliability Engineering: How Google Runs Production Systems, O'Reilly Media, 2016. Chapter "Being On-Call", https://sre.google/sre-book/being-on-call/
- Beyer, B., Murphy, N. R., Rensin, D. K., Kawahara, K., and Thorne, S. (eds.), The Site Reliability Workbook: Practical Ways to Implement SRE, O'Reilly Media, 2018. Chapter "Eliminating Toil", https://sre.google/workbook/eliminating-toil/
- Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
- Forsgren, N., Storey, M.-A., Maddila, C., Zimmermann, T., Houck, B., and Butler, J., "The SPACE of Developer Productivity," ACM Queue, 19(1), 2021.
- Wikipedia, On-call.
- Wikipedia, Site reliability engineering.
- Wikipedia, Incident management.
- Wikipedia, Sleep deprivation.
- Wikipedia, Alarm fatigue.
- Wikipedia, Occupational burnout.
- Wikipedia, Pareto chart.