الملخص والدافع

كل تغيير في خدمة حية يحمل احتمالًا ما أن يجعل الأمور أسوأ. والأسئلة العملية: كم مرة يحدث ذلك، وكم عملًا غير مخطط يخلق، وكم بسرعة يتعافى الفريق. ويغطي هذا الموضوع القياسات التي تجيب عنها: حصة التغييرات التي تفشل، وحصة التي تحتاج مسار طوارئ، ومعدلا التراجع والإصلاح العاجل، وإعادة العمل التي تتبع تغييرًا سيئًا. ويغطي أيضًا أقل أجزاء الموضوع بريقًا، وهو الاتفاق على ما يُعدّ فشلًا أصلًا.

بعض المصطلحات أولًا. في ITIL 4 تغطي الممارسة المسماة تمكين التغيير إضافة أي شيء قد يؤثر في خدمة أو تعديله أو إزالته. فالـتغيير (change) أوسع إذن من نشر شيفرة: يشمل تعديل تهيئة أو تجديد شهادة أو قاعدة جدار ناري أو ترحيل قاعدة بيانات. والتغيير القياسي (standard change) مفوَّض مسبقًا ومنخفض الخطر، والتغيير العادي (normal change) يمر بالتقييم، والتغيير الطارئ (emergency change) يُجرى عاجلًا، عادةً لاستعادة خدمة أو سد ثغرة جسيمة. والنشر (deployment) فعل وضع نسخة من البرمجيات في بيئة، بينما الإصدار (release) يجعل قدرة متاحة للمستخدمين. والفرق التي تستخدم مفتاح ميزة تستطيع نشر الشيفرة دون إصدارها (انظر الموضوع 4.5، مقاييس الإصدار والنشر).

وفشل التغيير (change failure) تغيير يؤدي إلى تدهور الخدمة أو يحتاج معالجة. وتتخذ المعالجة أشكالًا عدة. فـالتراجع (rollback) يعيد النظام إلى حالته السابقة. والإصلاح العاجل (hotfix) رقعة عاجلة تُطبَّق خارج إيقاع الإصدار العادي. وإصلاح التقدم للأمام (roll-forward) يشحن تغييرًا جديدًا فوق المعطوب. وإعادة العمل (rework) هي الجهد غير المخطط المصروف في إعادة أو إصلاح شيء كان يُفترض أنه منتهٍ. وفي بيئة التسليم المستمر حيث تتدفق تغييرات صغيرة إلى الإنتاج كثيرًا، تكون هذه القياسات الدليل الرئيسي على هل تكلف السرعةُ الاستقرارَ.

وينظر التقليدان إلى الحدث نفسه بشكل مختلف. فرؤية ITIL منظمة حول سجل التغيير: هل صُرّح بالتغيير، وهل نجح، وهل سُجلت النتيجة؟ والتغيير الناجح على الورق قد يسبب حادثة بعد ساعة. ورؤية أجايل منظمة حول عنصر العمل والنشر: هل صمد تعريف الإنجاز عند الفريق، وهل سبب التغيير عملًا غير مخطط قريبًا؟ ولا رؤية كاملة وحدها. ويتعامل البحث خلف برنامج DORA مع معدل فشل التغيير ومعدل إعادة عمل النشر بوصفهما قياسَي "عدم الاستقرار" بجانب قياسات الإنتاجية (انظر الموضوع 2.8، مقاييس DORA، الذي يعرّفهما على مستوى البرنامج). ويتعمق هذا الموضوع في الآليات: كيف يُعرَّف الفشل، وكيف تُربط الحوادث بالتغييرات، وكيف يُعدّ العمل الطارئ، وكيف يُتلاعب بالأرقام.

وينطبق تحذير من البداية. تصف هذه القياسات فريقًا أو خدمة أو خط تسليم. ولا تصف شخصًا أبدًا. فمعدل فشل تغيير مرتبط بمهندس فرد يعلّم الناس تجنب العمل الخطر القيّم، وتقسيم التغييرات حتى تبدو الأعداد جيدة، والكف عن الإبلاغ عن المشكلات (انظر الموضوع 1.2، قانون غودهارت وعلم نفس المقاييس). وقانون غودهارت يعض بقوة هنا، لأن "إخفاقات أقل" سهلة التحقق بتسجيل إخفاقات أقل.

وتنتمي أزمنة الحوادث إلى الموضوع 3.3، زمن الاستجابة للحوادث وحلّها، وأسوأ الحوادث إلى الموضوع 3.4، مقاييس الحوادث الكبرى، وتدفق الموافقة وحصة التغيير القياسي إلى الموضوع 4.3، مقاييس تمكين التغيير، والأسباب الجذرية إلى الموضوع 4.1، مقاييس إدارة المشكلات، والمراجعة المكتوبة إلى الموضوع 4.2، مقاييس تحليل ما بعد الحادثة والتعلّم.

المبادئ الأساسية

  • يحتاج الفشل تعريفًا مكتوبًا واحدًا. الفرق التي تقرر حالة بحالة تنتج أرقامًا لا يمكن تتبع اتجاهها أو مقارنتها، ويحل الجدال حول التعريف محل الجدال حول العمل.
  • يجب أن يكون الفشل قابلًا للتتبع إلى تغييره. بدون رابط مسجل بين حادثة أو تراجع أو إصلاح عاجل والتغيير الذي سببه، يكون معدل الفشل تخمينًا.
  • عُدّ كل مسار معالجة. التراجع والإصلاح العاجل والتقدم للأمام والحل الالتفافي اليدوي أربع طرق إلى الحدث نفسه. والقياس الذي يعدّ أحدها يكافئ الفرق على اختيار آخر.
  • اقرأ الفشل بجانب السرعة والاستعادة. يمكن تحسين معدل فشل تغيير منفردًا بتغيير أقل تكرارًا، وهذا نادرًا ما يكون الغاية. اقرنه بزمن الانتظار وتكرار النشر وزمن الاستعادة.
  • العينات الصغيرة تحتاج أعدادًا لا نسبًا فقط. فريق بثمانية تغييرات في شهر وفشل واحد له معدل فشل 12.5 في المئة لا يقول شيئًا تقريبًا، فأظهر الأعداد واستخدم نافذة أطول (انظر الموضوع 1.6، الإلمام الإحصائي لمقاييس الخدمة).
  • الطارئ إشارة لا خطيئة. حصة ثابتة مفسَّرة من التغييرات الطارئة عادية. والحصة المتصاعدة تشير عادةً إلى مشكلات جودة أو تخطيط أو كشف في المنبع.

تعريفات المقاييس

تعتمد قياسات الفشل وإعادة العمل على ضم سجل التغيير وسجل النشر وأداة الحوادث. يبيّن كل تعريف أدناه ما يُعدّ وما يُستبعد وأين تبدأ الساعة وتتوقف. وينبغي للفرق نسخ التعريفات إلى سجل مقاييسها وتعديلها بسبب معلن.

المقياس التعريف الصيغة الوحدة مصدر البيانات ممارسة ITIL المقابل في أجايل التكرار
معدل فشل التغيير حصة التغييرات في الإنتاج التي تسبب تدهور الخدمة أو تحتاج معالجة التغييرات التي احتاجت تراجعًا أو إصلاحًا عاجلًا أو إصلاح تقدم للأمام أو حادثة مرتبطة ضمن نافذة الفشل / كل التغييرات في الإنتاج المكتملة في الفترة؛ تبدأ النافذة عند إتمام التغيير وتتوقف بعد عدد ثابت من الأيام (مثل 7)، مكتوب في سجل المقاييس؛ التغييرات ما زالت داخل النافذة تُبلَّغ منفصلة وتُستبعد من المعدل حتى تُغلق النافذة نسبة مئوية سجلات التغيير أو سجل النشر مضمومًا إلى أداة الحوادث وقائمة الإصلاحات العاجلة تمكين التغيير؛ إدارة الحوادث تعريف الإنجاز؛ العيوب المتسربة شهري، على نافذة متحركة من 90 يومًا
حصة التغيير الطارئ حصة التغييرات المجراة عبر مسار الطوارئ التغييرات المسجلة طارئة / كل التغييرات المكتملة في الفترة؛ الطارئ يعني أن التقييم العادي تُجوّز أو اختُصر بدافع الإلحاح، وتُستبعد التغييرات القياسية المفوَّضة مسبقًا من العددين نسبة مئوية حقل نوع سجل التغيير تمكين التغيير العمل غير المخطط وفئة خدمة التعجيل شهري
معدل التراجع حصة التغييرات التي عُكست إلى نسخة سابقة التغييرات المعكوسة بعد بلوغ الإنتاج / كل التغييرات في الإنتاج في الفترة؛ التراجع قبل أن يبلغ التغيير أي مستخدم (مثل إصدار تجريبي محدود أُوقف عند خطوته الأولى) يُحتسب منفصلًا نسبة مئوية سجل النشر وأداة الإصدار إدارة الإصدار؛ إدارة النشر ممارسات خط التسليم والإصدار شهري
معدل الإصلاح العاجل حصة التغييرات التي هي رقع عاجلة تُطبَّق خارج مسار الإصدار العادي التغييرات الموسومة أو المتفرعة إصلاحًا عاجلًا / كل التغييرات في الإنتاج في الفترة؛ يشمل المقام الإصلاحات العاجلة نفسها نسبة مئوية فروع أو وسوم التحكم في الإصدارات وسجل النشر تمكين التغيير؛ إدارة الحوادث العمل غير المخطط؛ التعجيل شهري
معدل إعادة عمل النشر حصة عمليات النشر التي كانت إصلاحات غير مخططة لمشكلة في نشر أسبق عمليات النشر في الإنتاج التي تصلح عيبًا أو فشلًا في نشر حديث أسبق، ضمن نافذة الفشل نفسها / كل عمليات النشر في الإنتاج في الفترة؛ يُستبعد عمل المتابعة المخطط من خارطة الطريق نسبة مئوية سجل النشر برابط أو وسم "يصلح" ومتتبع العمل تمكين التغيير؛ التحسين المستمر إعادة العمل؛ العيوب المتسربة؛ طلب الفشل شهري
معدل ربط التغيير بالحادثة حصة الحوادث المحلولة التي تسجل هل سبّبها تغيير، وأي تغيير الحوادث ذات حقل "سببها تغيير" مكتمل (نعم أو لا، مع معرّف التغيير حين نعم) / الحوادث المحلولة في الفترة؛ تتوقف الساعة حين تُغلق الحادثة نسبة مئوية أداة الحوادث وسجلات التغيير إدارة الحوادث؛ تمكين التغيير مراجعة ما بعد الحادثة؛ تعريف الإنجاز شهري
الاتفاق على تعريف الفشل الاتفاق بين مراجعَين على هل فشلت عينة من التغييرات التغييرات المأخوذة في العينة التي يصل فيها مراجعان مستقلان إلى الحكم نفسه بالفشل باستخدام التعريف المكتوب / التغييرات في العينة؛ عينة من 20 تغييرًا على الأقل تُسحب عشوائيًا كل ربع نسبة مئوية ورقة مراجعة العينة محفوظة مع سجل المقاييس التحسين المستمر؛ القياس والإبلاغ الاستعادة الرجعية ربع سنوي

ملاحظتان على الجدول. أولًا، يتداخل معدل الفشل ومعدل إعادة العمل لكنهما يختلفان: فالفشل المعكوس بلا نشر جديد يُحتسب في معدل الفشل ولا يُحتسب في معدل إعادة العمل. وثانيًا، الوحدة هي التغيير أو النشر لا الحادثة، لأن تغييرًا واحدًا قد يسبب ثلاث حوادث وحادثة واحدة قد تأتي من ثلاثة تغييرات.

التوصيات

اكتب تعريف الفشل قبل جمع أي بيانات

اتفق على ما يعنيه "فشل" وضعه في سجل المقاييس. تعريف عملي هو أن التغيير فشل إذا، ضمن نافذة معلنة بعد الإتمام، جرى التراجع عنه أو احتاج إصلاحًا عاجلًا أو إصلاح تقدم للأمام أو ارتبط بحادثة من شدة معلنة أو أعلى. بيّن النافذة (7 أيام شائعة، والقيمة الصحيحة تعتمد على كم بسرعة تُظهر خدماتك المشكلات)، وعتبة شدة الحادثة، ومن يقرر في حالة متنازع عليها. واكتب خمسة أمثلة محلولة على الأقل، بينها حرجة مثل تغيير أضعف الأداء دون أي انقطاع. وأعد النظر في التعريف سنويًا وسجّل التغييرات بأسبابها، ليمكن إعادة صياغة خط الاتجاه إن تحركت القاعدة.

اربط الإخفاقات بالتغييرات في سجل الحادثة

أضف حقلًا مطلوبًا إلى سجل الحادثة: سببها تغيير، نعم أو لا، ومعرّف التغيير حين نعم. ينبغي أن يُملأ الحقل أثناء الحل ويُفحص في مراجعة ما بعد الحادثة (انظر الموضوع 4.2، مقاييس تحليل ما بعد الحادثة والتعلّم). وتتبع معدل الربط قياسًا مستقلًا. فإن كان نصف الحوادث فقط يحمل الحقل فمعدل الفشل يقلل من الحقيقة بمقدار مجهول، وينبغي أن تقول ذلك بجانب الرقم. وأتمت التخمين الأول حيث تستطيع، مثل سرد التغييرات المكتملة على الخدمة المتأثرة في الساعات التي سبقت بدء الحادثة، ودع إنسانًا يؤكده.

عُدّ كل مسارات المعالجة لا واحدًا

عرّف فشلًا واحدًا من عدة إشارات. اسحب التراجعات من أداة النشر، والإصلاحات العاجلة من التحكم في الإصدارات أو سجل الإصدار، وإصلاحات التقدم للأمام من رابط "يصلح"، والحوادث من أداة الحوادث، ثم أزل التكرار حسب التغيير. فالفريق الذي يعدّ التراجعات فقط سيرى الإخفاقات تختفي في يوم يتحول فيه إلى الإصلاح للأمام. واحتفظ بكل مسار تفصيلًا منفصلًا أيضًا، لأن المزيج يروي قصة: إصلاحات عاجلة كثيرة وتراجعات قليلة توحي بأن التراجع صعب، وهذا يستحق الإصلاح بحد ذاته.

عامل حصة التغيير الطارئ سؤالًا لا درجة

راجع التغييرات الطارئة مجموعةً لا هدفًا. كل ربع اقرأها كلها وصنّف الأسباب: استعادة خدمة، أو سد ثغرة، أو طلب عمل متأخر، أو خطوة تخطيط فائتة، أو مسار موافقة أبطأ من أن يناسب العمل العادي. والأخيران مشكلتا نظام ينبغي إصلاحهما بتحسين المسار القياسي، حتى لا يحتاج الناس إلى تجاوزه (انظر الموضوع 4.3، مقاييس تمكين التغيير). وحصة صفر مريبة، لأن الطوارئ الحقيقية تقع. والحصة المتصاعدة باطراد تستحق سجل مشكلة (انظر الموضوع 4.1، مقاييس إدارة المشكلات).

قِس إعادة العمل طلب فشل

تتبع إعادة العمل بوصفها العمل الذي خلقه فشل أسبق. فكرة طلب الفشل تأتي من تصميم الخدمة: طلب موجود لأن شيئًا لم يُؤدَّ صحيحًا من المرة الأولى. وبمصطلحات التسليم، عُدّ عمليات النشر وعناصر العمل التي غرضها الوحيد تصحيح تغيير حديث. وهذا يرتبط مباشرة بالتقسيم بين المخطط وغير المخطط (انظر الموضوع 2.9، العمل التشغيلي والعمل غير المخطط). واستخدم حصة السعة المصروفة على إعادة العمل بادئًا للحوار مع مالك المنتج، لأنها تحول معدلًا مجردًا إلى مفاضلة عما يُعمل عليه بعد ذلك.

أبلغ بالمعدلات مع الأعداد والتوزيعات ونافذة

أظهر الأعداد بجانب النسب، واستخدم نافذة متحركة. معدل فشل شهري لفريق ينشر عشر مرات مشوش. استخدم نافذة متحركة من 90 يومًا، وأظهر عدد التغييرات والإخفاقات خلف المعدل، وأعطِ إشارة تقريبية لعدم اليقين (انظر الموضوع 1.6، الإلمام الإحصائي لمقاييس الخدمة). وللاستعادة أظهر الوسيط والمئين 85 للزمن من الفشل إلى الاستعادة لا متوسطًا. وحين يكون لخدمة تغييرات قليلة جدًا فاحكِ القصة بقائمة الإخفاقات الفعلية بدل معدل.

اقرن الفشل بالسرعة حتى لا يختبئ التحسن في أي منهما

اعرض دائمًا معدل فشل التغيير بجانب زمن الانتظار وتكرار النشر. إن انخفض معدل الفشل بينما انخفض تكرار النشر بحدة وطال زمن الانتظار فقد يكون الفريق يجمّع التغييرات، مما يرفع خطر كل منها. وإن ارتفعت السرعة وثبت معدل الفشل فالنظام يتحسن في التغيير. والاقتران هو الدفاع الرئيسي ضد التلاعب وضد الاعتقاد المريح بأن نشرًا أقل يعني نشرًا أأمن (انظر الموضوع 2.8، مقاييس DORA).

استخدم الأرقام لتحسين التغيير نفسه

حوّل بيانات الفشل إلى تجارب هندسية. انظر إلى السمات المشتركة للتغييرات الفاشلة: الحجم، ووقت اليوم، والنوع، وعدد الأشخاص المعنيين، وهل مست مكونات مشتركة، وهل كانت تغطية الاختبار رقيقة. ثم جرّب تجربة صغيرة قابلة للعكس واحدة مثل دفعات أصغر، أو اختبار انحدار آلي لمنطقة خطرة، أو إصدار تجريبي محدود للتغيير الخطر التالي، أو مفتاح ميزة يفصل النشر عن الإصدار. وأعد القياس بعد نافذة كاملة. الغاية تغيير أفضل، والمقياس المحسَّن دليل فقط.

راجع القياسات معًا في منتدى بلا لوم

أجرِ مراجعة شهرية للتغييرات الفاشلة مع من أجروها. لجدول الأعمال ثلاثة بنود: الأعداد والاتجاه، وتغييران أو ثلاثة فاشلة مختارة للدراسة، وإجراء تحسين واحد بمالك. استخدم ممارسة المراجعة بلا لوم، ليصف الناس ما كانوا يعرفونه حينها. وانشر ملاحظات المراجعة مع القياسات. فإن تردد الناس في الإبلاغ عن الإخفاقات بسبب كيفية استخدام الأرقام فأصلح ذلك قبل تغيير أي شيء آخر (انظر الموضوع 11.3، إطلاق المقاييس دون زرع الخوف).

طرق التلاعب وضوابط الحماية

المقياس كيف يُتلاعب به ضابط الحماية المقترن (مقياس أو ممارسة)
معدل فشل التغيير تضييق نافذة الفشل؛ عدم ربط الحوادث بالتغييرات؛ تصنيف تغيير سيئ "طلب خدمة" أو "صيانة"؛ الإصلاح للأمام وتسميته تغييرًا جديدًا؛ جمع تعديلات كثيرة في تغيير واحد ليغطيها فشل واحد معدل ربط التغيير بالحادثة؛ تدقيق بعينة ربع سنوية مقابل قائمة الحوادث؛ الاتفاق على تعريف الفشل؛ زمن الانتظار وتكرار النشر بجانبه
حصة التغيير الطارئ توجيه العمل العاجل عبر المسار القياسي بتقييم خطر كاذب؛ توجيه العمل العادي طارئًا لتجنب الموافقة؛ تقسيم طارئ إلى عدة تغييرات عادية قراءة ربع سنوية لكل التغييرات الطارئة؛ تصنيف الأسباب ومراجعتها؛ حصة التغيير القياسي وزمن انتظار الموافقة (انظر الموضوع 4.3، مقاييس تمكين التغيير)
معدل التراجع الإصلاح للأمام لتجنب تسجيل تراجع؛ إبقاء نسخة معطوبة حية؛ حبس التغييرات عن الإنتاج فلا يوجد ما يُعكس معدل الإصلاح العاجل ومعدل إعادة العمل بجانبه؛ توزيع زمن الاستعادة؛ عينة من الحوادث مقابل سجل النشر
معدل الإصلاح العاجل عدم وسم الإصلاحات العاجلة؛ تمريرها عبر الفرع العادي؛ تسمية إصلاح عاجل "تحسينًا صغيرًا" معدل إعادة عمل النشر؛ تدقيق الفروع والوسوم؛ حصة العمل غير المخطط (انظر الموضوع 2.9، العمل التشغيلي والعمل غير المخطط)
معدل إعادة عمل النشر عدم ربط الإصلاحات بالنشر الأصلي؛ وسم إصلاح "مخططًا"؛ ضم الإصلاح إلى ميزات جديدة رابط "يصلح" مطلوب في عمليات النشر التصحيحية؛ مراجعة عينة من عمليات النشر الموسومة مخططة؛ معدل فشل التغيير بجانبه
معدل ربط التغيير بالحادثة ملء الحقل بـ"لا" دون فحص؛ ترك الحقل يأخذ "لا" افتراضيًا؛ إغلاق الحوادث بالجملة لرفع النسبة فحص عينة من إجابات "لا" في مراجعة ما بعد الحادثة؛ لا قيمة افتراضية؛ تعليقات المراجع على عينة
الاتفاق على تعريف الفشل اختيار أمثلة سهلة للعينة؛ مراجعون هم أنفسهم من يُقاسون؛ تخفيف التعريف ليتفق الجميع عينة عشوائية يسحبها شخص خارج الفريق؛ إدراج حالات حدية عن قصد؛ نشر الخلافات وإصلاح التعريف

القراءة الصحية تبدو هكذا: معدل الفشل في مدى يفهمه الفريق ويشرحه، ومعدل الربط مرتفع بما يكفي ليوثق بمعدل الفشل، والتغييرات الطارئة قليلة ومفسَّرة، والتراجعات والإصلاحات العاجلة قصيرة ومتدرَّب عليها. وتُبلَّغ الإخفاقات بسرعة وتُناقش بلا لوم. ومعدل فشل منخفض بشكل غير طبيعي مع معدل ربط منخفض وتكرار نشر يتناقص وأحجام دفعات تنمو تحذير لا نجاح. وعامل أي تحسن مفاجئ محفزًا لفحص الجهاز أولًا (انظر الموضوع 1.5، مصادر البيانات والأجهزة القياسية).

المفاضلات: المزايا والعيوب

النهج نقطة القوة نقطة الضعف
تعريف فشل صارم وآلي متسق ورخيص التكرار وسهل تتبع الاتجاه يفوته التدهور الدقيق؛ قد يعدّ تراجعات حميدة إخفاقات
مراجعة حكم لكل تغيير يلتقط السياق والشدة بطيئة وذاتية ومفتوحة للضغط والانجراف
نافذة فشل طويلة (أسابيع) تلتقط الإخفاقات المتأخرة تطمس السبب والنتيجة؛ لا يمكن الإبلاغ عن التغييرات الحديثة بعد
عدّ كل مسارات المعالجة يصعب التلاعب به بتبديل المسار يحتاج ضم عدة مصادر بيانات بعناية

استخدم تعريفًا آليًا أساسًا، وأضف مراجعة بشرية بالعينات، وحسّن الضم بين التغييرات والحوادث قبل بناء أي شيء آخر.

أسئلة للنقاش مع فريقك

1. ماذا يُعدّ تغييرًا فاشلًا هنا بالضبط، وهل يمكن أن يختلف اثنان منا على التغيير نفسه؟ خذ خمسة تغييرات حديثة واطلب من كل شخص التصويت هل فشلت. قارن الأصوات والأسباب. تُظهر الخلافات أين التعريف المكتوب رقيق. واتفقوا على قاعدة للحالات الحرجة، مثل هبوط الأداء دون انقطاع، واكتبوها بمثال.

2. كيف نعرف أي الحوادث سببها تغيير؟ اسأل كيف يُسجَّل الرابط اليوم ومن يملؤه. راجع عشر حوادث حديثة وانظر كم منها لها تغيير مرفق، وكم ينبغي. وناقش هل الحقل اختياري، وهل يأخذ "لا" افتراضيًا، ومن يفحصه. وعلى الميسّر أن يستهدف تحسينًا ملموسًا في السجل، مثل حقل مطلوب بلا قيمة افتراضية.

3. أي مسارات المعالجة نستخدمها، وهل تُعدّ كلها؟ اسرد التراجع والإصلاح العاجل وإصلاح التقدم للأمام والحل الالتفافي اليدوي وإطفاء مفتاح الميزة. ولكل منها اسأل أين يُسجَّل الحدث وهل يغذي معدل الفشل. لاحظ المسارات التي لا تترك أثرًا. وكثيرًا ما يكشف النقاش أن مسار الفريق المفضل هو الذي لا يستطيع القياس رؤيته.

4. متى كان آخر تغيير طارئ لدينا، وهل كان يمكن تجنبه؟ مرّ على آخر ثلاثة أو أربعة. اسأل ما الذي جعل كلًّا منها عاجلًا، وما كان معروفًا أبكر، وكيف كان سيبدو مسار قياسي أفضل. وافصل الطوارئ الحقيقية عن الاكتشافات المتأخرة والموافقات البطيئة. واتفقوا على إصلاح واحد للمسار العادي يزيل سببًا متكررًا للطوارئ.

5. كم من أسبوعنا يذهب إلى إصلاح تغييرات حديثة؟ قدّر حصة السعة المصروفة على إعادة العمل في آخر أربعة أسابيع باستخدام المتتبع لا الذاكرة. قارن التقدير بالمتتبع. وتحدثوا عما يكلفه الرقم من عمل مخطط وكيف سيستخدمه مالك المنتج. واختاروا نمط فشل واحدًا وتجربة واحدة لتقليله.

6. لو انخفض معدل فشلنا إلى النصف الربع القادم، فهل سنصدقه؟ تخيل العنوان واسأل ماذا يجب أن يصح أيضًا: معدل ربط ثابت، وتكرار نشر ثابت، واستعادة سريعة، ولا فئات جديدة من "الصيانة". وناقش أي من هذه الفحوص يجريها الفريق أصلًا وأيها مفقود. واتفقوا على كيفية التحقيق في تحسن مفاجئ قبل الاحتفال به.

المنظورات الأربعة

فرق المنتج والتسليم

تملك فرق التسليم التغييرات، فهي تملك تعريف الفشل والإصلاحات. ابدأ من العمل: انظر إلى التغييرات الفاشلة في المراجعة، وابحث عن السمات المشتركة، وجرّب دفعات أصغر أو اختبارات أفضل أو مفاتيح. وتتبع إعادة العمل جزءًا من اللوحة، لتكون الإصلاحات غير المخططة مرئية بجانب العمل المخطط. وأبقِ الأرقام لتعلم الفريق نفسه، وقاوم مشاركة بيانات على مستوى الأفراد. وإن عُرض قياس على القادة فينبغي أن يستطيع الفريق شرح كل تغيير فيه.

فرق الخدمة والعمليات

ترى فرق العمليات عواقب التغيير في طابور الحوادث وهي الأفضل موقعًا لصيانة الرابط بين الحوادث والتغييرات. تستطيع إضافة الحقل المطلوب، وفحصه في خطوة الحل، وإعادة النتائج إلى فريق التسليم بلا لوم. وتملك العمليات أيضًا مسار الطوارئ وينبغي أن تراجع استخدامه. وشارك معلومات مسارات الاستعادة وتدرّب على التراجعات مع فرق التسليم، لأن أفضل طريق لتقليل كلفة الفشل عادة مشتركة في جعل التغيير قابلًا للعكس (انظر الموضوع 3.3، زمن الاستجابة للحوادث وحلّها).

القيادة والحوكمة

ينبغي للقادة أن يطلبوا الاتجاهات حسب الخدمة، وكلا نوعي قياس عدم الاستقرار مع السرعة، وتجارب التحسين خلفها. وتجنبوا الأهداف الثابتة مثل "معدل فشل دون 5 في المئة"، فهي تدعو إلى إعادة التعريف، وتجنبوا استخدام الأرقام في التقييمات الفردية. ويمكن لهيئات الحوكمة استخدام البيانات دليلًا على هل مسار موافقة أخف آمن، بالتحقق من أن الفشل والاستعادة بقيا ثابتين مع تخفيف الضوابط. والاتجاه الصاعد في التغييرات الطارئة إشارة للنظر في تصميم التخطيط والموافقة، لا للوم مهندسي المناوبة.

العملاء والمستخدمون

لا يهتم العملاء بمعدل الفشل. يهتمون بهل تتعطل الخدمة بعد تحديث وكم بسرعة تعود. وتدعم بيانات الفشل التواصل الصادق: إشعار مسبق بالتغييرات الخطرة، ورسائل حالة واضحة حين يسبب تغيير متاعب، والتزام مرئي بالتعلم. وحيث يعتمد المستخدمون على خدمة لمهام حرجة فاتفق على نوافذ الصيانة وتوقعات التراجع معهم سلفًا (انظر الموضوع 3.4، مقاييس الحوادث الكبرى).

عمليًا: مثال على أجايل ITIL

تشغّل إدارة تقنية المعلومات في مزود رعاية صحية إقليمي خدمة جدولة المرضى. يطلق فريق منتج من سبعة تغييرات عدة مرات في الأسبوع، ويتعامل فريق عمليات من خمسة مع الحوادث وعملية التغيير. كل الأرقام في هذا المثال توضيحية.

على مدى ربع يُظهر التقرير الشهري معدل فشل تغيير 4 في المئة، ارتفاعًا من 11 في المئة في الربع السابق. يُسَرّ رئيس المعلومات. وقائدة المنصة غير مقتنعة، لأن فريق المناوبة يقول إن لياليهم لم تتحسن. فتطلب من الفريق إجراء تدقيق العينة المنصوص عليه في سجل المقاييس.

يأخذ التدقيق 30 تغييرًا عشوائيًا ويطبق مراجعان التعريف المكتوب. ويتفقان على 24 من 30 حكمًا، فالاتفاق على تعريف الفشل 80 في المئة (توضيحي). ثم يقارنان العينة بقائمة الحوادث. من 22 حادثة حُلّت في الربع لا يحمل حقل "سببها تغيير" سوى 9، أي معدل ربط 41 في المئة. وبقراءة الـ13 الأخرى يدويًا يجد المراجعان 5 بدأت خلال يوم من تغيير. ويرفع العدد المصحح معدل الفشل إلى نحو 9 في المئة، ويجد التدقيق لماذا بدا الرقم جيدًا: عادة جديدة بنشر الإصلاحات تحت وسم "صيانة"، استبعده التقرير من المقام والبسط معًا.

خطر التلاعب هو الوسم، ولم يخطط له أحد. فقد قيل للفريق إن الإخفاقات مصدر قلق، وتجنب "الصيانة" حوارًا. ويتخذ الفريق ثلاثة قرارات. يصير حقل "سببها تغيير" مطلوبًا بلا قيمة افتراضية، وتفحصه مراجعة ما بعد الحادثة. ويُنهى وسم "الصيانة"، وتحمل عمليات النشر التصحيحية رابطًا بالتغيير الذي تصلحه، يغذي معدل إعادة العمل. ويُعاد كتابة تعريف الفشل بست أمثلة محلولة، بينها انحدار استعلام بطيء لم يسبب انقطاعًا قط.

يُظهر الربع التالي معدل فشل معاد صياغته 8 في المئة ومعدل ربط 90 في المئة (توضيحي). ويُظهر تقرير القيادة الآن الأعداد ومعدل الربط ومعدل إعادة العمل بجانب زمن الانتظار، ويكف رئيس المعلومات عن اقتباس نسبة مئوية واحدة.

النظرة حسب القطاع

الشركات الناشئة. التغييرات صغيرة ومتكررة، وكثيرًا ما يعرف الفريق كل فشل عن ظهر قلب. أبقِ التعريف في فقرة واحدة، ووسِم التراجعات والإصلاحات العاجلة في أداة النشر، وراجع الإخفاقات في الاستعادة الرجعية الأسبوعية. ومعدل فشل على 20 تغييرًا مشوش، فاستخدم قائمة الإخفاقات دليلًا رئيسيًا. والخطر عدم الرسمية: بلا تعريف مكتوب يتحرك المعدل مع من يعدّ.

الأعمال الصغيرة. الأشخاص أنفسهم ينشرون ويشغّلون ويدعمون، فتنافس إعادة العمل العمل المخطط مباشرة. سجّل الإخفاقات في أي أداة تستخدمها أصلًا، وأضف حقلًا مطلوبًا إلى سجل الحادثة، وراجع التغييرات الطارئة كل ربع. وتجنب الموافقة الثقيلة لمجرد تحسين الأرقام. وقائمة تحقق تراجع مشتركة أجدى من لجنة تغيير.

المؤسسات الكبرى. الفرق والموردون والأدوات الكثيرة تعني تعريفات كثيرة. وحّدوا تعريف الفشل وحقل الربط عبر الفرق، وانشروه في كتالوج القياسات، واحسبوا المعدلات لكل خدمة قبل التجميع. واستخدموا التدقيقات بالعينات لإيجاد التباعد، وعاملوا سجلات تغيير كل مورد مصدرًا آخر بجودته الخاصة (انظر الموضوع 1.5، مصادر البيانات والأجهزة القياسية). واحرصوا ألّا تتحول التجميعات إلى جداول ترتيب للفرق.

الحكومة والقطاع العام. تخدم سجلات التغيير التدقيق والمساءلة، وقد تقيّد التراجعات بالقانون أو المشتريات أو المنصات المشتركة. أبقِ السجل الرسمي وأضف رابط الفشل جزءًا منه. واشرح الأرقام بعناية لجهات الرقابة، بالأعداد والسياق، لأن فشلًا واحدًا في خدمة حرجة قد يجذب اهتمامًا غير متناسب. واستخدم البيانات لتبرير مسارات أخف للتغيير منخفض الخطر، بدليل أن الفشل والاستعادة بقيا ثابتين.

دراسة الجدوى: الدوافع والعائد على الاستثمار وإجمالي تكلفة الملكية

الدافع كلفة التغيير الفاشل: عمل الحوادث وإعادة العمل وتأخر بنود خارطة الطريق وفقد ثقة المستخدمين. وكثير من المنظمات لا تستطيع القول كم من جهدها يذهب إلى إصلاح تغييرات حديثة، ويقدم قياس إعادة العمل الجواب الصادق الأول. وثمة فائدة غير مباشرة أيضًا. فالفرق التي تستطيع إظهار أن التغيير آمن تستطيع الدفاع عن موافقة أخف، مما يقصّر زمن الانتظار. ويفيد بحث DORA بارتباط بين الموافقة الخارجية الثقيلة وأداء تسليم أضعف (انظر الموضوع 4.3، مقاييس تمكين التغيير)، وبيانات الفشل هي كيف يختبر فريق ذلك الادعاء مقابل تاريخه.

وكلفة الجمع متواضعة إن وُجد الأساس: حقل مطلوب في سجل الحادثة، وعمليات نشر تصحيحية موسومة، وضم ثلاثة مصادر بيانات، ومراجعة شهرية. والكلفة الأكبر الانتباه، لأن على أحد أن يملك التعريف ويجري التدقيقات ويتصرف بناءً على الاكتشافات. وتجنب شراء أداة قبل أن يعمل التعريف والرابط يدويًا.

ويظهر العائد في إخفاقات متكررة أقل واستعادة أقصر وعمل غير مخطط أقل وحوارات أفضل مع الحوكمة. لا تعد بنسبة مئوية. قدّر بدلًا من ذلك خط أساسك: عُدّ الساعات المصروفة على إعادة العمل واستجابة الحوادث المرتبطة بالتغيير على ربع، وسعّرها بمعدلك الداخلي المعتاد، وقارن بعد التحسينات. وبيّن الافتراضات، وأبلغ بالنتيجة مدى لا رقمًا واحدًا. وقارنها بكلفة البرنامج وكلفة فشل جسيم واحد في خدمة حرجة.

الأنماط المضادة والمزالق

  • وضع هدف لمعدل الفشل. يدعو إلى إعادة التعريف والإخفاقات المخفية. ضع بدلًا منه هدف تعلم، مثل إتمام كل مراجعة وإغلاق كل إجراء تصحيحي، وراقب المعدل للاتجاهات.
  • ترتيب الفرق أو الأشخاص بالفشل. يدمر الإبلاغ ويعاقب الفرق التي تتناول عملًا خطرًا قيّمًا. قارن الفريق بماضيه وناقش السياق.
  • عدّ الحوادث وحدها إخفاقات. الإخفاقات التي تُلتقط مبكرًا ويُتراجع عنها تختفي. أدرج كل مسارات المعالجة، واستخدم الحوادث إشارة واحدة بين عدة.
  • معاملة التغييرات الطارئة سيئة. يقود الضغط إلى طوارئ متنكرة. راجعها للأسباب وأصلح المسار العادي.
  • ترك رابط الحادثة يأخذ "لا" افتراضيًا. القيمة الافتراضية تنتج رقمًا مجاملًا وخاطئًا. اجعل الحقل مطلوبًا وخذ عينة منه.
  • الإبلاغ بمعدل بلا أعداد. العينات الصغيرة تتأرجح بعنف. أظهر الأعداد ونافذة متحركة.

نموذج النضج

البُعد 1 البدء 2 التطوير 3 التوحيد 4 الإدارة 5 التنسيق
تعريف الفشل يُقرَّر حالة بحالة بمن يُسأل بعض الفرق تكتب تعريفًا؛ تختلف الفرق تعريف مكتوب واحد بأمثلة محلولة ونافذة معلنة يُختبر التعريف بتدقيقات عينات ويُقاس الاتفاق يُنقَّح التعريف مع الموردين والعملاء حين يكفّ عن الاستنارة به في القرارات
ربط التغييرات والحوادث الرابط يتذكره الناس إن حدث حقل اختياري تستخدمه بعض الفرق حقل مطلوب بلا قيمة افتراضية، يُفحص في مراجعة ما بعد الحادثة يُتتبع معدل الربط ويُراجع، مع التصرف حيال الفجوات تُشارَك الروابط عبر الفرق والموردين بواجهات متفق عليها
المعالجة والتعامل مع الطوارئ التراجعات والإصلاحات العاجلة تُعالج بارتجال وبلا تسجيل بعض الفرق تسم التراجعات والإصلاحات العاجلة كل مسارات المعالجة مسجلة؛ اختبار الطوارئ مكتوب تُراجع التغييرات الطارئة كل ربع؛ يُتدرَّب على التراجعات تُصمَّم مسارات الاستعادة في الخدمات وتُختبر بالاشتراك عبر الفرق
الاستخدام في التحسين أرقام تُقتبس في التقارير بلا متابعة تُناقش الإخفاقات بعد الحوادث الكبرى مراجعة شهرية بلا لوم للتغييرات الفاشلة بإجراءات يُقرن الفشل وإعادة العمل بالسرعة؛ تُخطَّط التجارب وتُموَّل التحسين روتيني ومشترك عبر الفرق، مع نشر التعلم

قائمة التحقق

  • يوجد تعريف مكتوب لفشل التغيير، بنافذة معلنة وخمسة أمثلة محلولة على الأقل.
  • وحدة العدّ (تغيير أو نشر أو إصدار) مسماة في سجل المقاييس.
  • لسجل الحادثة حقل "سببها تغيير" مطلوب بلا قيمة افتراضية.
  • التراجعات والإصلاحات العاجلة وإصلاحات التقدم للأمام موسومة في أدوات النشر أو التحكم في الإصدارات.
  • تحمل عمليات النشر التصحيحية رابطًا بالتغيير الذي تصلحه.
  • للتغيير الطارئ اختبار مكتوب قصير، ويُراجع كل تغيير طارئ خلال عدد محدد من الأيام.
  • تُعرض المعدلات مع الأعداد ونافذة متحركة، لا كنسبة مجردة أبدًا.
  • يُعرض معدل فشل التغيير دائمًا بجانب زمن الانتظار وتكرار النشر وزمن الاستعادة.
  • تدقيق بعينة ربع سنوية يفحص أحكام الفشل والرابط بالحوادث.
  • تجري مراجعة شهرية بلا لوم للتغييرات الفاشلة، بمالك لكل إجراء.
  • لا مقياس في هذا الموضوع يُستخدم لترتيب الأفراد أو تقييمهم.

مطالبات الذكاء الاصطناعي

صُغ تعريفًا مكتوبًا لفشل التغيير.

We operate [service or product type] with [team size] people and release
[frequency, for example several times a week]. Our tools are [change tool,
deployment tool, incident tool]. Draft a one-page definition of "failed change"
that states the unit (change, deployment, or release), the failure window, the
remediation routes that count (rollback, hotfix, roll-forward fix, linked
incident), and the exclusions. Include [number] worked examples, including
borderline cases. Do not invent benchmark values or thresholds; ask me for any
you need. List your assumptions.

صمّم الرابط بين التغيير والحادثة.

Here is our incident record template: [fields]. Here is our change record
template: [fields]. Suggest how to record which change caused which incident,
including a required field, allowed values, who completes it, and how a review
should check it. Propose a way to suggest candidate changes automatically from
[available data, for example deploy times and service names]. Do not guess how our
tools are configured. List your assumptions and the questions I should answer.

حلّل قائمة تغييرات فاشلة بحثًا عن أنماط.

Below are [number] failed changes from [period], with these fields: [list fields,
for example size, type, day and time, service, remediation route, time to
restore]. Find patterns and possible contributing factors, and suggest up to
[number] small, reversible experiments to reduce failures. Keep the analysis at
the level of teams and services, and do not rank individuals. Do not invent
statistics or benchmark values. State how confident each pattern is given the
sample size, and list your assumptions.

افحص لوحة فشل بحثًا عن مخاطر التلاعب.

Our dashboard shows [list of metrics, for example change fail rate, emergency
share, rollback rate, hotfix rate, rework rate] with these definitions:
[definitions]. For each metric, list plausible ways the number could improve
without the service improving, and a guardrail for each. Suggest two audit checks
a team of [team size] could run each quarter. Do not invent benchmark values or
compliance claims. List your assumptions.

مهارات الذكاء الاصطناعي

  • مهارة مقاييس أجايل ITIL: استخدمها للعثور على أي موضوع يعرّف مقياسًا ذا صلة، مثل زمن الانتظار أو مدة الحادثة، وضابط الحماية الذي يوضع بجانب معدل الفشل.
  • مهارة صيانة مقاييس أجايل ITIL: استخدمها للتحقق من أن قياس فشل جديدًا أو معدَّلًا يبيّن ساعته ومصدره وطريقة تلاعبه.

النقاط الرئيسية

  • معدل فشل التغيير لا يكون أفضل من تعريفه، فاكتب تعريفًا بنافذة وأمثلة محلولة ووحدة مسماة.
  • اربط كل فشل بتغييره بحقل مطلوب في سجل الحادثة، وقِس معدل الربط.
  • عُدّ التراجعات والإصلاحات العاجلة وإصلاحات التقدم للأمام والحوادث المرتبطة معًا، حتى لا تتحايل الفرق على القياس بتبديل المسار.
  • اقرأ حصة التغيير الطارئ وإعادة العمل إشارتين عن التخطيط والمسار العادي لا درجتين.
  • اعرض الفشل دائمًا بجانب السرعة والاستعادة، بأعداد ونافذة متحركة، ولا ترتب الأشخاص أبدًا.

المراجع والقراءة الإضافية

  1. Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
  2. DORA, DORA's software delivery performance metrics, Google Cloud, https://dora.dev/guides/dora-metrics/
  3. Humble, J., and Farley, D., Continuous Delivery: Reliable Software Releases through Build, Test, and Deployment Automation, Addison-Wesley, 2010.
  4. Beyer, B., Jones, C., Petoff, J., and Murphy, N. R. (eds.), Site Reliability Engineering: How Google Runs Production Systems, O'Reilly Media, 2016, https://sre.google/sre-book/table-of-contents/
  5. Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
  6. Wikipedia, ITIL.
  7. Wikipedia, Feature toggle.
  8. Wikipedia, Rollback (data management).
  9. Wikipedia, Hotfix.
  10. Wikipedia, Rework.
  11. Wikipedia, Continuous delivery.
  12. Wikipedia, Goodhart's law.
  13. Wikipedia, Regression testing.
  14. Wikipedia, Canary release.