الملخص والدافع

معظم قياسات الحوادث تصف اليوم السيئ المعتاد: نشر فاشل، أو قاعدة بيانات مشبعة، أو جار مزعج. أما استمرارية الخدمة فتصف اليوم النادر الشديد، حين تفشل منطقة كاملة، أو يتلف مخزن بيانات، أو يختفي مورد، أو يشفّر برنامج فدية المنظومة كلها. وتخطيط استمرارية الأعمال هو الانضباط الذي يعد المنظمة لمواصلة التسليم بمستويات مقبولة عبر هذه الأحداث. وفي ITIL 4 تسمى الممارسة إدارة استمرارية الخدمة، وهي رؤية خدمات تقنية المعلومات لذلك الهدف الأكبر (انظر الموضوع المقابل في الدليل المرافق Agile ITIL Guide).

مصطلحان يحملان معظم الثقل. فـهدف زمن الاسترداد (RTO) هو الزمن المقبول لاستعادة خدمة بعد اضطراب. وهدف نقطة الاسترداد (RPO) هو مقدار فقد البيانات المقبول، معبَّرًا عنه بمدة زمنية: RPO بساعة واحدة يعني أن فقد آخر ساعة من الكتابات محتمل وفقد أكثر منها غير محتمل. وكلاهما يأتي من تحليل أثر الأعمال (BIA)، وهو طريقة تحديد أي الأنشطة أهم وما يعتمد على ماذا وما تكلفه الاضطرابات. والأهداف قرارات أعمال بثمن، لأن الأهداف الأشد تحتاج تكرارًا أكثر وأتمتة أكثر ووقت تمارين أكثر.

والصعوبة أن الهدف وعد بشأن حدث مستقبلي لم يقع. والدليل الصادق هو اختبار. هل استعاد الفريق الخدمة ضمن RTO في آخر تمرين؟ وهل حققت البيانات المستعادة RPO؟ وهل كانت خطوات الخطة هي الخطوات التي اتخذها الفريق فعلًا؟ ومقياس الاستمرارية إذن قياس تمارين في الغالب، وتعتمد جودته على مدى واقعية التمرين.

وتجلب فرق أجايل وهندسة موثوقية المواقع (SRE) عادات مفيدة هنا. فأنظمتها تتغير أسبوعيًا، والخطة المكتوبة مرة والمحفوظة تتقادم خلال أشهر. والرد الرشيق إبقاء الاسترداد شيفرة (مثلًا عبر البنية التحتية كشيفرة)، وتكرار البروفات، ومعاملة كل بروفة مصدرًا لبنود قائمة المهام. وهندسة الفوضى وأيام المحاكاة تطبق الفكرة نفسها على نطاق أصغر: أحدِث فشلًا عن قصد وبطريقة مضبوطة وراقب ما يحدث. وتُوصف رؤية SRE في كتاب غوغل Site Reliability Engineering، ويُلخَّص المجال الأوسع في مقالة هندسة موثوقية المواقع.

كيف تختلف الرؤى

  • رؤية ITIL. إدارة استمرارية الخدمة ممارسة تحدد أهداف الاسترداد من BIA وتصمم الخطط وتثبتها بالاختبارات. ومخرجاتها خطط وتقارير تمارين ونتائج مسجلة. ويصف معيار ISO 22301 نظام إدارة استمرارية الأعمال. وحتى أكتوبر 2026 تحقق من الإصدار الحالي مباشرة إن طلب عميل أو جهة تنظيمية الامتثال.
  • رؤية أجايل. قدرة الاسترداد خاصية منتج في تعريف الإنجاز. وقصة تضيف مخزن بيانات لا تنتهي حتى يُجرَّب مسار استعادته.
  • رؤية SRE. عمل الموثوقية يُخصَّص له ميزانية ويُقاس. والتحويل عند الفشل وتدريبات الاستعادة وأيام المحاكاة عمل مجدول بملّاك ونتائج تدخل قائمة المهام.

ويغطي هذا الموضوع سبعة قياسات: الاسترداد مقابل أهداف الزمن والبيانات في الاختبارات، وتغطية التمارين وحداثتها، واستعادات النسخ الاحتياطية، وإغلاق النتائج، وحداثة الخطط. أما الانقطاعات الحقيقية فهي في قياسات الحوادث الكبرى (انظر الموضوع 3.4، مقاييس الحوادث الكبرى) وقياسات التوافر (انظر الموضوع 5.3، مقاييس التوافر). والأهداف المعبَّر عنها أهدافًا موجهة للمستخدم في موضوع المؤشرات والميزانيات (انظر الموضوع 5.2، مؤشرات مستوى الخدمة وأهدافها وميزانيات الخطأ). و"زمن استرداد النشر الفاشل" من برنامج أبحاث DORA ساعة أصغر بكثير (انظر الموضوع 2.8، مقاييس DORA). والأسباب الجذرية التي تكشفها الاختبارات تنتمي إلى مواضيع المشكلات والتعلم (انظر الموضوع 4.1، مقاييس إدارة المشكلات، والموضوع 4.2، مقاييس تحليل ما بعد الحادثة والتعلّم).

والطبقة (tier) صنف من الخدمات مجمَّع بحسب سرعة وجوب عودته. وتمرين الطاولة (tabletop exercise) بروفة قائمة على النقاش بلا تغييرات في الأنظمة. ويوم المحاكاة (game day) بروفة عملية يحدث فيها الفريق فشلًا أو يحاكيه ويراقب الاستجابة. والنتيجة (finding) فجوة مسجلة بين الخطة وما حدث. وحداثة الخطة مدى انعكاس الخطة للخدمة كما هي اليوم.

المبادئ الأساسية

  • اختبر، ثم ادّعِ. لا يُصادَق على RTO أو RPO إلا باسترداد أُجري فعلًا وعُدّ زمنه. أبلغ بالهدف وآخر نتيجة مبرهَنة جنبًا إلى جنب.
  • قِس الواقعية لا النجاح وحده. استعادة قاعدة بيانات اختبار فارغة نجحت في دقائق تقول القليل عن استعادة بحجم الإنتاج. سجّل نطاق كل تمرين وظروفه بجانب النتيجة.
  • صنّف المنظومة طبقات وانفق الجهد بحسب الطبقة. الخدمات الحرجة تنال اختبارات متكررة وواقعية. وخدمات الطبقات الدنيا تنال فحوصًا أخف. وهدف تكرار واحد لكل شيء يهدر الجهد أو يفوته الخطر.
  • عامل النتائج ناتج التمرين. المخرج القيّم ليوم محاكاة قائمة مغلقة من الفجوات. واختبار بلا نتائج إما ممتاز أو لطيف أكثر من اللازم، وينبغي أن تعرف أيهما.
  • صِف الخدمات والمناوبات لا الأفراد. نتائج التمارين تصف النظام والخطة. ولا يُرتَّب أحد بسرعة استرداده تدريبًا.
  • أظهر كل تمرين صفًا مستقلًا. هناك اختبارات قليلة لكل خدمة في السنة، فالمتوسطات تضلل (انظر الموضوع 1.6، الإلمام الإحصائي لمقاييس الخدمة).

تعريفات المقاييس

يسرد كل مقياس الساعة أو العدد وما يُستبعد ومصدر البيانات. ويحتاج كل صف قاعدة مكتوبة قبل أن يُوثق به. و"خدمة الطبقة 1" أدناه تعني خدمة في أعلى طبقة استرداد يعرّفها BIA الخاص بك.

المقياس التعريف الصيغة الوحدة مصدر البيانات ممارسة ITIL المقابل في أجايل التكرار
معدل بلوغ RTO حصة تمارين الاسترداد التي استُعيدت فيها الخدمة ضمن RTO المعلن التمارين التي زمن استعادتها <= RTO / التمارين المنفذة. تبدأ الساعة عند البدء المعلن لفشل التمرين (وقت الحقن أو إعلان السيناريو) وتتوقف حين تجتاز الخدمة فحص صحتها المتفق عليه لمستخدمين حقيقيين أو اصطناعيين. تمارين الطاولة والتمارين بلا استعادة موقّتة مستبعدة وتُحتسب منفصلة نسبة مئوية، مع عدد التمارين تقرير التمرين، الخط الزمني من المراقبة، سجل الخدمات بـRTO إدارة استمرارية الخدمة؛ إدارة التوافر نتيجة يوم المحاكاة؛ زمن الاسترداد في قياسات التسليم لكل تمرين؛ يُجمَّع ربعيًا
معدل بلوغ RPO حصة تمارين الاسترداد التي بقي فيها فقد البيانات ضمن RPO المعلن التمارين التي مدة فقد بياناتها المقيسة <= RPO / التمارين التي تستعيد بيانات. مدة فقد البيانات هي الزمن بين آخر كتابة موجودة بعد الاسترداد ولحظة الفشل. التمارين التي لا تستعيد حالة مستبعدة نسبة مئوية، مع عدد التمارين تقرير التمرين، مقارنة البيانات المستعادة بالمصدر أو سجل الكتابة إدارة استمرارية الخدمة؛ إدارة أمن المعلومات تدريب الاستعادة جزءًا من تعريف الإنجاز لكل تمرين؛ يُجمَّع ربعيًا
تغطية الاسترداد المختبَر حصة خدمات الطبقتين 1 و2 التي أُجري لها اختبار استرداد عملي ضمن فاصل الاختبار المتفق عليه الخدمات التي لها اختبار مؤهِّل ضمن الفاصل / الخدمات ضمن النطاق. الاختبار المؤهِّل عملي (لا تمرين طاولة فقط) ويستعيد الخدمة في بيئة الاختبار أو الإنتاج. يُحدد الفاصل لكل طبقة نسبة مئوية، حسب الطبقة سجل الخدمات، تقويم التمارين وتقاريرها إدارة استمرارية الخدمة؛ إدارة كتالوج الخدمات جدول أيام المحاكاة شهري
الأيام منذ آخر اختبار استرداد ناجح عمر أحدث اختبار استرداد ناجح لكل خدمة حرجة تاريخ التقرير ناقص تاريخ أحدث اختبار حقق RTO وRPO معًا. الاختبار الفاشل لا يعيد ضبط الساعة. الخدمات التي لم تُختبر قط تُعرض "أبدًا" لا صفرًا أيام، لكل خدمة، مع إبراز الأقدم تقارير التمارين، سجل الخدمات إدارة استمرارية الخدمة جدول أيام المحاكاة؛ عمر عنصر العمل شهري
معدل نجاح استعادة النسخ الاحتياطية حصة استعادات النسخ الاحتياطية المحاولة التي اكتملت ببيانات موثقة قابلة للاستخدام الاستعادات المكتملة والتي اجتازت فحص التحقق من البيانات / الاستعادات المحاولة، على اختبارات الاستعادة الآلية واليدوية. نجاح مهمة النسخ وحده مستبعد، لأن مهمة جرت ليست استعادة نجحت نسبة مئوية، حسب طبقة البيانات سجلات نظام النسخ الاحتياطي، نتائج التحقق الآلي من الاستعادة إدارة استمرارية الخدمة؛ إدارة البنية التحتية والمنصة تدريب الاستعادة؛ معايير قابلية التشغيل في تعريف الإنجاز أسبوعي للاختبارات الآلية؛ شهري في المراجعة
معدل إغلاق نتائج التمارين حصة نتائج تمارين الاسترداد المغلقة ضمن زمنها المتفق عليه، مقسمة بحسب الشدة النتائج المغلقة ضمن الهدف / النتائج التي حل أجلها في الفترة. تبدأ الساعة حين تُسجَّل النتيجة في تقرير التمرين وتتوقف عند الإصلاح الموثق، أي إعادة اختبار أو مراجعة تؤكده. النتائج المقبولة خطرًا من مالك مسمى تُحتسب منفصلة نسبة مئوية، مع عدد النتائج المتأخرة تقرير التمرين، متتبع المهام إدارة استمرارية الخدمة؛ التحسين المستمر إجراءات الاستعادة الرجعية؛ عمر بند قائمة المهام شهري
حداثة الخطة حصة خطط الاستمرارية وأدلة التشغيل التي روجعت بعد آخر تغيير جوهري في خدمتها، أو ضمن فاصل مراجعتها الخطط التي تاريخ مراجعتها أحدث من آخر تغيير جوهري وضمن الفاصل / الخطط ضمن النطاق. التغيير الجوهري يعني سجل تغيير موسومًا بأنه يغيّر المعمارية أو مخازن البيانات أو الاعتماديات أو الموردين نسبة مئوية، مع عمر أقدم خطة غير مراجَعة مستودع الخطط (التحكم في الإصدارات)، سجلات التغيير، سجل الخدمات إدارة استمرارية الخدمة؛ تمكين التغيير تعريف الإنجاز يشمل تحديث دليل التشغيل ربع سنوي

وساعة RTO في تمرين تختلف عن الساعة في انقطاع حقيقي، التي تبدأ عند الأثر (انظر الموضوع 3.4، مقاييس الحوادث الكبرى)، فقارن التمارين بالتمارين. والتمرين المكتوب بدقة يقيس سرعة البروفة، فسجّل كم مفاجأة احتوى.

التوصيات

ضع أهدافًا يمكن اختبارها

1. اشتق RTO وRPO من تحليل أثر الأعمال، واكتبهما بجانب الخدمة. يسأل BIA الأعمال كم تكلف ساعة ويوم وأسبوع من الانقطاع وأي بيانات تستطيع تحمل فقدها. سجّل الأجوبة في سجل الخدمات ليمكن مقارنة كل اختبار بهدف معلن. والأهداف التي يختارها المهندسون وحدهم تميل إما إلى ألّا تكون في المتناول أو إلى عدم الصلة بما يحتاجه العملاء.

2. صنّف الخدمات طبقات وضع فواصل الاختبار بحسب الطبقة. عدد صغير من الطبقات، ربما ثلاث أو أربع، أسهل في التشغيل من قاعدة مختلفة لكل خدمة. أعط الطبقة العليا أكثر الاختبارات تكرارًا وواقعية، وأعط الطبقة الدنيا فحصًا خفيفًا مثل استعادة دورية لعينة. اكتب الفواصل وراجعها حين يتغير BIA.

3. تحقق من أن الهدف يناسب المعمارية. RPO بخمس دقائق مع نسخة احتياطية ليلية تناقض سيكشفه اختبار في أسوأ لحظة. قارن كل هدف بتصميم النسخ الاحتياطي والمزامنة والتحويل قبل أول تمرين، وسجّل أي فجوة نتيجةً.

اختبر بطرق تكشف شيئًا

4. اخلط بين تمارين الطاولة وتدريبات الاستعادة وأيام المحاكاة. تمرين الطاولة رخيص ويجد فجوات في الأدوار وجهات الاتصال والقرارات. وتدريب الاستعادة العملي يجد فجوات في الإجراءات والأذونات والبيانات. ويوم المحاكاة، الذي يحدث فشلًا ويراقب الاستجابة، يجد فجوات في المراقبة وأدلة التشغيل والتنسيق. أبلغ بكل نوع منفصلًا حتى لا تبدو سلسلة تمارين طاولة سهلة دليل استرداد.

5. عُدّ زمن الاستعادة على بيانات بحجم الإنتاج. استعادة تعمل على نسخة صغيرة قد تفشل على الحجم الحقيقي بسبب حدود الإنتاجية أو التخزين. وحيث تكون الاختبارات الكاملة النطاق مكلفة جدًا لتتكرر، شغّل واحدًا دوريًا واذكر أي استقراء. وسجّل حجم البيانات مع النتيجة.

6. تحقق من أن البيانات المستعادة قابلة للاستخدام. أضف فحصًا آليًا بعد الاستعادة، مثل عدد صفوف أو مجموع تحقق أو معاملة اصطناعية. واعدّ الاستعادة ناجحة فقط حين يجتاز ذلك الفحص.

7. أضف المفاجأة تدريجيًا. يمكن إعلان التمارين الأولى وكتابتها نصًّا. أما اللاحقة فينبغي أن تحجب تفاصيل الفشل وتشمل اعتماديات مثل بيانات اعتماد منتهية أو مورد لا يمكن الوصول إليه. وسجّل مستوى المفاجأة لتُقرأ النتائج في سياقها.

حوّل النتائج إلى تغيير

8. سجّل كل نتيجة بمالك وشدة وتاريخ استحقاق. ينتج يوم المحاكاة قائمة: إذن مفقود، وخطوة في دليل التشغيل لم تعد تطابق الأداة، ومراقب لم يُطلَق قط. ضع كلًّا منها في قائمة المهام للفريق بالرؤية نفسها لعمل الميزات. وتتبع عمر النتائج المفتوحة وحصة المغلق منها في وقته، وأكّد الإغلاق بإعادة اختبار حيث أمكن.

9. اربط النتائج بإدارة المشكلات والتعلم. النتيجة المتكررة عبر التمارين مشكلة بمعنى ITIL (انظر الموضوع 4.1، مقاييس إدارة المشكلات). وراجع كل تمرين بلا لوم، كما تراجع تحليل ما بعد الحادثة، وتتبع الإجراءات حتى الإغلاق (انظر الموضوع 4.2، مقاييس تحليل ما بعد الحادثة والتعلّم).

أبقِ الخطط حية

10. أبقِ الخطط وأدلة التشغيل في التحكم في الإصدارات واربطها بالتغيير. حين يغيّر سجل تغيير المعمارية أو مخزن بيانات أو مورد، اشترط مراجعة الخطة المالكة في العمل نفسه (انظر الموضوع 4.3، مقاييس تمكين التغيير). وقِس حداثة الخطة مقابل آخر تغيير جوهري لا مقابل التقويم وحده. فخطة تُراجع كل ربع وتتجاهل ترحيل الشهر الماضي حديثة بالاسم فقط.

11. أبقِ خريطة الاعتماديات صادقة. ترتيب الاسترداد يعتمد على خدمات مشتركة مثل الهوية وحل الأسماء وتخزين الأسرار. وفّق الخريطة مع سجلات التهيئة وأصلح الفجوات التي تكشفها التمارين (انظر الموضوع 7.4، مقاييس جودة التهيئة وقاعدة بيانات إدارة التهيئة).

12. أدرج الموردين، وناوب واجب التمارين. اطلب من كل مورد حرج دليل اختباره هو واتفق على كيفية تمرين الخطوات المشتركة (انظر الموضوع 8.4، مقاييس الموردين والعقود). وتستهلك التمارين وقتًا، فوزّع الواجب على مناوبة وعدّه حملًا تشغيليًا (انظر الموضوع 5.7، مقاييس العمل الروتيني والمناوبة).

طرق التلاعب وضوابط الحماية

أرقام الاستمرارية سهلة المجاملة لأن قلة ينظرون عن كثب إلى تمرين، والاختبار الحقيقي نادر الوقوع. يقرن الجدول كل قياس بطريقة تلاعب والفحص الذي يلتقطها. وتتبع الأزواج الصيغة المبينة في الموضوع 1.2 (انظر الموضوع 1.2، قانون غودهارت وعلم نفس المقاييس).

المقياس كيف يُتلاعب به ضابط الحماية المقترن (مقياس أو ممارسة)
معدل بلوغ RTO اختيار مجموعة بيانات اختبار صغيرة أو سيناريو سهل أو نص مُتدرَّب عليه؛ بدء الساعة متأخرة بعد أن بدأ الفريق؛ تخفيف فحص الصحة ليصل "المستعاد" أسرع؛ وضع RTO سخي فتنجح كل الاختبارات سجّل حجم البيانات ومفاجأة السيناريو وتعريف فحص الصحة مع كل نتيجة؛ قارن RTO بـBIA؛ أظهر كل تمرين صفًا مستقلًا، بما في ذلك الإخفاقات
معدل بلوغ RPO قياس الفقد للجدول الأساسي فقط لا لكل الحالة؛ اختبار نسخة متزامنة لأن لا حمل يعمل؛ إعادة تعريف RPO بعد نتيجة فائتة تحقق من فقد البيانات مقابل سجل الكتابة عبر كل مخازن البيانات ضمن النطاق؛ اختبر تحت حمل كتابة واقعي؛ احتفظ بسجل تغييرات للأهداف بأسبابها
تغطية الاسترداد المختبَر عدّ نقاشات الطاولة اختبارات؛ اختبار خدمة صغيرة جدًا لرفع النسبة؛ تقليص قائمة النطاق بإعادة تصنيف الخدمات إلى طبقة أدنى اشترط اختبارات عملية لعدّ الطبقة 1؛ أبلغ بالتغطية موزونة بحرجية الخدمة؛ دقق تغييرات الطبقات مقابل BIA
الأيام منذ آخر اختبار استرداد ناجح إعادة تشغيل اختبار سهل لإعادة ضبط العمر؛ وسم اختبار جزئي ناجحًا؛ إعادة ضبط التاريخ بعد مراجعة ورقية أظهر نطاق آخر اختبار ناجح؛ أظهر أقدم عمر والخدمات التي لم تُختبر أبدًا؛ اشترط تحقق RTO وRPO معًا
معدل نجاح استعادة النسخ الاحتياطية الإبلاغ بنجاح مهمة النسخ على أنه نجاح استعادة؛ اختبار النسخ المعروفة الجودة فقط؛ التحقق بفحص لا يمكن أن يفشل تتبع استعادات نسخ احتياطية مأخوذة عشوائيًا؛ اشترط نتيجة تحقق من البيانات؛ راجع الفحص نفسه في كل تدقيق
معدل إغلاق نتائج التمارين إغلاق النتائج بلا إصلاح؛ خفض الشدة لتخفيف تاريخ الاستحقاق؛ تقسيم نتيجة واحدة إلى نتائج سهلة كثيرة؛ تسجيل نتائج قليلة أصلًا تحقق من الإغلاق بإعادة اختبار؛ أبلغ بالنتائج لكل تمرين بجانب معدل الإغلاق، لأن عددًا متناقصًا قد يعني تمارين ألطف؛ راجع تغييرات الشدة
حداثة الخطة تحديث تاريخ مراجعة دون قراءة الخطة؛ وسم التغييرات غير جوهرية؛ حشو الخطة بنص عام لا يتقادم أبدًا خذ عينة من الخطط وامشِ عليها مع من لم يكتبها؛ قارن معدل وسم التغيير الجوهري بتاريخ تغييرات المعمارية؛ اربط الحداثة بنتائج الاختبار

القراءة الصحية تُظهر حفنة اختبارات كل ربع بتباين صادق: بعضها نجح من المحاولة الأولى، وبعضها فشل وأُعيد، ونتائج كل منها تظهر في قائمة المهام وتُغلق ضمن الوقت المعلن. والدرجات الكاملة سنة بعد سنة سبب للسؤال عن مدى صعوبة التمارين.

المفاضلات: المزايا والعيوب

النهج نقطة القوة نقطة الضعف
اختبارات استعادة آلية صغيرة متكررة دليل رخيص ومستمر؛ يلتقط فشل النسخ الاحتياطي الصامت مبكرًا لا يختبر التنسيق أو الناس أو الاسترداد الكامل النطاق
تمرين تحويل كامل النطاق سنوي واقعي؛ يمرّن الناس والموردين والاعتماديات معًا مكلف ونادر؛ يصعب تكراره بعد إصلاح؛ يحمل خطرًا إن أُجري في الإنتاج
تمارين الطاولة كلفة منخفضة؛ يجد فجوات في الأدوار والقرارات؛ جيد للتدريب لا يثبت أن التقنية تعمل؛ سهل التشغيل دون تعلم أي شيء
أيام محاكاة في الإنتاج بفشل محدَث أعلى واقعية؛ يختبر المراقبة وأدلة التشغيل كما هي يحتاج ضمانات ناضجة ودعم القيادة؛ قد يضر العملاء إن أُجري بإهمال
أهداف مرتبة بالطبقات يصرف الجهد حيث الخطر قد تنجرف تعيينات الطبقات وتحتاج مالكًا

والجواب العملي برنامج طبقي: فحوص استعادة آلية رخيصة طوال الوقت، وتدريبات عملية لكل خدمة طبقة 1 على فاصل ثابت، وتمرين أكبر على دورة أطول، وتمارين طاولة للقرارات والتواصل. اذكر الفواصل ليستطيع القارئ الحكم على مدى حداثة الدليل.

أسئلة للنقاش مع فريقك

1. متى استعدنا أهم خدماتنا آخر مرة، وماذا أثبتنا بالضبط؟ اطلب التاريخ وحجم البيانات والسيناريو والنتيجة واكتبوها على لوح. وعلى الميسّر مقاومة الحكم والتركيز على الفجوة بين الادعاء والدليل. واختموا بالاتفاق على اختبار واحد يسد أكبر فجوة.

2. من اختار RTO وRPO لدينا، وهل ستختارهما الأعمال اليوم أيضًا؟ تتبعوا كل هدف إلى تحليل أثر أعمال أو قرار. واسألوا هل تستطيع المعمارية بلوغ الهدف على الورق، وهل ذُكرت كلفة بلوغه قط. واتفقوا على من سيؤكد أهداف أهم الخدمات مع الأعمال وبحلول متى.

3. كم ستكلفنا سمعتنا من تمرين فاشل، وهل يشكل ذلك مدى صعوبة تماريننا؟ يُظهر هذا السؤال الضغط الذي يجعل التمارين لطيفة. واسألوا هل يُعامل الاختبار الفاشل فشلًا للفريق أم نجاحًا للتمرين.

4. أي نتائج تمريننا الأخير ما زالت مفتوحة، ولماذا؟ اقرأوا القائمة بصوت عالٍ مع الأعمار والملّاك. ولكل بند متأخر اسألوا ما الذي يعيقه: عمل منافس أم ملكية غامضة أم كلفة أم اعتقاد بأن الخطر مقبول. والغاية ألّا تبقى نتيجة في حالة بلا مالك.

5. ما الذي تفترضه خطتنا ولم يعد صحيحًا؟ اختاروا خطة واحدة واقرأوها مع شخص لم يكتبها. وابحثوا عن أدوات متقاعدة وحسابات أُعيدت تسميتها وموردين رحلوا. واسألوا كيف ستُحدَّث الخطة حين تتغير الخدمة، ومن يلاحظ حين لا تُحدَّث. واربطوا الجواب بعملية التغيير.

6. أي اعتمادية ستوقف كل شيء، وهل اختبرنا يومًا بدونها؟ الخدمات المشتركة مثل الهوية وحل الأسماء والأسرار ونظام الاستدعاء نفسه نقاط فشل منفردة شائعة. اطلبوا من الفريق تسميتها ووصف آخر مرة كانت كل منها غير متاحة عن قصد.

المنظورات الأربعة

فرق المنتج والتسليم

تملك فرق المنتج التصميم الذي يجعل الاسترداد ممكنًا، فتلقى الاستمرارية جزءًا من تعريف الإنجاز للخدمات الحرجة: مسار نسخ احتياطي وإجراء استعادة ودليل تشغيل يعمل. وينبغي لها تشغيل تدريبات الاستعادة ضمن إيقاعها هي، وتخزين شيفرة الاسترداد مع الخدمة، ومعاملة التدريب الفاشل بند قائمة مهام.

فرق الخدمة والعمليات

تشغّل فرق العمليات معظم التمارين وتحمل عبء إعدادها. وينبغي لها الاحتفاظ بتقويم التمارين، وتسجيل الخطوط الزمنية أثناء سير التمرين، وكتابة النتائج في اليوم نفسه. والنتائج تصف الخدمة والخطة، ولا يُرتَّب أحد بسرعة استرداده الفردي لتدريب.

القيادة والحوكمة

يضع القادة الأهداف مع الأعمال ويقررون كم استردادًا يستحق الشراء. وينبغي لهم أن يطلبوا رؤية آخر نتيجة مبرهَنة بجانب كل هدف وعمر الدليل والنتائج المفتوحة، وأن يتجنبوا مكافأة سجل نظيف. وعلى هيئات الحوكمة أن تتوقع مجموعة صغيرة ثابتة من قياسات الاستمرارية، مرتبطة بسجل المخاطر وبالإبلاغ المنظم حيث ينطبق (انظر الموضوع 8.2، مقاييس المخاطر والضوابط، والموضوع 8.5، التقارير التنظيمية والحكومية).

العملاء والمستخدمون

نادرًا ما يرى العملاء الاستمرارية حتى تهم، وحينها يحكمون عليها كليًا بالنتيجة: كم بقوا بلا الخدمة وهل نجت بياناتهم. وهم يستفيدون من بيانات واضحة بما هو موعود، بعبارات يفهمونها، ومن تواصل صادق حين تستدعي حادثة الخطة. وحيث تتضمن العقود التزامات استرداد فشارك دليل التمارين عند الطلب (انظر الموضوع 5.1، مقاييس SLA وOLA وXLA).

عمليًا: مثال على أجايل ITIL

تشغّل إدارة تقنية المعلومات في مستشفى إقليمي نظام جدولة المرضى وأرشيف التصوير الطبي وخدمة مراسلة الموظفين. ويصون فريق منتج من ثمانية الجدولة، ويشغّل فريق عمليات المنصة. كل الأرقام في هذا المثال توضيحية.

يسرد سجل الإدارة الجدولة طبقة 1 بـRTO ساعتين وRPO خمس عشرة دقيقة. ويُظهر تقريرها الربعي "معدل بلوغ RTO: 100 في المئة على 4 تمارين" و"تغطية الاسترداد المختبَر: 100 في المئة". ويقرأ رئيس عمليات جديد تقارير التمارين خلف الأرقام. ثلاثة من التمارين الأربعة كانت تمارين طاولة، والاستعادة العملية الوحيدة استخدمت نسخة من قاعدة البيانات تحمل نحو عُشر بيانات الإنتاج. ولم يستعد أحد نسخة احتياطية إلى بيئة نظيفة منذ 14 شهرًا.

يقرر الفريق تغيير ما يُقاس ويُختبر. فيعيد تعريف تغطية الاسترداد المختبَر لتعدّ الاختبارات العملية فقط، فينخفض الرقم إلى 33 في المئة عبر خدمات الطبقة 1 الثلاث. ويجدول استعادة بحجم الإنتاج للجدولة، مع تحقق آلي من أعداد الصفوف ومعاملة حجز اصطناعية. ويستغرق التشغيل 3 ساعات و40 دقيقة مقابل RTO ساعتين، والبيانات المستعادة متأخرة 40 دقيقة عن نقطة الفشل مقابل RPO خمس عشرة دقيقة، لأن شحن السجلات أُوقف أثناء ترحيل ولم يُستأنف. وينتج يوم المحاكاة 9 نتائج: 2 عالية و5 متوسطة و2 منخفضة الشدة.

القرار المسجل في السجل أن يُعامل الإخفاق أقيم نتيجة في العام. ويفتح الفريق عملًا لاستئناف شحن السجلات مع تنبيه على تأخره، ولتوازي الاستعادة، ولنقل حجم بيانات واحد إلى تخزين أسرع. ويبقى RTO ساعتين، ويضيف الفريق بديلًا يدويًا موثقًا للجدولة. ومعدل إغلاق النتائج لأول 60 يومًا 7 من 9 في الوقت، والاثنان الآخران مقبولان خطرًا من ملّاك مسمين.

وخطر التلاعب الذي التُقط هنا كان خفيًا. لم يزيّف أحد رقمًا: عدد سخي من تمارين الطاولة ومجموعة بيانات اختبار صغيرة جعلا التقرير أخضر. وضوابط الحماية التي نجحت كانت تسجيل حجم البيانات ونوع التمرين مع كل نتيجة، وممارسة قراءة تقارير التمارين الأساسية. وفي التقرير التالي يعرض الفريق كل تمرين صفًا مستقلًا، بما في ذلك التشغيل الفاشل.

النظرة حسب القطاع

الشركات الناشئة. عادةً بيئة إنتاج واحدة وفريق صغير ومزود سحابي مُدار. أنفع قياس أبسطها: استعد قاعدة بيانات الإنتاج من النسخة الاحتياطية إلى بيئة نظيفة كل شهر، وعُدّ زمنها، وتحقق من النتيجة. واكتب RTO وRPO في صفحة واحدة.

الأعمال الصغيرة. كثيرًا ما تكون تقنية المعلومات مُستعان فيها بجهة خارجية أو يديرها شخص أو اثنان على خدمات مستضافة. اسأل المورد كتابةً ما الاسترداد الذي يلتزم به وأي دليل يستطيع إظهاره، واختبر استعادة واحدة لبياناتك كل ربع. واحتفظ بخطة من صفحة حيث يمكن قراءتها حين تتعطل الأنظمة الرئيسية.

المؤسسات الكبرى. الخدمات الكثيرة والموردون الكثيرون والمنصات المشتركة تجعل التصنيف بالطبقات وخريطة الاعتماديات أساسيين. استثمر في سجل خدمات مركزي بالأهداف وتقويم تمارين وتحقق آلي من الاستعادة وإبلاغ متسق لتتقارن النتائج عبر الفرق.

الحكومة والقطاع العام. قد تنشأ واجبات الاستمرارية من القانون أو التدقيق أو السياسة، وقد تضطر خدمة عامة إلى العمل أثناء الطوارئ. وكثيرًا ما يراجع جهات خارجية دليل الاختبار، فاحتفظ بتقارير التمارين والنتائج وسجلات الإغلاق بشكل يستطيع المدقق قراءته. وقد تثبّت المشتريات ترتيبات الاسترداد، فأدرج حقوق التمارين والدليل في العقود (انظر الموضوع 8.5، التقارير التنظيمية والحكومية).

دراسة الجدوى: الدوافع والعائد على الاستثمار وإجمالي تكلفة الملكية

أسباب الاستثمار كلفة انقطاع شديد يدوم أطول مما تحتمله الأعمال، وفقد بيانات لا يمكن إعادة إنشائها، والتزامات تجاه العملاء والجهات التنظيمية والمؤمِّنين الذين يطلبون دليل الاستعداد. وعمل الاستمرارية تأمين، فالعائد هو الخسارة المتجنَّبة وثقة صانعي القرار، ويصعب التعبير عنه برقم دون اختلاق واحد. صِفه بأنماط تستطيع ملاحظتها: الفجوة بين زمن الاسترداد المعلن والمبرهَن، وعدد النتائج عالية الشدة التي وُجدت في التمارين بدل الأحداث الحقيقية، والزمن للرد على طلب دليل من عميل أو مدقق.

وتأتي الكلف في ثلاث مجموعات: التكرار والأدوات التي تتطلبها الأهداف، ووقت الأشخاص لتخطيط التمارين وتشغيلها ومراجعتها، وجهد إبقاء الخطط وخرائط الاعتماديات حديثة.

وتهيمن على إجمالي تكلفة الملكية الأشخاص والطبقات الأشد. والانتقال من RTO بـ24 ساعة إلى ساعتين يغير التصميم والفاتورة، فاجعل هذه المفاضلة صريحة مع الأعمال. والاختبارات الآلية الصغيرة المتكررة تميل إلى كلفة أقل من حدث سنوي كبير واحد لأن العيوب تظهر وهي رخيصة الإصلاح.

الأنماط المضادة والمزالق

  • الخطة على الرف. تُحتسب وثيقة استعدادًا ولم يجربها أحد. بدلًا من ذلك، أبلغ بتاريخ ونتيجة آخر اختبار عملي بجانب كل هدف.
  • نجاح النسخ الاحتياطي على أنه نجاح الاستعادة. تبلّغ المهام بالأخضر والبيانات لا يمكن استعادتها. بدلًا من ذلك، اختبر الاستعادات بانتظام وتحقق من البيانات قبل عدّ النجاح.
  • مسرح مُتدرَّب عليه. التمرين مكتوب نصًّا ويديره مؤلفو الخطة. بدلًا من ذلك، أضف المفاجأة تدريجيًا.
  • هدف واحد لكل شيء. لكل خدمة RTO بأربع ساعات لأن القالب قال ذلك. بدلًا من ذلك، صنّف الخدمات طبقات من تحليل أثر أعمال وضع أهدافًا مناسبة.
  • نتائج لا تُغلق أبدًا. يسرد تقرير التمرين الفجوات ولا تراها قائمة المهام أبدًا. بدلًا من ذلك، امنح كل نتيجة مالكًا وتاريخ استحقاق وتحقق من الإغلاق بإعادة اختبار.
  • معاقبة الاختبار الفاشل. فريق يُلام على RTO فائت سيتوقف عن تشغيل الاختبارات الصعبة. بدلًا من ذلك، اتفقوا سلفًا على أن تمرينًا فاشلًا بنتائج جيدة نتيجة جيدة، وراجعوه بلا لوم.
  • خطط قديمة بعد تغيير سريع. يقود التقويم المراجعة وتفلت تغييرات المعمارية. بدلًا من ذلك، اربط مراجعة الخطة بسجلات التغيير الجوهري وقِس حداثة الخطة مقابلها.

نموذج النضج

البُعد البدء التطوير التوحيد الإدارة التنسيق
الأهداف والطبقات RTO وRPO غير مكتوبين أو منسوخان من قالب أهداف مكتوبة لبعض الخدمات الرئيسية تأتي الطبقات والأهداف من تحليل أثر أعمال وتقيم في سجل الخدمات تُراجع الأهداف مقابل النتائج المبرهَنة والمعمارية تُتفق الأهداف مع الأعمال والموردين وتُعدَّل مع تغير الخدمات
الاختبار والدليل الاسترداد لم يُختبر قط، أو اختُبر مرة بعد حادثة اختبارات استعادة ظرفية من بعض الفرق؛ النتائج في ملاحظات شخصية فواصل اختبار مرتبة بالطبقات مع نطاق وخط زمني ونتيجة مسجلة تُتتبع النتائج، ويُبلَّغ بتمارين الطاولة والتدريبات وأيام المحاكاة منفصلة تمارين عبر الفرق والموردين بمفاجأة، مجدولة من المخاطر
النتائج والتعلم فجوات تُلاحظ بشكل غير رسمي نتائج مسرودة بعد بعض التمارين لكل نتيجة مالك وشدة وتاريخ استحقاق يُراجع معدل الإغلاق والعمر، مع إعادة اختبار تؤكد الإغلاق تغذي النتائج المنصات المشتركة وعقود الموردين ومعايير التصميم
حداثة الخطة خطط تُكتب مرة خطط تُحدَّث بعد الحوادث خطط في التحكم في الإصدارات بفاصل مراجعة تُربط المراجعة بالتغييرات الجوهرية وتُقاس تُختبر الخطط وأدلة التشغيل شيفرةً وتُولَّد من تعريف الخدمة حيث أمكن

قائمة التحقق

  • لكل خدمة طبقة 1 RTO وRPO مكتوبان جاءا من تحليل أثر أعمال.
  • يُظهر سجل الخدمات طبقة كل خدمة وأهدافها وفاصل اختبارها.
  • ساعتا RTO وRPO وفحص الصحة والاستثناءات مكتوبة (انظر الموضوع 1.5، مصادر البيانات والأجهزة القياسية).
  • يُبلَّغ باختبارات الاسترداد العملية وتمارين الطاولة وأيام المحاكاة أنواعًا منفصلة.
  • كل اختبار استرداد يسجل حجم البيانات والسيناريو ومستوى المفاجأة وزمن الاستعادة المقيس وفقد البيانات.
  • تُختبر الاستعادات من النسخ الاحتياطية آليًا، وفحص التحقق من البيانات يقرر النجاح.
  • لكل نتيجة تمرين مالك وشدة وتاريخ استحقاق ومكان في قائمة المهام.
  • مراجعة الخطة مرتبطة بسجلات التغيير الجوهري، وأقدم خطة غير مراجَعة مرئية.
  • تتضمن خريطة الاعتماديات الخدمات المشتركة، وسيناريو واحد على الأقل يزيل إحداها.
  • لكل مقياس في هذا الموضوع ضابط حماية مسمى ومالك في سجل المقاييس (انظر الموضوع 1.4، حوكمة المقاييس وملكيتها).
  • يتناوب واجب التمارين، ويُعدّ الوقت الذي يستغرقه حملًا تشغيليًا.

مطالبات الذكاء الاصطناعي

صمّم اختبار استرداد والقياسات المصاحبة له.

I want to test recovery of [service name], a [tier] service with a stated RTO of
[RTO] and RPO of [RPO]. Its main components are [list: data stores, queues,
compute, shared services] and its suppliers are [list]. Draft a test plan with a
realistic scenario, the event that starts the clock, the health check that stops
it, how to measure data loss against the RPO, the data size to use, what to
record, and the safeguards to prevent harm to production. Do not invent
benchmark times or claim that any objective is achievable. List your assumptions
and the questions I should answer to finish the plan.

راجع تقارير التمارين بحثًا عن أدلة مجاملة.

Here are summaries of our last [number] recovery exercises: [paste for each:
type, date, scope, data size, restore time, data loss, findings count]. Our
objectives are [RTO and RPO per tier]. Identify where the reported results
could overstate real recovery capability, such as small datasets, scripted
scenarios, tabletop-only coverage, or loose health checks. Suggest what extra
information to record and which guardrail metrics to pair with each result. Do
not invent benchmark values or assume facts I have not given. List your
assumptions.

حوّل ملاحظات يوم المحاكاة إلى نتائج وبنود قائمة مهام.

Here are the raw notes from a game day on [service]: [paste notes and
timeline]. Extract each gap between the plan and what happened as a separate
finding with a short title, a description, a suggested severity using this scale
[severity scale], a candidate owner role (not a named person), and how we could
verify the fix. Group findings that may share a root cause. Do not invent events
that are not in the notes. List your assumptions and anything that needs
clarifying.

افحص حداثة خطة مقابل التغيير الأخير.

Here is the continuity plan for [service] last reviewed on [date]: [paste plan
or outline]. These are the material changes since then: [list changes to
architecture, data stores, dependencies, suppliers, and tooling]. Identify
steps, contacts, tools, and dependencies in the plan that the changes may have
made wrong, and list questions a reviewer should ask. Do not invent details
about our systems. List your assumptions.

مهارات الذكاء الاصطناعي

النقاط الرئيسية

  • هدف الاسترداد وعد، ولا يُظهر هل يمكن الوفاء به إلا تمرين موقّت وواقعي.
  • أبلغ بآخر نتيجة مبرهَنة وعمرها بجانب كل RTO وRPO، وأظهر كل تمرين صفًا مستقلًا.
  • اختبر الاستعادات لا النسخ الاحتياطية: لا تُحتسب الاستعادة إلا حين يُتحقق من أن البيانات قابلة للاستخدام.
  • ناتج التمرين قائمة مغلقة من النتائج، فتتبع أعمارها وأكّد الإغلاق بإعادة اختبار.
  • أبقِ الخطط في التحكم في الإصدارات واربط مراجعتها بالتغيير الجوهري، لا بالتقويم وحده.
  • قِس الخدمات والخطط لا الناس، واجعل التمرين الفاشل بنتائج جيدة نتيجة آمنة ومحترمة.

المراجع والقراءة الإضافية

  1. Beyer, B., Jones, C., Petoff, J., and Murphy, N. R. (eds.), Site Reliability Engineering: How Google Runs Production Systems, O'Reilly Media, 2016, https://sre.google/sre-book/table-of-contents/
  2. Beyer, B., Murphy, N. R., Rensin, D. K., Kawahara, K., and Thorne, S. (eds.), The Site Reliability Workbook: Practical Ways to Implement SRE, O'Reilly Media, 2018, https://sre.google/workbook/table-of-contents/
  3. Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
  4. ISO 22301:2019, Security and resilience: Business continuity management systems: Requirements, International Organization for Standardization.
  5. ISO 22313:2020, Security and resilience: Business continuity management systems: Guidance on the use of ISO 22301, International Organization for Standardization.
  6. Rosenthal, C., and Jones, N., Chaos Engineering: System Resiliency in Practice, O'Reilly Media, 2020.
  7. Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
  8. Wikipedia, Business continuity planning.
  9. Wikipedia, Recovery time objective.
  10. Wikipedia, Recovery point objective.
  11. Wikipedia, Business impact analysis.
  12. Wikipedia, ISO 22301.
  13. Wikipedia, Backup.
  14. Wikipedia, Chaos engineering.
  15. Wikipedia, Site reliability engineering.
  16. Wikipedia, Infrastructure as code.