บทนำส่วนที่ 4: ตัวชี้วัดปัญหา การเปลี่ยนแปลง และการปล่อยรุ่น
ตัวชี้วัดปัญหา การเปลี่ยนแปลง และการปล่อยรุ่น แสดงให้เห็นว่าวิธีที่ทีมเปลี่ยนแปลงบริการและเรียนรู้จากความล้มเหลว ช่วยให้บริการปรับปรุงได้เร็วขึ้นและให้บริการได้มั่นคงขึ้นพร้อมกันหรือไม่
ทุกการเปลี่ยนแปลงต่อบริการที่ใช้งานจริงคือการเดิมพัน การเปลี่ยนแปลงอาจส่งมอบคุณค่าได้เร็วขึ้น หรืออาจทำให้สิ่งที่ผู้ใช้พึ่งพาเสียหาย ส่วนที่ 3 วัดว่าการสนับสนุนและการกู้คืนบริการทำงานได้ดีเพียงใดเมื่อมีสิ่งขัดข้อง (ดูหัวข้อ 3.0 “บทนำส่วนที่ 3: ตัวชี้วัดเซอร์วิสเดสก์ เหตุขัดข้อง และคำขอ”) ส่วนนี้พิจารณาอีกด้านหนึ่งของเหรียญเดียวกัน คือการเปลี่ยนแปลงเข้าสู่สภาพแวดล้อมอย่างไร ก่อปัญหาบ่อยเพียงใด และองค์กรเรียนรู้ได้ดีเพียงใด เพื่อไม่ให้ปัญหาเดิมกลับมาอีก
การส่งมอบอย่างต่อเนื่องและ ITIL เข้าหาประเด็นนี้จากคนละทิศทาง แนวปฏิบัติแบบคล่องตัวนิยมการส่งมอบซอฟต์แวร์อย่างต่อเนื่องในการเปลี่ยนแปลงขนาดเล็ก และถือว่าข้อมูลป้อนกลับที่รวดเร็วเป็นมาตรการด้านความปลอดภัย ส่วนแนวปฏิบัติของ ITIL เช่น การจัดการปัญหา การสนับสนุนการเปลี่ยนแปลง และการจัดการการปล่อยรุ่น มีไว้เพื่อรักษาเสถียรภาพ และเพื่อค้นหาและขจัดสาเหตุของเหตุขัดข้อง ตัวชี้วัดในส่วนนี้ช่วยให้ตรวจสอบมุมมองทั้งสองเทียบกับหลักฐานชุดเดียวกันได้ หากการเปลี่ยนแปลงบ่อยครั้งปลอดภัย ตัวชี้วัดความล้มเหลวและการทำซ้ำจะแสดงให้เห็น หากมาตรการควบคุมทำให้การส่งมอบช้าลงโดยไม่ลดความเสี่ยง ตัวชี้วัดการอนุมัติและลีดไทม์จะแสดงให้เห็นแทน
มีข้อควรระวังสองข้อตลอดทั้งส่วน ความเร็วและเสถียรภาพต้องอ่านร่วมกัน เพราะตัวเลขที่ทำให้อย่างหนึ่งดีขึ้นโดยแอบทำให้อีกอย่างเสียหายเป็นการแลกเปลี่ยนที่ไม่คุ้ม ตัวชี้วัดด้านเวลาควรอ่านเป็นการแจกแจงด้วยเปอร์เซ็นไทล์ ดังที่กำหนดไว้ในส่วนที่ 1 (ดูหัวข้อ 1.6 “ความรู้ด้านสถิติสำหรับตัวชี้วัดบริการ”) ทุกตัวชี้วัดในที่นี้อธิบายทีม บริการ หรือระบบ ไม่มีตัวใดจัดอันดับบุคคล และไม่มีตัวใดเป็นเป้าหมายที่ควรผลักดันโดยลำพัง (ดูหัวข้อ 1.2 “กฎของกูดฮาร์ตและจิตวิทยาของตัวชี้วัด”)
หัวข้อในส่วนนี้
- 4.1 ตัวชี้วัดการจัดการปัญหา: ปัญหาที่เปิดและปิด การนำข้อผิดพลาดที่ทราบกลับมาใช้ซ้ำ การเกิดซ้ำ และเวลาจนถึงการแก้ไขถาวร
- 4.2 ตัวชี้วัดการทบทวนหลังเหตุการณ์และการเรียนรู้: การทบทวนที่เสร็จสิ้น การปิดรายการการดำเนินการ การเกิดซ้ำของสาเหตุ และสัญญาณการเรียนรู้แบบไม่กล่าวโทษ
- 4.3 ตัวชี้วัดการสนับสนุนการเปลี่ยนแปลง: ปริมาณการเปลี่ยนแปลงตามประเภท ลีดไทม์การอนุมัติ สัดส่วนการเปลี่ยนแปลงมาตรฐาน และระบบอัตโนมัติของการอนุมัติ
- 4.4 ความล้มเหลวของการเปลี่ยนแปลงและการทำซ้ำ: อัตราการเปลี่ยนแปลงที่ล้มเหลว สัดส่วนการเปลี่ยนแปลงฉุกเฉิน อัตราการย้อนกลับและการแก้ไขเร่งด่วน และนิยามความล้มเหลวที่สอดคล้องกัน
- 4.5 ตัวชี้วัดการปล่อยรุ่นและการติดตั้งใช้งาน: ความถี่ในการติดตั้งใช้งาน ความถี่ในการปล่อยรุ่น การใช้ฟีเจอร์แฟลก ลีดไทม์การปล่อยรุ่น และการแยกการติดตั้งใช้งานออกจากการปล่อยรุ่น
- 4.6 หนี้ทางเทคนิคและข้อผิดพลาดที่ทราบ: งานค้างข้อผิดพลาดที่ทราบ ยอดสะสมและดอกเบี้ยของหนี้ และการจัดลำดับความสำคัญของการแก้ไขเทียบกับงานฟีเจอร์
หัวข้อเหล่านี้สัมพันธ์กันอย่างไร
ส่วนนี้แบ่งเป็นสองครึ่งที่พึ่งพากัน หัวข้อ 4.1 และ 4.2 ว่าด้วยการเรียนรู้ คือการสืบหาสาเหตุของเหตุขัดข้องอย่างไร และการทบทวนกลายเป็นการแก้ไขที่เสร็จสมบูรณ์อย่างไร หัวข้อ 4.3, 4.4 และ 4.5 ว่าด้วยการเปลี่ยนแปลง คือการอนุมัติอย่างไร ล้มเหลวบ่อยเพียงใด และไปถึงผู้ใช้อย่างไร หัวข้อ 4.6 เชื่อมสองครึ่งเข้าด้วยกัน เพราะหนี้และข้อผิดพลาดที่ทราบซึ่งการเรียนรู้ค้นพบ คือรายการเดียวกับที่แย่งเวลาของทีมกับฟีเจอร์ใหม่
คู่ที่สำคัญที่สุดคือความเร็วกับความล้มเหลว ความถี่ในการติดตั้งใช้งานและการปล่อยรุ่นในหัวข้อ 4.5 (ดูหัวข้อ 4.5 “ตัวชี้วัดการปล่อยรุ่นและการติดตั้งใช้งาน”) อธิบายว่าการเปลี่ยนแปลงไปถึงระบบจริงบ่อยเพียงใด และโครงการวิจัย DORA จับคู่ตัวชี้วัดปริมาณงานเช่นนี้กับตัวชี้วัดเสถียรภาพ (ดูหัวข้อ 2.8 “ตัวชี้วัด DORA”) หัวข้อ 4.4 (ดูหัวข้อ 4.4 “ความล้มเหลวของการเปลี่ยนแปลงและการทำซ้ำ”) เป็นด้านเสถียรภาพนั้น ทีมที่ติดตั้งใช้งานบ่อยขึ้นในขณะที่อัตราความล้มเหลวและการทำซ้ำคงที่หรือลดลงกำลังปรับปรุง ทีมที่ความถี่เพิ่มขึ้นพร้อมกับการย้อนกลับและการแก้ไขเร่งด่วนที่เพิ่มขึ้นก็เพียงย้ายต้นทุนไปไว้ที่อื่น
การสนับสนุนการเปลี่ยนแปลงอยู่ระหว่างทั้งสองด้าน หัวข้อ 4.3 (ดูหัวข้อ 4.3 “ตัวชี้วัดการสนับสนุนการเปลี่ยนแปลง”) วัดด้านการควบคุม คือการอนุมัติใช้เวลานานเท่าใด การเปลี่ยนแปลงจำนวนเท่าใดได้รับอนุมัติล่วงหน้าเป็นแบบมาตรฐาน และการอนุมัติเป็นระบบอัตโนมัติเท่าใด ลีดไทม์การอนุมัติคือต้นทุนของมาตรการควบคุม และอัตราการเปลี่ยนแปลงที่ล้มเหลวจากหัวข้อ 4.4 คือหลักฐานว่ามาตรการนั้นได้ผลหรือไม่ เมื่ออ่านร่วมกันจะเห็นว่าขั้นตอนอนุมัติที่เข้มงวดกำลังซื้อความปลอดภัยหรือเพียงเพิ่มความล่าช้า และการอนุมัติที่เบากว่าและเป็นอัตโนมัติรักษาความล้มเหลวให้คงที่ได้หรือไม่
หัวข้อด้านการเรียนรู้คอยปกป้องหัวข้ออื่น การจัดการปัญหาในหัวข้อ 4.1 (ดูหัวข้อ 4.1 “ตัวชี้วัดการจัดการปัญหา”) วัดการเกิดซ้ำและเวลาจนถึงการแก้ไขถาวร ซึ่งเป็นบททดสอบระยะยาวว่าการจัดการเหตุขัดข้องจากส่วนที่ 3 กำลังขจัดสาเหตุหรือเพียงกู้คืนบริการ หัวข้อ 4.2 (ดูหัวข้อ 4.2 “ตัวชี้วัดการทบทวนหลังเหตุการณ์และการเรียนรู้”) ตรวจสอบว่าการทบทวนเกิดขึ้นจริงและการดำเนินการจากการทบทวนถูกปิด เพราะการทบทวนที่เสร็จสิ้นโดยไม่มีการติดตามผลไม่เปลี่ยนแปลงอะไรเลย การนับจำนวนการทบทวนหรือปัญหาที่ปิดนั้นบิดเบือนได้ง่าย จึงควรอ่านตัวเลขเหล่านี้คู่กับการเกิดซ้ำของสาเหตุเดิม ซึ่งปลอมแปลงได้ยากกว่า
สุดท้าย หัวข้อ 4.6 (ดูหัวข้อ 4.6 “หนี้ทางเทคนิคและข้อผิดพลาดที่ทราบ”) อธิบายว่าเหตุใดตัวชี้วัดอื่นจึงเลื่อนไหล ข้อผิดพลาดที่ทราบซึ่งไม่ได้รับการแก้ไขและหนี้ที่สะสมเพิ่มโอกาสเกิดความล้มเหลวและต้นทุนของทุกการเปลี่ยนแปลงในภายหลัง การอ่านงานค้างข้อผิดพลาดที่ทราบควบคู่กับอัตราการเปลี่ยนแปลงที่ล้มเหลวจะแสดงให้เห็นว่าการเลื่อนการแก้ไขเริ่มทำให้การส่งมอบช้าลงเมื่อใด
ส่วนต่อ ๆ ไปสร้างบนตัวชี้วัดเหล่านี้ วัตถุประสงค์ระดับบริการและงบข้อผิดพลาดในส่วนที่ 5 ให้ขีดจำกัดด้านความน่าเชื่อถือที่ใช้ตัดสินจังหวะของการเปลี่ยนแปลง และส่วนที่ 11 แสดงวิธีเริ่มใช้ตัวชี้วัดเหล่านี้โดยไม่สร้างความหวาดกลัว