ภาพรวมและแรงจูงใจ

ทุกบริการล้มเหลวได้บ้างเป็นครั้งคราว สิ่งที่แยกทีมที่ดีขึ้นอย่างต่อเนื่องออกจากทีมที่ทำซ้ำสัปดาห์แย่ที่สุดของตนคือสิ่งที่เกิดขึ้นในไม่กี่วันหลังความล้มเหลว รายงานทบทวนหลังเหตุการณ์ (postmortem) คือบันทึกเป็นลายลักษณ์อักษรของเหตุขัดข้องหรือเหตุเฉียดพลาด ได้แก่ สิ่งที่เกิดขึ้น ตรวจพบและจัดการอย่างไร เงื่อนไขใดทำให้เกิดเหตุได้ และทีมจะเปลี่ยนแปลงอะไร ITIL เรียกกิจกรรมนี้ว่าการทบทวนหลังเหตุขัดข้อง (post-incident review) และหัวข้อนี้ใช้สองชื่อแทนกันได้ การสะท้อนผลของทีมเป็นประจำเป็นญาติใกล้ชิดที่พิจารณางานปกติแทนการล่มของบริการ

หัวข้อนี้ครอบคลุมตัวชี้วัดที่บอกว่าวงจรการเรียนรู้นั้นทำงานหรือไม่ โดยถามสี่คำถาม การทบทวนที่ควรเกิดขึ้นเกิดขึ้นจริงหรือไม่ การทบทวนดีพอจะพบสิ่งที่เป็นจริงหรือไม่ การดำเนินการที่การทบทวนสร้างขึ้นเสร็จสิ้นหรือไม่ และสาเหตุเดิมยังกลับมาอยู่ดีหรือไม่ มีคำถามที่ห้าซึ่งอยู่ใต้ทุกข้อ คือผู้คนรู้สึกปลอดภัยพอที่จะอธิบายสิ่งที่เกิดขึ้นจริงหรือไม่

หัวข้อนี้อยู่ระหว่างสองหัวข้อข้างเคียงและไม่ทวนซ้ำ ตัวชี้วัดเหตุขัดข้องรุนแรง (ดูหัวข้อ 3.4 “ตัวชี้วัดเหตุขัดข้องรุนแรง”) วัดความทันเวลาของการทบทวนและการติดตามผลการดำเนินการสำหรับเหตุขัดข้องรุนแรงที่ประกาศแล้ว และเป็นที่อยู่ของตัวชี้วัดสองตัวนั้นในบริบทที่แคบนี้ ตัวชี้วัดการจัดการปัญหา (ดูหัวข้อ 4.1 “ตัวชี้วัดการจัดการปัญหา”) เป็นเจ้าของบันทึกปัญหา ข้อผิดพลาดที่ทราบ และเวลาจนถึงการแก้ไขถาวร หัวข้อนี้ขยายมุมมองไปยังเหตุขัดข้องทุกระดับความรุนแรง เหตุเฉียดพลาด และการทบทวนย้อนหลังของทีม และเป็นเจ้าของคุณภาพของการเรียนรู้เอง ได้แก่ ความครอบคลุม ความลึก การปิดการดำเนินการจากทุกแหล่ง การเกิดซ้ำของสาเหตุ และสัญญาณแบบไม่กล่าวโทษที่รักษาข้อมูลให้ซื่อตรง

คำศัพท์ที่ใช้ในหัวข้อนี้

  • รายงานทบทวนหลังเหตุการณ์หรือการทบทวนหลังเหตุขัดข้อง: การตรวจสอบเหตุขัดข้องอย่างมีโครงสร้างและไม่กล่าวโทษหลังบริการกลับคืนมา โดยจบด้วยบันทึกเป็นลายลักษณ์อักษร
  • เหตุเฉียดพลาด (near miss): เหตุการณ์ที่อาจก่อให้เกิดเหตุขัดข้องหรือความเสียหายแต่ไม่ได้เกิดขึ้น เช่น การติดตั้งใช้งานที่ล้มเหลวซึ่งถูกจับได้ในสภาพแวดล้อมทดสอบ หรือการแจ้งเตือนที่ดังขึ้นไม่กี่นาทีก่อนผู้ใช้สังเกตเห็น
  • รายการการดำเนินการ (action item): การเปลี่ยนแปลงที่เฉพาะเจาะจง มีทีมเจ้าของที่ระบุชื่อ วันครบกำหนด และวิธีบอกว่าเสร็จสิ้นเมื่อใด
  • ปัจจัยร่วม (contributing factor): เงื่อนไขที่ทำให้เหตุขัดข้องเกิดได้หรือแย่ลง เหตุขัดข้องส่วนใหญ่มีหลายปัจจัย “สาเหตุราก” เพียงข้อเดียวมักเป็นการทำให้เรียบง่ายเกินไป และการวิเคราะห์สาเหตุรากควรถือเป็นการค้นหาเงื่อนไข ไม่ใช่การค้นหาผู้กระทำผิด
  • ประเภทสาเหตุ (cause class): ป้ายกำกับที่คงที่จากรายการสั้น ๆ ที่ตกลงกัน (เช่น “ขีดจำกัดศักยภาพ” “การคลาดเคลื่อนของการกำหนดค่า” “ขาดการเฝ้าติดตาม” “ความเป็นเจ้าของไม่ชัดเจน”) ใช้สังเกตการเกิดซ้ำ อธิบายเงื่อนไขของระบบ ไม่เคยระบุบุคคล
  • ไม่กล่าวโทษ (blameless): รูปแบบการทบทวนที่ถามว่าระบบปล่อยให้คนที่มีเหตุผลกระทำเช่นนั้นได้อย่างไร และไม่ถามว่าจะลงโทษใคร เป็นแนวปฏิบัติที่เชื่อมโยงกับแนวคิดของวัฒนธรรมที่เป็นธรรม (just culture) ซึ่งความผิดพลาดโดยสุจริตถือเป็นการเรียนรู้ ส่วนการกระทำที่ประมาทเลินเล่อยังคงจัดการแยกต่างหาก
  • Information Technology Infrastructure Library (ITIL): กรอบแนวทางที่ใช้กันอย่างกว้างขวางสำหรับการจัดการบริการไอที (ITSM) หัวข้อนี้อ้างถึงแนวปฏิบัติตามที่อธิบายไว้ใน ITIL 4 (2019) และหนังสือทั้งเล่มอ้างอิงเวลา ณ เดือนตุลาคม 2026 ดู ITIL

มุมมองแบบคล่องตัวและ ITIL ต่างกันอย่างไร

ITIL ให้โครงสร้าง ใน ITIL 4 การจัดการเหตุขัดข้องกู้คืนบริการ การจัดการปัญหาลดโอกาสและผลกระทบของเหตุขัดข้องด้วยการค้นหาและจัดการสาเหตุ และการปรับปรุงอย่างต่อเนื่องเปลี่ยนสิ่งที่เรียนรู้ให้เป็นการเปลี่ยนแปลงที่ได้รับทุน การทบทวนเป็นบานพับระหว่างสองอย่างแรกกับอย่างที่สาม ITIL มักถามว่ามีการจัดการทบทวนหรือไม่ มีการเปิดบันทึกปัญหาในที่ที่สมควรหรือไม่ และมีการลงทะเบียนการปรับปรุงหรือไม่

ขนบแบบคล่องตัวและวิศวกรรมความน่าเชื่อถือของไซต์ (SRE) ให้นิสัย การทบทวนเป็นแบบไม่กล่าวโทษ สั้น เขียนสำหรับผู้อ่านนอกทีม และแบ่งปันอย่างกว้างขวาง การสะท้อนผลของทีมเป็นประจำ ซึ่งเป็นนิสัยของการปรับปรุงอย่างต่อเนื่อง ถามว่าจะเปลี่ยนอะไรต่อไป และความนิยมของแนวทางแบบคล่องตัวต่อการปรับเล็ก ๆ บ่อย ๆ มาแทนที่โครงการปรับปรุงขนาดใหญ่เพียงโครงการเดียว หนังสือ Site Reliability Engineering ของ Google ใช้หนึ่งบทกับวัฒนธรรมการทบทวนหลังเหตุการณ์ และโต้แย้งว่ากระบวนการทบทวนดีได้เท่ากับวัฒนธรรมที่อยู่รอบ ๆ เท่านั้น

เมื่อใช้ร่วมกัน สองมุมมองนี้แข็งแกร่ง ITIL ให้กฎความครอบคลุมและที่อยู่ของการดำเนินการ นิสัยแบบคล่องตัวและ SRE ให้ความซื่อตรงและความเร็ว เมื่อวัดร่วมกัน จะแสดงว่าวงจรกำลังปิดหรือไม่

หลักการสำคัญ

  • การเรียนรู้คือผลิตภัณฑ์ ไม่ใช่เอกสาร การทบทวนสำเร็จเมื่อมีบางอย่างเปลี่ยนในระบบ กระบวนการ หรือความเข้าใจร่วมกัน นับการเปลี่ยนแปลง ไม่ใช่เอกสาร
  • การไม่กล่าวโทษคือเงื่อนไขเบื้องต้นของข้อมูลที่ดี หากผู้คนกลัวการถูกกล่าวโทษ ไทม์ไลน์จะบางและปัจจัยร่วมจะดูเรียบร้อยเกินจริง และเหตุขัดข้องเดิมจะกลับมา ปกป้องความตรงไปตรงมาก่อนวัดสิ่งอื่นใด
  • วัดการติดตามผลและการเกิดซ้ำ ไม่ใช่ปริมาณ จำนวนการทบทวนบอกอะไรได้น้อย สัดส่วนการดำเนินการที่เสร็จสิ้นและสัดส่วนสาเหตุที่หายไปแล้วบอกได้มาก
  • รักษาตัวชี้วัดไว้ที่ระดับทีมและระบบ การทบทวนว่าด้วยเงื่อนไข อย่านับการทบทวน การดำเนินการ หรือข้อผิดพลาดต่อบุคคล และอย่าใช้ตัวเลขเหล่านี้ในการสนทนาเรื่องผลการปฏิบัติงาน
  • ปรับขนาดการทบทวนให้เหมาะสม ไม่ใช่ทุกเหตุการณ์ที่ควรมีเอกสารยาว กำหนดตัวกระตุ้นตามผลกระทบและคุณค่าของการเรียนรู้ และให้เหตุการณ์เล็กได้การทบทวนสั้น
  • ให้การดำเนินการแข่งขันอย่างซื่อตรง รายการการดำเนินการคืองาน อยู่ในแบ็กล็อกเดียวกับงานอื่น จัดลำดับเทียบกับงานนั้น และอาจถูกปฏิเสธโดยบันทึกเหตุผล
  • อ่านการทบทวน ตัวเลขระบุตำแหน่งของปัญหา มนุษย์ที่อ่านตัวอย่างจะบอกว่าการทบทวนดีหรือไม่

นิยามตัวชี้วัด

ตัวชี้วัดต่อไปนี้อธิบายวงจรการเรียนรู้ของบริการหรือกลุ่มทีม แต่ละตัวระบุสิ่งที่นับ จุดเริ่มและหยุดของนาฬิกาจับเวลา และสิ่งที่ไม่รวม ตัวชี้วัดด้านเวลาควรแสดงเป็นค่ามัธยฐานและเปอร์เซ็นไทล์สูง (เช่น ที่ 85) พร้อมอายุของรายการเปิดที่เก่าที่สุด ไม่ใช่ค่าเฉลี่ย (ดูหัวข้อ 1.6 “ความรู้ด้านสถิติสำหรับตัวชี้วัดบริการ”)

ตัวชี้วัด นิยาม สูตร หน่วย แหล่งข้อมูล แนวปฏิบัติ ITIL ส่วนที่เทียบเคียงได้แบบคล่องตัว ความถี่
ความครอบคลุมของการทบทวน สัดส่วนเหตุการณ์ที่เข้าเกณฑ์ซึ่งได้รับการทบทวนเสร็จสิ้น เหตุการณ์ที่เข้าเกณฑ์ซึ่งมีการทบทวนที่เผยแพร่ภายในกรอบเวลาที่ตกลง / เหตุการณ์ที่เข้าเกณฑ์ซึ่งปิดในช่วงเวลา เหตุการณ์ที่เข้าเกณฑ์คือเหตุการณ์ที่ตรงกับตัวกระตุ้นที่เขียนไว้ เหตุการณ์ที่ยังอยู่ในกรอบเวลาและยังเปิดอยู่ ณ สิ้นช่วงเวลาไม่นับรวม เปอร์เซ็นต์ บันทึกเหตุขัดข้องจากเครื่องมือ ITSM เชื่อมกับที่เก็บการทบทวน การจัดการเหตุขัดข้อง การจัดการปัญหา การสะท้อนผลของทีมเป็นประจำ ข้อตกลงการทำงานของทีม รายเดือน
คะแนนคุณภาพการทบทวน การทบทวนที่เผยแพร่ตรงตามมาตรฐานเป็นลายลักษณ์อักษรแบบสั้นหรือไม่ การทบทวนในตัวอย่างที่ตรงตามรายการตรวจสอบอย่างน้อย [จำนวนที่ตกลง] ข้อ / การทบทวนในตัวอย่าง ตัวอย่างคือการทบทวนจำนวนคงที่ที่สุ่มทุกไตรมาส ให้คะแนนโดยผู้ที่อยู่นอกทีมเจ้าของ เปอร์เซ็นต์ ตัวอย่างรายไตรมาสจากที่เก็บการทบทวนพร้อมแบบฟอร์มให้คะแนน การปรับปรุงอย่างต่อเนื่อง การจัดการปัญหา นิยามของความเสร็จสำหรับการทบทวน รายไตรมาส
อัตราการปิดการดำเนินการ สัดส่วนการดำเนินการจากการทบทวนที่เสร็จสิ้นภายในวันครบกำหนด การดำเนินการที่เสร็จสิ้นหรือปฏิเสธอย่างเป็นทางการ (พร้อมเหตุผล) ภายในวันครบกำหนด / การดำเนินการที่ครบกำหนดในช่วงเวลา นาฬิกาเริ่มเมื่อเผยแพร่การทบทวนและหยุดเมื่อทีมเจ้าของทำเครื่องหมายว่าการดำเนินการเสร็จและผู้ทบทวนยืนยัน การดำเนินการที่ปิดเป็น “จะไม่ทำ” นับแยกต่างหากและรายงาน เปอร์เซ็นต์ แบ็กล็อกของทีมหรือทะเบียนการปรับปรุงใน ITSM เชื่อมโยงกับการทบทวน การปรับปรุงอย่างต่อเนื่อง การจัดการปัญหา แบ็กล็อกของทีม การดำเนินการปรับปรุง รายเดือน
อายุของการดำเนินการที่เปิดอยู่ อายุของการดำเนินการจากการทบทวนที่ยังเปิดอยู่ สำหรับแต่ละการดำเนินการที่เปิดอยู่ วันนี้ลบด้วยวันที่เผยแพร่การทบทวนของมัน รายงานค่ามัธยฐาน เปอร์เซ็นไทล์ที่ 85 และรายการที่เก่าที่สุด วัน แบ็กล็อกของทีมหรือทะเบียนการปรับปรุง การปรับปรุงอย่างต่อเนื่อง อายุของรายการงาน งานระหว่างทำที่ค้างนาน รายเดือน
อัตราการเกิดซ้ำของสาเหตุ สัดส่วนเหตุการณ์ที่ประเภทสาเหตุตรงกับเหตุการณ์ก่อนหน้าของบริการเดียวกัน เหตุการณ์ในช่วงเวลาที่ประเภทสาเหตุหลักตรงกับการทบทวนที่ปิดในสิบสองเดือนก่อนหน้าของบริการเดียวกัน / เหตุการณ์ในช่วงเวลาที่มีบันทึกประเภทสาเหตุ เหตุการณ์ที่ไม่มีบันทึกประเภทสาเหตุไม่นับรวมและนับแยกต่างหาก เปอร์เซ็นต์ ฟิลด์ประเภทสาเหตุของที่เก็บการทบทวนเชื่อมกับบันทึกเหตุขัดข้อง การจัดการปัญหา การจัดการเหตุขัดข้อง การวิเคราะห์ข้อบกพร่องที่หลุดรอด หัวข้อซ้ำจากการทบทวนย้อนหลัง รายไตรมาส
อัตราการรายงานเหตุเฉียดพลาด ปริมาณเหตุเฉียดพลาดและสัญญาณอ่อนที่ผู้คนเลือกรายงาน เหตุเฉียดพลาดที่บันทึกในช่วงเวลา / บริการที่ใช้งานอยู่ แสดงเป็นแนวโน้มต่อบริการและไม่เคยต่อบุคคล อัตรานี้ตั้งใจให้เพิ่มขึ้นในช่วงต้นของโครงการที่ดีแล้วจึงทรงตัว จำนวนต่อบริการ บันทึกเหตุเฉียดพลาด หรือฟิลด์ที่ติดแท็กในตัวติดตามประเด็น การจัดการเหตุขัดข้อง การจัดการความเสี่ยง การตรวจสุขภาพทีม บอร์ดอุปสรรค รายเดือน
ขอบเขตการเรียนรู้ที่แพร่ไป การทบทวนเดินทางไปไกลเกินทีมที่เขียนเพียงใด การทบทวนที่นำเสนอหรืออภิปรายนอกทีมเจ้าของ (เวทีร่วม เซสชันข้ามทีม หรือการอ่านที่บันทึกไว้โดยทีมที่พึ่งพา) ภายใน [จำนวนวันที่ตกลง] วันนับจากเผยแพร่ / การทบทวนที่เผยแพร่ในช่วงเวลา เปอร์เซ็นต์ บันทึกเวทีหรือการประชุมและที่เก็บการทบทวน การปรับปรุงอย่างต่อเนื่อง การจัดการความรู้ การทบทวนร่วมกับผู้มีส่วนได้ส่วนเสีย ชุมชนผู้ปฏิบัติ รายไตรมาส
การยกยอดการดำเนินการจากการทบทวนย้อนหลัง สัดส่วนการดำเนินการจากการทบทวนย้อนหลังของทีมที่เสร็จสิ้นก่อนการทบทวนย้อนหลังครั้งถัดไป การดำเนินการจากการทบทวนย้อนหลังที่เสร็จก่อนการทบทวนย้อนหลังครั้งถัดไป / การดำเนินการจากการทบทวนย้อนหลังที่ตกลงในครั้งก่อน การดำเนินการที่ตั้งใจยกเลิกพร้อมเหตุผลจะถูกนำออกจากทั้งสองจำนวน เปอร์เซ็นต์ บันทึกหรือบอร์ดการทบทวนย้อนหลังที่เก็บไว้ในแบ็กล็อกของทีม การปรับปรุงอย่างต่อเนื่อง การสะท้อนผลของทีมเป็นประจำ ต่อรอบการทบทวน ทบทวนรายไตรมาส
ชีพจรความปลอดภัยในการพูด ผู้คนเชื่อว่าตนอธิบายความผิดพลาดได้โดยไม่ถูกกล่าวโทษหรือไม่ สัดส่วนคำตอบที่ถึงหรือสูงกว่า [ระดับที่ตกลง] ในชุดคำถามสั้นแบบไม่ระบุชื่อ (เช่น “ฉันอธิบายความผิดพลาดในการทบทวนได้โดยไม่กลัวถูกกล่าวโทษ”) / คำตอบที่ได้รับ ชีพจรรายงานเฉพาะกลุ่มที่ใหญ่พอจะปกป้องการไม่ระบุตัวตน เปอร์เซ็นต์ แบบสำรวจชีพจรแบบไม่ระบุชื่อ การปรับปรุงอย่างต่อเนื่อง การเปลี่ยนแปลงองค์กร การตรวจสุขภาพทีม การตรวจความปลอดภัยทางจิตใจ รายไตรมาส

การทบทวน “เผยแพร่แล้ว” เมื่อผู้อ่านที่ตั้งใจไว้มองเห็นได้ ไม่ใช่บันทึกเป็นฉบับร่าง ประเภทสาเหตุถูกบันทึกโดยกลุ่มทบทวนจากตัวการทบทวนเอง จากรายการสั้นที่ตกลงกัน ไม่เคยบันทึกโดยผู้ที่ปิดตั๋ว

ข้อเสนอแนะ

ตัดสินใจว่าอะไรควรได้รับการทบทวน

1. เขียนตัวกระตุ้นลงไปและเผยแพร่ กฎเช่น “ทุกเหตุขัดข้องรุนแรง ทุกเหตุขัดข้องสองระดับความรุนแรงสูงสุด เหตุการณ์ใด ๆ ที่ข้อมูลลูกค้าสูญหาย และเหตุเฉียดพลาดใด ๆ ที่ทีมเห็นว่าให้ความรู้” ช่วยขจัดการโต้เถียงและทำให้ความครอบคลุมวัดได้ หากไม่มีตัวกระตุ้นที่เขียนไว้ การทบทวนจะตามอารมณ์และภาระงาน และตัวเลขความครอบคลุมจะไม่มีความหมาย

2. ปรับขนาดการทบทวนให้เหมาะกับเหตุการณ์ เหตุการณ์เล็กอาจมีการทบทวนครึ่งหน้าที่เขียนในสามสิบนาที ขณะที่เหตุขัดข้องรุนแรงอาจควรมีไทม์ไลน์เต็มรูปแบบและเซสชันที่มีผู้อำนวยความสะดวก เส้นทางแบบเบาช่วยรักษาความครอบคลุมให้สูงโดยไม่ทำให้แนวปฏิบัติเป็นภาระ

ตัดสินคุณภาพด้วยการอ่าน

3. สุ่มตัวอย่างและอ่านการทบทวนทุกไตรมาส สุ่มตัวอย่างเล็ก ๆ และให้ผู้ที่อยู่นอกทีมเจ้าของอ่านแต่ละฉบับเทียบกับรายการตรวจสอบสั้น ๆ รายการที่มีประโยชน์ได้แก่ ไทม์ไลน์ที่แสดงการตัดสินใจและข้อมูลที่มีอยู่ในขณะนั้น ปัจจัยร่วมมากกว่าหนึ่งข้อ คำอธิบายว่าอะไรเป็นไปด้วยดี การดำเนินการที่มีเจ้าของและวันที่ และภาษาที่อธิบายระบบ ไม่ใช่บุคคล รายงานสัดส่วนที่ตรงตามมาตรฐาน และป้อนข้อค้นพบกลับให้ผู้เขียนเป็นการโค้ช

4. สอนทักษะการทบทวน อคติมองย้อนหลัง (hindsight bias) ทำให้เหตุการณ์ดูชัดเจนเมื่อผ่านไปแล้วและดันผู้เขียนไปสู่ “ใครสักคนควรสังเกตเห็น” ขอให้ผู้อำนวยความสะดวกสร้างภาพขึ้นใหม่ว่าผู้คนรู้อะไรในแต่ละขณะ และใช้ไฮวายเป็นตัวกระตุ้นคำถาม ไม่ใช่สูตรสำหรับคำตอบเดียว

ทำให้การดำเนินการเสร็จสิ้น

5. วางการดำเนินการไว้ในแบ็กล็อกจริง การดำเนินการที่อยู่ในเอกสารทบทวนเท่านั้นมองไม่เห็นในการวางแผน สร้างรายการงานในตัวติดตามของทีมเจ้าของ เชื่อมโยงกับการทบทวน และให้แย่งศักยภาพเหมือนงานอื่น รายงานการปิดตามทีมและตามบริการ เพื่อให้การดำเนินการที่ถูกขวางมองเห็นได้โดยผู้ที่ปลดล็อกได้

6. อนุญาตให้ “จะไม่ทำ” อย่างซื่อตรง และบันทึกเหตุผล การดำเนินการบางอย่างพบว่าแพงเกินไปหรือไม่เกี่ยวข้องอีกต่อไป การปิดพร้อมเหตุผลที่ระบุดีกว่าปล่อยเปิดไว้หนึ่งปีหรือทำเครื่องหมายว่าเสร็จโดยไม่ได้ทำ รายงานสัดส่วนที่ปฏิเสธ เพราะสัดส่วนที่สูงมากชี้ว่ากระบวนการทบทวนกำลังเสนอการดำเนินการที่ไม่มีใครจะให้ทุน

7. ติดตามอายุของการดำเนินการที่เปิดอยู่ นอกเหนือจากอัตราการปิด เปอร์เซ็นไทล์ที่ 85 ของอายุการดำเนินการที่เปิดอยู่และการดำเนินการที่เปิดอยู่เก่าที่สุดแสดงว่าอะไรติดขัด ทบทวนรายการที่เก่าที่สุดในการประชุมที่ทบทวนความน่าเชื่อถือของบริการ

เฝ้าระวังการเกิดซ้ำ

8. เก็บรายการประเภทสาเหตุสั้น ๆ และติดแท็กทุกการทบทวน รายการแปดถึงสิบห้าประเภทเพียงพอ ทบทวนรายการเมื่อเหตุการณ์มากกว่าสัดส่วนเล็ก ๆ ตกอยู่ในประเภท “อื่น ๆ” การติดแท็กช่วยให้ตอบคำถาม “เคยเห็นสิ่งนี้มาก่อนหรือไม่” ด้วยข้อมูล และป้อนรูปแบบที่ไม่มีการทบทวนใดเพียงลำพังแสดงได้ให้การจัดการปัญหา (ดูหัวข้อ 4.1 “ตัวชี้วัดการจัดการปัญหา” และหัวข้อ 4.6 “หนี้ทางเทคนิคและข้อผิดพลาดที่ทราบ”)

9. ถือการเกิดซ้ำเป็นสัญญาณเกี่ยวกับการดำเนินการ ไม่ใช่เกี่ยวกับผู้คน เมื่อประเภทสาเหตุกลับมา ให้ถามว่าการดำเนินการก่อนหน้าเสร็จสิ้นหรือไม่ เป็นการดำเนินการที่ถูกต้องหรือไม่ และประเภทนั้นกว้างเกินไปหรือไม่ การเกิดซ้ำหลังปิดการดำเนินการทั้งหมดหมายความว่าการดำเนินการไม่ได้ผล ซึ่งเป็นข่าวที่มีประโยชน์

ปกป้องความซื่อตรง

10. รักษาการทบทวนให้ไม่กล่าวโทษและทำให้เห็นได้ชัด ระบุในแม่แบบว่าการทบทวนอธิบายเงื่อนไขและการตัดสินใจและไม่กำหนดความผิด และให้ผู้นำขอบคุณผู้เขียนสำหรับความตรงไปตรงมา ความปลอดภัยทางจิตใจ (psychological safety) ในงานวิจัยของ Amy Edmondson เกี่ยวกับทีมงาน คือความเชื่อร่วมกันว่าทีมปลอดภัยสำหรับการเสี่ยงในความสัมพันธ์ระหว่างบุคคล (ดูหัวข้อ 9.2 “ตัวชี้วัดความพึงพอใจและความเป็นอยู่ที่ดี”)

11. ให้รางวัลการรายงานเหตุเฉียดพลาด และอ่านจำนวนที่เพิ่มขึ้นเป็นข่าวดีในตอนแรก ทีมที่เริ่มรายงานเหตุเฉียดพลาดจะเห็นจำนวนพุ่งขึ้น เพราะเหตุการณ์เหล่านั้นเกิดขึ้นมาตลอด บอกล่วงหน้า ติดตามสัดส่วนเหตุเฉียดพลาดที่นำไปสู่การเปลี่ยนแปลง และเผยแพร่เรื่องราวด้วยความยินยอมของทีม

ช่องทางการบิดเบือนและมาตรการป้องกัน

ตัวชี้วัด วิธีที่ถูกบิดเบือน ตัวชี้วัดหรือแนวปฏิบัติป้องกันที่จับคู่กัน
ความครอบคลุมของการทบทวน จำกัดตัวกระตุ้นให้แคบลง ลดระดับความรุนแรงเพื่อให้เหตุการณ์ตกนอกเกณฑ์ ยื่น “การทบทวน” หนึ่งบรรทัดเพื่อติ๊กช่อง คะแนนคุณภาพการทบทวน เปรียบเทียบจำนวนเหตุขัดข้องตามความรุนแรงกับผลกระทบที่ลูกค้ารายงาน ตรวจสอบการลดระดับ
คะแนนคุณภาพการทบทวน เขียนตามรายการตรวจสอบด้วยข้อความสำเร็จรูป ให้คะแนนโดยทีมเจ้าของ ตัวอย่างที่คาดเดาได้ ผู้ให้คะแนนภายนอก ตัวอย่างสุ่ม อ่านการทบทวนสองฉบับออกเสียงทุกไตรมาส ติดตามว่าการดำเนินการจากการทบทวนที่ได้คะแนนสูงเสร็จสิ้นหรือไม่
อัตราการปิดการดำเนินการ กำหนดวันครบกำหนดไว้ไกล แยกการดำเนินการเป็นชิ้นเล็กน้อย ปิดการดำเนินการโดยไม่ยืนยัน ประกาศ “จะไม่ทำ” เพื่อเคลียร์รายการ อายุของการดำเนินการที่เปิดอยู่ สัดส่วนที่ปฏิเสธพร้อมเหตุผล ผู้ทบทวนยืนยันว่าการเปลี่ยนแปลงได้ผล อัตราการเกิดซ้ำของสาเหตุ
อายุของการดำเนินการที่เปิดอยู่ ปิดแล้วเปิดใหม่หรือสร้างการดำเนินการใหม่เพื่อรีเซ็ตอายุ ย้ายการดำเนินการไปยังรายการ “ไอเดีย” แยกต่างหาก เชื่อมโยงการดำเนินการใหม่กับการทบทวนต้นทางและรักษาวันที่แรก นับจำนวนการดำเนินการที่ย้ายไปเป็นไอเดีย
อัตราการเกิดซ้ำของสาเหตุ บันทึกประเภทสาเหตุที่คลุมเครือหรือเปลี่ยนไปเรื่อย ๆ เพื่อไม่ให้ตรงกัน ใช้ประเภท “อื่น ๆ” กว้าง ๆ เชื่อมโยงการเกิดซ้ำกับประเภทอื่น สัดส่วนเหตุการณ์ใน “อื่น ๆ” การอ่านการทบทวนซ้ำเป็นระยะแยกตามประเภท การทบทวนรายการประเภทเอง
อัตราการรายงานเหตุเฉียดพลาด ขอให้รายงานเพื่อให้ถึงตัวเลข บันทึกเหตุการณ์เล็กน้อย หรือในทางตรงข้าม อ่านตัวเลขเป็นความล้มเหลวและกดการรายงาน สัดส่วนเหตุเฉียดพลาดที่นำไปสู่การเปลี่ยนแปลง ไม่มีเป้าหมายต่อจำนวน ข้อมูลป้อนกลับจากชีพจรความปลอดภัยในการพูด
ขอบเขตการเรียนรู้ที่แพร่ไป เพิ่มรายชื่อในรายการแจกจ่าย นำเสนอในเซสชันที่มีผู้เข้าร่วมน้อย นับลิงก์เป็นการอ่าน บันทึกการเข้าร่วมหรือการอภิปรายจริง ถามทีมที่พึ่งพาว่าเปลี่ยนอะไรหลังการทบทวนครั้งล่าสุด
การยกยอดการดำเนินการจากการทบทวนย้อนหลัง ตกลงเฉพาะการดำเนินการเล็กน้อยที่ทำเสร็จง่าย ข้ามการทบทวนย้อนหลัง ทำเครื่องหมายรายการว่าเสร็จ ผลกระทบของการดำเนินการตามที่ทีมตัดสิน อัตราการจัดการทบทวนย้อนหลัง ว่าหัวข้อเดียวกันปรากฏหลายสัปดาห์หรือไม่
ชีพจรความปลอดภัยในการพูด กดดันผู้ตอบ สำรวจเฉพาะผู้ที่มั่นใจ รายงานค่าเฉลี่ยที่ซ่อนกลุ่มที่ได้คะแนนต่ำ อัตราการตอบและส่วนผสมของผู้ตอบ ขนาดกลุ่มขั้นต่ำ อ่านความเห็นอิสระทั้งหมด ภาษาในการทบทวนเปลี่ยนไปหรือไม่

การอ่านค่าที่ดีแสดงการทบทวนสำหรับเหตุการณ์ที่สำคัญ มาตรฐานคุณภาพที่ส่วนใหญ่ผ่าน การดำเนินการที่เสร็จหรือถูกปฏิเสธอย่างซื่อตรง การดำเนินการเก่าไม่กี่รายการที่ผู้นำเรียกชื่อได้ ประเภทสาเหตุที่ความถี่ลดลงหลังได้รับการแก้ไข และจำนวนเหตุเฉียดพลาดที่เพิ่มขึ้นแล้วทรงตัว ชีพจรคงที่หรือดีขึ้นเมื่อเกิดเหตุขัดข้องที่ยาก รูปแบบที่เรียบร้อยเกินไปเป็นสัญญาณให้อ่านตัวอย่างด้วยตัวมันเอง

ข้อแลกเปลี่ยน: ข้อดีและข้อเสีย

แนวทาง จุดแข็ง จุดอ่อน
ทบทวนทุกเหตุขัดข้อง ครอบคลุมสมบูรณ์ ไม่มีการโต้เถียงเรื่องตัวกระตุ้น หนัก การทบทวนตื้นเขิน ทีมเริ่มไม่พอใจกระบวนการ
ทบทวนตามตัวกระตุ้นที่เขียนไว้ โฟกัสแรงไปที่ผลกระทบและคุณค่าของการเรียนรู้ ตัวกระตุ้นต้องดูแล เหตุการณ์กำกวมหลุดรอด
การติดแท็กประเภทสาเหตุ พบรูปแบบข้ามการทบทวน ประเภทเป็นการทำให้เรียบง่าย สาเหตุจริงมักเป็นหลายสิ่งพร้อมกัน
ชีพจรแบบไม่ระบุชื่อเรื่องความปลอดภัย สัญญาณซื่อตรงสำหรับคำถามที่ละเอียดอ่อน หยาบ ทีมเล็กอาจระบุตัวได้ ความเหนื่อยล้าจากแบบสำรวจ

คำตอบเชิงข้อความคือรักษาวงจรให้สั้นและตัวเลขให้น้อย ได้แก่ ตัวกระตุ้นที่เขียนไว้ ตัวอย่างคุณภาพขนาดเล็ก ตัวติดตามการดำเนินการหนึ่งตัว และรายการประเภทสาเหตุ แล้วเพิ่มชีพจรความปลอดภัยเมื่อทีมไว้วางใจส่วนที่เหลือ ไม่มีตัวชี้วัดใดที่นี่พิสูจน์ได้ว่าการเรียนรู้เกิดขึ้นแล้ว เมื่อรวมกันจึงแสดงว่าเงื่อนไขสำหรับการเรียนรู้มีอยู่หรือไม่

คำถามสำหรับอภิปรายกับทีม

1. ในห้าเหตุขัดข้องล่าสุดของเรา เหตุใดได้รับการทบทวน และมีใครเปลี่ยนอะไรเพราะการทบทวนนั้นหรือไม่ เริ่มจากรายการเหตุขัดข้อง ไม่ใช่จากโฟลเดอร์การทบทวน เพื่อให้การทบทวนที่ขาดหายมองเห็นได้ สำหรับแต่ละการทบทวน ถามว่าวันนี้มีอะไรต่างไปในระบบหรือกระบวนการ หากคำตอบคือ “ไม่มีอะไร” ให้ถามว่าเหตุใดจึงจัดการทบทวนและใครอ่าน ผู้อำนวยความสะดวกควรบันทึกคำตอบโดยไม่ตัดสิน เพราะคำตอบแสดงว่าแนวปฏิบัติสร้างการเปลี่ยนแปลงหรือเพียงเอกสาร

2. อะไรจะทำให้ใครสักคนบอกความจริงในการทบทวนที่นี่ได้ยากขึ้น ขอตัวอย่างที่เฉพาะเจาะจง ได้แก่ ปฏิกิริยาของผู้จัดการ การประเมินผลการปฏิบัติงาน การยกระดับจากลูกค้า น้ำเสียงในอีเมล เชิญให้ผู้คนเขียนคำตอบแบบไม่ระบุชื่อก่อน มองหาเงื่อนไขที่เปลี่ยนแปลงได้ เช่น ใครเข้าร่วม ใครอ่าน และผู้นำพูดอะไรออกมา นี่คือการสนทนาที่ปกป้องทุกตัวเลขอื่นในหัวข้อนี้

3. รายการการดำเนินการใดเปิดค้างนานที่สุด และอะไรหยุดรายการเหล่านั้น แสดงห้ารายการที่เก่าที่สุด สำหรับแต่ละรายการ ถามว่าการดำเนินการยังถูกต้องหรือไม่ มีเจ้าของที่มีศักยภาพหรือไม่ และควรทำ เลื่อนกำหนด หรือปฏิเสธ รักษาโฟกัสที่ระบบของงาน ไม่ใช่ที่เจ้าของ ตกลงการตัดสินใจสำหรับแต่ละรายการก่อนจบเซสชัน

4. ปัญหาประเภทเดียวกันกลับมาเมื่อใด และนั่นบอกอะไรเกี่ยวกับการแก้ไขก่อนหน้า ใช้แท็กประเภทสาเหตุหาการเกิดซ้ำ และอ่านการทบทวนก่อนหน้าและการดำเนินการ ถามว่าการดำเนินการเสร็จสิ้นหรือไม่ ตอบปัจจัยร่วมหรือไม่ และประเภทถูกกำหนดกว้างเกินไปหรือไม่ เป้าหมายคือการดำเนินการที่ดีขึ้น ไม่ใช่คำอธิบาย

5. เรารายงานเหตุเฉียดพลาดหรือไม่ และเกิดอะไรขึ้นเมื่อมีคนรายงาน ขอตัวอย่างล่าสุดและตามดูว่าเกิดอะไรต่อ หากไม่มีอะไรตามมา ให้ถามว่าเหตุใดผู้คนจะรายงานอีก หากจำนวนต่ำ ให้ถามว่าผู้คนกลัวอะไร ผู้อำนวยความสะดวกควรอธิบายว่าจำนวนที่เพิ่มขึ้นเป็นสิ่งที่คาดไว้ในตอนแรก และตกลงว่าทีมจะตอบสนองต่อรายงานครั้งถัดไปอย่างไร เพื่อให้การรายงานรู้สึกคุ้มค่า

6. เราจะรู้ได้อย่างไรว่าการทบทวนดี หากเราดูตัวเลขใด ๆ ไม่ได้ คำถามนี้ขอให้ทีมอธิบายคุณภาพด้วยคำพูดของตนเอง คำตอบที่พบบ่อยได้แก่ “มีคนนอกทีมเรียนรู้อะไรบางอย่าง” “การแก้ไขคงอยู่” และ “ผู้เขียนไม่กลัว” แปลงคำตอบเป็นรายการตรวจสอบสำหรับตัวอย่างรายไตรมาส และกลับมาทบทวนหลังสองไตรมาส

สี่มุมมอง

ทีมผลิตภัณฑ์และการส่งมอบ

ทีมส่งมอบเขียนการทบทวนจำนวนมากและแบกการดำเนินการส่วนใหญ่ จึงรู้สึกถึงต้นทุนของกระบวนการที่ซุ่มซ่ามก่อน ทีมได้ประโยชน์จากแม่แบบสั้น กฎตัวกระตุ้นที่ชัดเจน และความเชื่อมโยงที่มองเห็นได้ระหว่างการดำเนินการกับรายการแบ็กล็อกของทีม การสะท้อนผลของทีมเป็นประจำสมควรได้รับวินัยการติดตามผลเดียวกับการทบทวนเหตุขัดข้อง และทีมที่ทำการดำเนินการจากการทบทวนย้อนหลังเสร็จกำลังฝึกนิสัยเดียวกันในระดับเล็กกว่า ระวังไม่ให้การดำเนินการถูกบีบออกโดยแรงกดดันจากฟีเจอร์ และนำการแลกเปลี่ยนนั้นไปหาเจ้าของผลิตภัณฑ์อย่างเปิดเผย (ดูหัวข้อ 2.5 “ตัวชี้วัดการพยากรณ์และการวางแผนการส่งมอบ”)

ทีมบริการและปฏิบัติการ

ทีมปฏิบัติการถือหลักฐาน (ไทม์ไลน์ การแจ้งเตือน บันทึกการแชต) และอยู่ในตำแหน่งที่ดีที่สุดในการติดแท็กประเภทสาเหตุอย่างสม่ำเสมอและสังเกตการเกิดซ้ำก่อนกลายเป็นการล่ม ทีมต้องมีเวลาที่ได้รับการปกป้องเพื่อเขียน เพราะการทบทวนที่เขียนตอนท้ายกะยาว ๆ จะบาง เชื่อมโยงแต่ละการทบทวนกับบันทึกปัญหาที่การทบทวนนั้นป้อนข้อมูลให้ (ดูหัวข้อ 3.3 “เวลาตอบสนองและเวลาแก้ไขเหตุขัดข้อง”)

ภาวะผู้นำและการกำกับดูแล

ผู้นำกำหนดน้ำเสียงของทุกการทบทวนด้วยสิ่งที่ถามหลังจากนั้น “ใครทำสิ่งนี้” ยุติการทบทวนที่ซื่อตรง และ “เราเรียนรู้อะไร และกำลังเปลี่ยนอะไร” เชิญชวนให้เกิดขึ้น องค์กรกำกับดูแลควรคาดหวังความครอบคลุม คุณภาพ อายุการดำเนินการ และการเกิดซ้ำในการทบทวนความน่าเชื่อถือ ให้ทุนการดำเนินการที่ต้องการการลงทุน และไม่เคยเปรียบเทียบทีมด้วยจำนวนเหตุขัดข้องหรือการทบทวนที่มี

ลูกค้าและผู้ใช้

ลูกค้าไม่ค่อยเห็นการทบทวน แต่รู้สึกถึงผลของมัน คือความผิดพลาดเดิมที่หยุดกลับมา และคำอธิบายที่ซื่อตรงเมื่อกลับมา เมื่อสัญญาอนุญาต ให้เผยแพร่สรุปเป็นภาษาธรรมดาหลังเหตุขัดข้องสำคัญ (ดูหัวข้อ 3.4 “ตัวชี้วัดเหตุขัดข้องรุนแรง”) การติดต่อซ้ำในประเด็นเดียวกันเป็นสัญญาณฝั่งลูกค้าว่าการเรียนรู้ยังไม่เกิดผล (ดูหัวข้อ 6.1 “ตัวชี้วัดความพึงพอใจของลูกค้า”)

ในทางปฏิบัติ: ตัวอย่าง ITIL แบบคล่องตัว

ผู้ค้าปลีกออนไลน์ขนาดกลางรายหนึ่งดำเนินร้านค้าหน้าบ้านที่ลูกค้าใช้ บริการชำระเงิน และแพลตฟอร์มสินค้าคงคลังภายใน ทีมผลิตภัณฑ์ห้าทีมสร้างและดำเนินบริการเหล่านี้ และกลุ่มการจัดการบริการขนาดเล็กดูแลกระบวนการเหตุขัดข้องและปัญหา ตัวเลขในตัวอย่างนี้เป็นตัวเลขเพื่อประกอบภาพ

ในไตรมาสหนึ่ง ผู้ค้าปลีกมีเหตุขัดข้อง 41 รายการในสองระดับความรุนแรงสูงสุด ตัวกระตุ้นที่เขียนไว้ทำให้ทุกรายการเข้าเกณฑ์ทบทวน และมีการทบทวน 36 ฉบับที่เผยแพร่ภายในสิบวันทำการ ความครอบคลุมของการทบทวนจึงประมาณ 88 เปอร์เซ็นต์ ผู้นำพอใจ กลุ่มการจัดการบริการสุ่มตัวอย่างการทบทวนแปดฉบับ ขอให้ทีมจากพื้นที่ผลิตภัณฑ์อื่นให้คะแนน และพบว่ามีเพียงสามฉบับที่ตรงตามมาตรฐานที่ตกลง ช่องว่างที่พบทั่วไปคือไทม์ไลน์ระบุสิ่งที่เกิดขึ้นแต่ไม่ระบุสิ่งที่ผู้คนรู้เมื่อตัดสินใจแต่ละครั้ง และส่วนปัจจัยร่วมระบุสาเหตุเดียว

ตัวอย่างเดียวกันแสดงว่าจากการดำเนินการ 74 รายการที่ครบกำหนดในไตรมาส 51 รายการเสร็จภายในวันครบกำหนด อัตราการปิดประมาณ 69 เปอร์เซ็นต์ การดำเนินการที่เปิดอยู่เก่าที่สุด อายุ 210 วัน คือเกณฑ์การแจ้งเตือนศักยภาพของฐานข้อมูลบริการชำระเงิน ที่ถูกเลื่อนมาหกสัปดาห์ติดต่อกัน การติดแท็กสาเหตุแสดง “ขีดจำกัดศักยภาพ” ใน 9 จาก 36 การทบทวน โดย 4 รายการเป็นของบริการชำระเงิน ชีพจรแบบไม่ระบุชื่อที่ตอบโดย 58 จาก 70 คนที่ได้รับเชิญต่ำกว่าในกลุ่มเวรเรียกฉุกเฉิน ซึ่งหลายความเห็นบอกว่าผู้จัดการอาวุโสถามคำถามเจาะจงเกี่ยวกับบุคคลที่ระบุชื่อ

ทีมตัดสินใจสามข้อ ข้อแรก จัดเซสชันสั้นกับผู้จัดการอาวุโสที่เข้าร่วมการทบทวนและตกลงกฎ คือคำถามในห้องว่าด้วยเงื่อนไขและการตัดสินใจ และการติดตามผลใด ๆ เกี่ยวกับบุคคลต้องผ่านหัวหน้าทีม ข้อสอง นำการดำเนินการด้านศักยภาพที่เก่าที่สุดไปไว้บนสุดของรอบวางแผนถัดไปของทีมบริการชำระเงิน จัดลำดับเทียบกับงานฟีเจอร์โดยเจ้าของผลิตภัณฑ์ และรายงานผลที่การทบทวนความน่าเชื่อถือ ข้อสาม เพิ่มรายการตรวจสอบสองข้อในแม่แบบการทบทวน (ผู้คนรู้อะไรในแต่ละการตัดสินใจ และปัจจัยร่วมอย่างน้อยสองข้อ) และจัดเซสชันโค้ชผู้เขียนโดยใช้การทบทวนหนึ่งฉบับที่ปกปิดตัวตนแล้ว

ความเสี่ยงของการบิดเบือนปรากฏในไตรมาสถัดมา ความครอบคลุมของการทบทวนเพิ่มเป็น 97 เปอร์เซ็นต์ แต่สัดส่วนการทบทวนที่ยาวไม่ถึง 300 คำเพิ่มเป็นสองเท่า และบางทีมลดระดับเหตุขัดข้องจากระดับความรุนแรงสองเป็นสามเพียงต่ำกว่าตัวกระตุ้น ตัวอย่างคุณภาพและการตรวจสอบการเปลี่ยนระดับความรุนแรงจับได้ กลุ่มถามว่าเหตุใดจึงลดระดับ ได้ทราบว่าทีมรู้สึกว่าการทบทวนเป็นการลงโทษ และผ่อนคลายความคาดหวังเรื่องความยาวสำหรับเหตุการณ์เล็กในขณะที่คงตัวกระตุ้นระดับความรุนแรงสองไว้

มุมมองตามประเภทองค์กร

สตาร์ตอัป ทีมเล็กเรียนรู้ได้เร็วเพราะทุกคนเข้าร่วมในเหตุขัดข้อง ความเสี่ยงคือไม่มีสิ่งใดถูกเขียนไว้และบทเรียนออกไปพร้อมพนักงานใหม่คนถัดไป เก็บแม่แบบหนึ่งหน้า จัดการทบทวนสำหรับทุกอย่างที่ปลุกใครสักคนกลางคืน และติดตามเฉพาะการปิดการดำเนินการและสาเหตุที่เกิดซ้ำ ปกป้องความตรงไปตรงมาโดยให้ผู้ก่อตั้งอ่านการทบทวนโดยไม่วิจารณ์รายบุคคล

ธุรกิจขนาดเล็ก ผู้ที่แก้ไขปัญหามักเป็นคนเดียวที่เข้าใจ ใช้แม่แบบสั้นและทบทวนการดำเนินการที่เปิดอยู่เก่าที่สุดทุกเดือน

องค์กรขนาดใหญ่ ทำแม่แบบ ตัวกระตุ้น และรายการประเภทสาเหตุให้เป็นมาตรฐาน และให้ทีมปรับความลึกเอง จัดให้มีที่ค้นหาการทบทวนได้ เวทีข้ามทีม และผู้ให้คะแนนภายนอก ระวังตารางจัดอันดับทีมตามจำนวนเหตุขัดข้องหรือการทบทวน เพราะเป็นการลงโทษความโปร่งใส

หน่วยงานภาครัฐและภาคสาธารณะ การทบทวนอาจเผชิญหน้าที่ตามกฎหมาย การตรวจสอบ หรือคำขอตามกฎหมายข้อมูลข่าวสาร ซึ่งทำให้ผู้เขียนระมัดระวัง แยกการทบทวนเพื่อการเรียนรู้ออกจากรายงานอย่างเป็นทางการสำหรับการกำกับดูแล และบันทึกการดำเนินการที่ถูกขวางพร้อมสิ่งที่พึ่งพา (ดูหัวข้อ 8.5 “การรายงานตามข้อกำหนดและต่อภาครัฐ”)

กรณีทางธุรกิจ: แรงจูงใจ ROI และ TCO

ต้นทุนของแนวปฏิบัตินี้ส่วนใหญ่คือเวลา ผู้เขียนใช้เวลาหลายชั่วโมงกับแต่ละการทบทวน และหลายคนใช้หนึ่งชั่วโมงในเซสชัน ตัวอย่างคุณภาพรายไตรมาสใช้เวลาไม่กี่ชั่วโมงของผู้อ่านภายนอก การติดแท็กสาเหตุและการติดตามการดำเนินการต้องใช้เครื่องมือเล็กน้อย ซึ่งอาจเป็นสเปรดชีตและฟิลด์ในเครื่องมือตั๋วและแบ็กล็อกที่มีอยู่ มีต้นทุนที่ใหญ่กว่าและมองเห็นน้อยกว่าในพฤติกรรมของผู้นำ เพราะโครงการล้มเหลวหากผู้นำตอบสนองไม่ดีต่อการทบทวนที่ตรงไปตรงมา

ผลตอบแทนมาจากสาเหตุที่หยุดเกิดซ้ำและเหตุขัดข้องที่สั้นลงเพราะทีมเคยเห็นสิ่งที่คล้ายกัน เหตุขัดข้องซ้ำที่น้อยลงปล่อยศักยภาพของวิศวกรรมและปฏิบัติการ ลดการยกระดับ และลดต้นทุนการหยุดชะงักต่อลูกค้า คลังการทบทวนร่วมกันทำให้เส้นโค้งการเรียนรู้ของพนักงานใหม่สั้นลงและลดการพึ่งพาผู้มีประสบการณ์ไม่กี่คน อย่าอ้างเปอร์เซ็นต์จากองค์กรอื่น วัดค่าฐานของตนเองสำหรับการเกิดซ้ำของสาเหตุ อายุการดำเนินการที่เปิดอยู่ และการติดต่อซ้ำก่อนเริ่ม และเปรียบเทียบหลังสองหรือสามไตรมาส

ข้อจำกัดที่ซื่อตรงคือการเรียนรู้ระบุสาเหตุได้ยาก การลดลงของการเกิดซ้ำอาจมาจากการทบทวนที่ดีขึ้น การเปลี่ยนสถาปัตยกรรมที่ไม่เกี่ยวข้อง หรือโชค สำหรับการพิจารณาที่กว้างกว่า ดูหัวข้อ 7.7 “ผลตอบแทนจากการลงทุนและกรณีทางธุรกิจ”

รูปแบบที่ไม่ควรทำและข้อควรระวัง

  • การทบทวนเป็นละคร การทบทวนตอบสนองกฎและไม่มีใครอ่าน แทนที่จะเป็นเช่นนั้น ให้สุ่มและอ่านการทบทวน และตัดสินจากการเปลี่ยนแปลงที่เกิดขึ้น
  • การค้นหาสาเหตุรากที่เป็นบุคคล การทบทวนระบุความผิดพลาดของบุคคลแล้วหยุด แทนที่จะเป็นเช่นนั้น ให้ถามว่าอะไรทำให้ความผิดพลาดเกิดได้ง่าย และระบุปัจจัยร่วมหลายข้อ
  • การดำเนินการเฟ้อ การทบทวนสร้างรายการยาวที่ทีมให้ทุนไม่ได้ แทนที่จะเป็นเช่นนั้น ให้จำกัดแต่ละการทบทวนไว้ที่การดำเนินการจัดลำดับไม่กี่ข้อ และปฏิเสธที่เหลือพร้อมเหตุผล
  • การดำเนินการนอกแบ็กล็อก อยู่ในเอกสารและไม่เคยถูกวางแผน แทนที่จะเป็นเช่นนั้น ให้สร้างรายการงานในตัวติดตามของทีมเจ้าของและเชื่อมโยงกับการทบทวน
  • ปิดโดยไม่ยืนยัน การดำเนินการถูกทำเครื่องหมายว่าเสร็จและสาเหตุกลับมา แทนที่จะเป็นเช่นนั้น ให้ผู้ทบทวนยืนยันว่าการเปลี่ยนแปลงได้ผล และเฝ้าดูประเภทสาเหตุสำหรับการเกิดซ้ำ
  • ใช้จำนวนเปรียบเทียบทีม ทีมที่มีการทบทวนหรือเหตุเฉียดพลาดมากกว่าดูแย่กว่า แทนที่จะเป็นเช่นนั้น ให้อ่านจำนวนสูงเป็นความเปิดกว้าง และเปรียบเทียบแต่ละทีมกับประวัติของตนเอง
  • ลงโทษผู้ส่งสาร ผู้นำซักถามบุคคลหลังการทบทวนที่ตรงไปตรงมา แทนที่จะเป็นเช่นนั้น ให้ตกลงบรรทัดฐานว่าผู้นำตอบสนองอย่างไร และตรวจชีพจรหลังเหตุขัดข้องที่ยาก
  • ถือตัวชี้วัดเป็นหลักฐานของการเรียนรู้ แดชบอร์ดที่สะอาดถูกนำมาเป็นหลักฐานว่าองค์กรกำลังเรียนรู้ แทนที่จะเป็นเช่นนั้น ให้อ่านตัวอย่างการทบทวนต่อไปและถามผู้ที่เขียน

แบบจำลองวุฒิภาวะ

มิติ 1 เริ่มต้น 2 พัฒนา 3 ทำให้เป็นมาตรฐาน 4 บริหารจัดการ 5 ประสานจัดการ
ตัวกระตุ้นและความครอบคลุม การทบทวนขึ้นอยู่กับว่าใครว่างและรู้สึกแย่เพียงใด บางทีมจัดการทบทวนสำหรับเหตุขัดข้องร้ายแรง ตัวกระตุ้นที่เขียนไว้และแม่แบบร่วม นับความครอบคลุมตามระดับความรุนแรง ติดตามแนวโน้มความครอบคลุมและตรวจสอบเทียบกับการลดระดับ เส้นทางแบบเบาและเต็ม ปรับตัวกระตุ้นร่วมกับลูกค้าและซัพพลายเออร์ การทบทวนร่วมสำหรับเหตุขัดข้องร่วม
คุณภาพและความซื่อตรง การทบทวนระบุบุคคลหรือสาเหตุเดียว บางทีมเขียนการทบทวนแบบไม่กล่าวโทษ มาตรฐานรายการตรวจสอบ คาดหวังภาษาแบบไม่กล่าวโทษ ตัวอย่างภายนอกรายไตรมาส ทบทวนชีพจร โค้ชผู้เขียน เขียนการทบทวนร่วมกับซัพพลายเออร์และผู้ใช้ การอ่านข้ามทีมเป็นกิจวัตร
การดำเนินการและการเกิดซ้ำ การดำเนินการอยู่ในเอกสารและแทบไม่เสร็จ บางทีมติดตามการดำเนินการ การปิดแตกต่างกัน การดำเนินการอยู่ในแบ็กล็อกจริงพร้อมเจ้าของ วันที่ และการปฏิเสธอย่างซื่อตรง ทบทวนการปิด อายุ และการเกิดซ้ำของสาเหตุ พร้อมการปรับปรุงที่ได้รับทุน ประสานการดำเนินการข้ามทีมและซัพพลายเออร์ ปรับประเภทสาเหตุเมื่อรูปแบบเปลี่ยน
การแบ่งปันและการเรียนรู้ บทเรียนอยู่กับทีม โพสต์การทบทวนให้ทีม การทบทวนค้นหาได้และแบ่งปันในเวทีประจำ วัดการแพร่ไป ทีมที่พึ่งพารายงานการเปลี่ยนแปลงที่ทำ การเรียนรู้ไหลสู่การออกแบบ การปฐมนิเทศ และสัญญาซัพพลายเออร์

รายการตรวจสอบ

  • ตัวกระตุ้นที่เขียนไว้ระบุว่าเหตุการณ์ใดได้รับการทบทวน รวมเหตุเฉียดพลาดที่มีคุณค่าการเรียนรู้สูง
  • มีแม่แบบสั้น พร้อมเส้นทางแบบเบาสำหรับเหตุการณ์เล็ก
  • การทบทวนไม่กล่าวโทษทั้งด้วยแม่แบบและด้วยพฤติกรรมของผู้นำ
  • ทุกการดำเนินการเป็นรายการงานในแบ็กล็อกของทีมเจ้าของ พร้อมเจ้าของและวันที่
  • การดำเนินการอาจถูกปฏิเสธ และบันทึกและรายงานเหตุผล
  • มีรายการประเภทสาเหตุสั้น ๆ และทุกการทบทวนถูกติดแท็ก
  • ผู้อ่านภายนอกให้คะแนนตัวอย่างสุ่มของการทบทวนทุกไตรมาส
  • ทบทวนการดำเนินการที่เปิดอยู่เก่าที่สุดควบคู่กับความน่าเชื่อถือของบริการ
  • รายงานอายุการดำเนินการที่เปิดอยู่เป็นค่ามัธยฐาน เปอร์เซ็นไทล์สูง และรายการที่เก่าที่สุด
  • มีเส้นทางสำหรับเหตุเฉียดพลาด และทีมรู้ว่าเกิดอะไรขึ้นหลังรายงาน
  • ไม่มีตัวชี้วัดใดในหัวข้อนี้ถูกรายงานหรือใช้ต่อบุคคล
  • ชีพจรความปลอดภัยในการพูดทำเฉพาะกลุ่มที่ใหญ่พอจะปกป้องการไม่ระบุตัวตน

พรอมต์ AI

ทบทวนร่างรายงานทบทวนหลังเหตุการณ์ด้านคุณภาพ

นี่คือร่างรายงานทบทวนหลังเหตุการณ์สำหรับ [คำอธิบายเหตุขัดข้อง] บน [บริการ]
ตรวจสอบเทียบกับมาตรฐานนี้: [วางรายการตรวจสอบการทบทวนของคุณ] สำหรับแต่ละข้อ
บอกว่าร่างตรงตามหรือไม่ อ้างบรรทัดที่สนับสนุนการตัดสินของคุณ และชี้ภาษาที่
กำหนดความผิดให้บุคคลแทนที่จะอธิบายเงื่อนไข อย่าเพิ่มข้อเท็จจริงที่ไม่อยู่ใน
ข้อความ ระบุข้อสมมติของคุณและสิ่งที่คุณตัดสินไม่ได้จากที่ฉันให้

[วางร่าง โดยนำข้อมูลส่วนบุคคลออกแล้ว]

เสนอประเภทสาเหตุจากการทบทวนในอดีต

ด้านล่างคือสรุปของการทบทวนในอดีตจำนวน [จำนวน] ฉบับสำหรับ [บริการหรือกลุ่ม
บริการ] เสนอรายการประเภทสาเหตุสั้น ๆ ระหว่าง [ขั้นต่ำ] ถึง [สูงสุด] ประเภท
ที่อธิบายเงื่อนไขของระบบและไม่ระบุบุคคล สำหรับแต่ละประเภทให้นิยามหนึ่งบรรทัด
การทบทวนที่เข้ากับประเภทนั้น และการทบทวนที่กำกวม อย่าสร้างสาเหตุที่ข้อความ
ไม่สนับสนุน ระบุข้อสมมติของคุณและการทบทวนที่คุณจัดประเภทไม่ได้

[วางสรุป]

วิเคราะห์รายการการดำเนินการที่เปิดอยู่เพื่อหารูปแบบที่ติดขัด

นี่คือข้อมูลส่งออกของการดำเนินการจากการทบทวนสำหรับ [ทีมหรือบริการ]: ทีมเจ้าของ
วันที่สร้าง วันครบกำหนด สถานะ และคำอธิบายหนึ่งบรรทัด รายงานค่ามัธยฐาน
เปอร์เซ็นไทล์ที่ 85 และอายุสูงสุดของการดำเนินการที่เปิดอยู่ จากนั้นจัดกลุ่ม
การดำเนินการที่เก่าที่สุดตามเหตุผลที่น่าจะทำให้ติดขัด (เช่น ขอบเขตไม่ชัดเจน
การพึ่งพาทีมอื่น ไม่มีศักยภาพ หรือคุณค่าต่ำ) รายงานรูปแบบตามทีมและบริการ
ไม่เคยตามบุคคล อย่าเดาเหตุผลที่ข้อมูลไม่สนับสนุน ระบุข้อสมมติของคุณและฟิลด์
เพิ่มเติมที่จะช่วยได้

[วางข้อมูลส่งออก โดยนำข้อมูลส่วนบุคคลออกแล้ว]

ทักษะ AI

  • ทักษะ Agile ITIL Metrics: ใช้เพื่อค้นหาหัวข้อ นิยาม และมาตรการป้องกันที่จับคู่กันสำหรับตัวชี้วัดการทบทวนหรือการเรียนรู้ที่คุณกำลังจะรายงาน
  • ทักษะผู้ดูแล Agile ITIL Metrics: ใช้เพื่อตรวจสอบว่าตัวชี้วัดการเรียนรู้ที่แก้ไขแล้วยังคงมีนาฬิกาจับเวลา ช่องทางการบิดเบือน และมาตรการป้องกัน

ข้อสรุปสำคัญ

  • การทบทวนมีค่าเท่ากับสิ่งที่มันเปลี่ยน ดังนั้นจึงควรวัดความครอบคลุม คุณภาพ การปิดการดำเนินการ และการเกิดซ้ำของสาเหตุ และอ่านตัวอย่างของการทบทวนเอง
  • การไม่กล่าวโทษเป็นเงื่อนไขเบื้องต้นของข้อมูลที่ซื่อตรง และผู้นำปกป้องมันด้วยวิธีที่ตอบสนองต่อการทบทวนที่ตรงไปตรงมา
  • วางการดำเนินการในแบ็กล็อกจริง จำกัดจำนวน อนุญาตให้ปฏิเสธอย่างซื่อตรง และเฝ้าดูอายุของรายการที่เก่าที่สุด
  • ติดแท็กการทบทวนด้วยรายการประเภทสาเหตุสั้น ๆ เพื่อให้สาเหตุที่เกิดซ้ำมองเห็นได้และป้อนให้การจัดการปัญหา
  • อ่านจำนวนเหตุเฉียดพลาดที่เพิ่มขึ้นเป็นสัญญาณของความเปิดกว้างในช่วงต้น และไม่เคยจัดอันดับบุคคลหรือทีมด้วยปริมาณการทบทวน
  • จับคู่ทุกตัวเลขที่นี่กับมาตรการป้องกัน เพราะวงจรการเรียนรู้เองก็เป็นเป้าหมายที่บิดเบือนได้

เอกสารอ้างอิงและแหล่งอ่านเพิ่มเติม

  1. Lunney, L., and Lueder, S., "Postmortem Culture: Learning from Failure," in Site Reliability Engineering, O'Reilly Media, 2016, https://sre.google/sre-book/postmortem-culture/
  2. Beyer, B., Jones, C., Petoff, J., and Murphy, N. R. (eds.), Site Reliability Engineering: How Google Runs Production Systems, O'Reilly Media, 2016, https://sre.google/sre-book/table-of-contents/
  3. Edmondson, A., "Psychological Safety and Learning Behavior in Work Teams," Administrative Science Quarterly, 44(2), 1999.
  4. Dekker, S., The Field Guide to Understanding 'Human Error', Ashgate, 2006.
  5. Reason, J., Human Error, Cambridge University Press, 1990.
  6. Derby, E., and Larsen, D., Agile Retrospectives: Making Good Teams Great, Pragmatic Bookshelf, 2006.
  7. Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
  8. AXELOS (now PeopleCert), ITIL Foundation: ITIL 4 Edition, TSO, 2019.
  9. Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
  10. Wikipedia, Postmortem documentation.
  11. Wikipedia, Root cause analysis.
  12. Wikipedia, Just culture.
  13. Wikipedia, ITIL.
  14. Wikipedia, Site reliability engineering.
  15. Wikipedia, Agile software development.
  16. Wikipedia, Hindsight bias.
  17. Wikipedia, Five whys.
  18. Wikipedia, Psychological safety.

ตัวชี้วัด ITIL แบบคล่องตัว — วัดบริการไอทีแบบคล่องตัวโดยไม่บิดเบือนงาน

ซอร์สและการมีส่วนร่วม: github.com/agile-itil-metrics. สร้างด้วย Lily Design System™.

สร้างโดย Joel Parker Henderson.