ภาพรวมและแรงจูงใจ

หลายทีมใช้คำว่า “การติดตั้งใช้งาน” และ “การปล่อยรุ่น” เสมือนเป็นสิ่งเดียวกัน ทั้งสองไม่เหมือนกัน และความแตกต่างนั้นเป็นแนวคิดที่มีประโยชน์ที่สุดในหัวข้อนี้ การติดตั้งใช้งาน (deployment) คือการนำซอฟต์แวร์เวอร์ชันหนึ่งไปไว้ในสภาพแวดล้อม โดยปกติคือระบบจริง ตามที่อธิบายในบทความเรื่องการติดตั้งซอฟต์แวร์ การปล่อยรุ่น (release) คือช่วงเวลาที่การเปลี่ยนแปลงพร้อมให้ผู้ใช้ที่ตั้งใจไว้เข้าถึงได้ ซึ่งเป็นการตัดสินใจที่การจัดการการปล่อยรุ่นมีขึ้นเพื่อกำกับ เมื่อทั้งสองเกิดพร้อมกัน การติดตั้งใช้งานก็เป็นการปล่อยรุ่น และตัวเลขเดียวอธิบายทั้งสอง เมื่อแยกกัน ทีมติดตั้งใช้งานได้บ่อยและเงียบ ๆ และปล่อยรุ่นอย่างจงใจ

การแยกมีความสำคัญเพราะทั้งสองเหตุการณ์มีความเสี่ยงต่างกัน การติดตั้งใช้งานมีความเสี่ยงทางเทคนิค คือบิลด์ใหม่อาจเริ่มทำงานไม่ได้ อาจทำให้สิ่งที่พึ่งพาเสียหาย หรืออาจต้องย้อนกลับ การปล่อยรุ่นมีความเสี่ยงทางธุรกิจและต่อผู้ใช้ คือการเปลี่ยนแปลงอาจทำให้ลูกค้าสับสน หรืออาจต้องไปถึงในวันที่ตกลงกัน ทีมที่ผูกสองเหตุการณ์เข้าด้วยกันยอมรับทั้งสองความเสี่ยงพร้อมกัน ซึ่งผลักไปสู่ชุดการเปลี่ยนแปลงขนาดใหญ่ที่ปล่อยไม่บ่อย ทีมที่แยกกันรับความเสี่ยงทางเทคนิคเป็นก้าวเล็ก ๆ และความเสี่ยงต่อผู้ใช้เป็นก้าวที่ควบคุมได้

เครื่องมือหลักสำหรับการแยกคือฟีเจอร์ทอกเกิล (feature toggle) หรือที่เรียกว่าฟีเจอร์แฟลก (feature flag) คือสวิตช์ในการกำหนดค่าที่เปิดหรือปิดพฤติกรรมโดยไม่ต้องติดตั้งใช้งานใหม่ เทคนิคที่เกี่ยวข้องได้แก่การปล่อยรุ่นแบบคานารี (canary release) ซึ่งเปิดการเปลี่ยนแปลงให้การจราจรส่วนเล็กก่อน และการติดตั้งใช้งานแบบบลูกรีน (blue-green deployment) ซึ่งเก็บสภาพแวดล้อมระบบจริงสองชุดและสลับการจราจรระหว่างกัน ทั้งหมดนี้ช่วยให้ตอบสองคำถามที่แยกกัน คือเวอร์ชันใหม่ทำงานอย่างปลอดภัยหรือไม่ และใครควรเห็นพฤติกรรมใหม่และเมื่อใด

คำต่อไปนี้ปรากฏซ้ำในหัวข้อนี้

  • การปล่อยรุ่น (release) คือเวอร์ชันหรือชุดการเปลี่ยนแปลงที่ทำให้ผู้ใช้เข้าถึงได้
  • การติดตั้งใช้งาน (deployment) คือการย้ายเวอร์ชันไปยังสภาพแวดล้อม ITIL 4 ตั้งชื่อแนวปฏิบัติสำหรับเรื่องนี้ว่าการจัดการการติดตั้งใช้งาน
  • การเปิดตัวแบบมืด (dark launch) คือการติดตั้งใช้งานที่พฤติกรรมใหม่ถูกปิดไว้สำหรับผู้ใช้
  • การทยอยปล่อยรุ่น (progressive rollout) คือการปล่อยรุ่นที่ขยายการเข้าถึงเป็นขั้น เช่น 1 เปอร์เซ็นต์ 10 เปอร์เซ็นต์ แล้วทุกคน
  • ชุดงาน (batch) คือชุดการเปลี่ยนแปลงที่ส่งมอบพร้อมกันในการติดตั้งใช้งานหรือการปล่อยรุ่นครั้งเดียว ขนาดชุดงานคือจำนวนการเปลี่ยนแปลง หรือปริมาณการเปลี่ยนแปลงในชุดนั้น
  • ลีดไทม์การปล่อยรุ่น (release lead time) คือเวลาที่ผ่านไปจากจุดเริ่มต้นที่ระบุจนการเปลี่ยนแปลงพร้อมให้ผู้ใช้เข้าถึง ทีมของคุณเขียนจุดเริ่มต้นไว้ เพราะมีหลายจุดที่ใช้กันทั่วไป
  • เปอร์เซ็นไทล์ (percentile) คือค่าที่ต่ำกว่าสัดส่วนที่ระบุของข้อสังเกตตกอยู่ เปอร์เซ็นไทล์ที่ 85 ของลีดไทม์การปล่อยรุ่นคือตัวเลขที่การปล่อยรุ่น 85 เปอร์เซ็นต์ทำได้ดีกว่า

มุมมองแบบคล่องตัวและ ITIL มาพบกันที่นี่ ทีมแบบคล่องตัวที่ปฏิบัติการส่งมอบอย่างต่อเนื่องต้องการให้ทุกการเปลี่ยนแปลงพร้อมปล่อยได้ทุกเมื่อ และถือว่าการปล่อยรุ่นเป็นการตัดสินใจทางธุรกิจที่แยกจากการกระทำทางเทคนิค ผู้ปฏิบัติ ITIL มองการจัดการการปล่อยรุ่น การจัดการการติดตั้งใช้งาน และการสนับสนุนการเปลี่ยนแปลงเป็นแนวปฏิบัติที่วางแผน กำหนดตาราง และควบคุมการเคลื่อนของการเปลี่ยนแปลงสู่การใช้งานจริง สองมุมมองขัดแย้งกันเมื่อการจัดการการปล่อยรุ่นถูกเข้าใจเป็นปฏิทินของเหตุการณ์ใหญ่ ทั้งสองเข้ากันได้เมื่อแนวปฏิบัติถูกเข้าใจเป็นความสามารถในการปล่อยรุ่นอย่างปลอดภัยตามต้องการ โดยมีการควบคุมสร้างไว้ในไปป์ไลน์และแฟลก

หัวข้อนี้ไม่ทวนนิยามของตัวชี้วัดประสิทธิภาพการส่งมอบทั้งห้าจากโครงการวิจัย DORA (ดูหัวข้อ 2.8 “ตัวชี้วัด DORA”) หรือตัวชี้วัดความล้มเหลวและการทำซ้ำหลังการปล่อยรุ่น (ดูหัวข้อ 4.4 “ความล้มเหลวของการเปลี่ยนแปลงและการทำซ้ำ”) หรือปริมาณและการอนุมัติการเปลี่ยนแปลง (ดูหัวข้อ 4.3 “ตัวชี้วัดการสนับสนุนการเปลี่ยนแปลง”) หัวข้อนี้เพิ่มสิ่งที่หัวข้อเหล่านั้นเปิดไว้ คือวิธีนับการปล่อยรุ่นแยกจากการติดตั้งใช้งาน การเปลี่ยนแปลงที่เสร็จแล้วรอนานเท่าใดก่อนผู้ใช้ได้รับ ชุดงานใหญ่เพียงใด และแฟลกที่ทำให้การแยกเป็นไปได้ได้รับการดูแลให้เป็นระเบียบหรือไม่

สุดท้าย จำนวนการปล่อยรุ่นและการติดตั้งใช้งานเป็นตัวเลขที่น่าลองสำหรับแดชบอร์ดของผู้นำ และกฎของกูดฮาร์ตใช้ได้ทันที (ดูหัวข้อ 1.2 “กฎของกูดฮาร์ตและจิตวิทยาของตัวชี้วัด”) จำนวนการติดตั้งใช้งานเพิ่มขึ้นเมื่อแยกการเปลี่ยนแปลงเป็นชิ้นเล็กน้อย จำนวนการปล่อยรุ่นเพิ่มขึ้นเมื่อเปลี่ยนป้าย ดังนั้นแต่ละตัวชี้วัดด้านล่างจึงมาพร้อมวิธีที่มันบิดเบี้ยวและมาตรการป้องกันที่จับความบิดเบี้ยวนั้น

หลักการสำคัญ

  • การติดตั้งใช้งานและการปล่อยรุ่นเป็นสองเหตุการณ์ วัดแยกกันทุกที่ที่สถาปัตยกรรมอนุญาต และบอกให้ชัดว่าตรงไหนยังเป็นเหตุการณ์เดียว
  • นับตามกฎที่เขียนไว้ การติดตั้งใช้งานนับเมื่อสภาพแวดล้อมที่ระบุชื่อได้รับเวอร์ชันที่ระบุชื่อพร้อมผลสำเร็จ การปล่อยรุ่นนับเมื่อผู้ใช้ที่ตั้งใจไว้เข้าถึงการเปลี่ยนแปลงได้ เขียนกฎหนึ่งครั้งและใช้เหมือนกันทุกครั้ง
  • อธิบายบริการ ไม่ใช่บุคคล จำนวนเป็นของบริการและทีม ไม่เคยเป็นของบุคคล
  • วัดการรอ ไม่ใช่แค่งาน ลีดไทม์การปล่อยรุ่นมักมีการรอหลายวันเพื่อช่วงเวลา การอนุมัติ หรือการตัดสินใจ การรอคือที่ที่การปรับปรุงมักอยู่
  • ชุดงานเล็กคือคานงัด ความถี่และขนาดเป็นสองมุมมองของสิ่งเดียวกัน จับคู่ทุกจำนวนกับตัวชี้วัดว่าแต่ละการปล่อยรุ่นนำการเปลี่ยนแปลงมาเท่าใด
  • แฟลกคือสินค้าคงคลังที่มีต้นทุนการถือครอง แฟลกที่อยู่นานเกินไปกลายเป็นโค้ดตายและแหล่งความล้มเหลว จึงควรติดตามอายุของแฟลกอย่างระมัดระวังเท่ากับความครอบคลุมของแฟลก

นิยามตัวชี้วัด

ตัวชี้วัด นิยาม สูตร หน่วย แหล่งข้อมูล แนวปฏิบัติ ITIL ส่วนที่เทียบเคียงได้แบบคล่องตัว ความถี่
ความถี่ในการติดตั้งใช้งาน บริการได้รับการติดตั้งใช้งานที่สำเร็จในระบบจริงบ่อยเพียงใด จำนวนการติดตั้งใช้งานระบบจริงที่สำเร็จของบริการในช่วงเวลา / จำนวนวันในช่วงเวลา การติดตั้งใช้งานในสภาพแวดล้อมทดสอบหรือสเตจจิง การติดตั้งใช้งานที่ล้มเหลวหรือย้อนกลับ และการติดตั้งใช้งานซ้ำของบิลด์ที่ไม่เปลี่ยนไม่นับรวม การติดตั้งใช้งานที่เป็นการกำหนดค่าอย่างเดียวนับในชุดข้อมูลแยกต่างหาก การติดตั้งใช้งานต่อวันหรือต่อสัปดาห์ บันทึกเหตุการณ์ของไปป์ไลน์การติดตั้งใช้งาน การจัดการการติดตั้งใช้งาน การส่งมอบอย่างต่อเนื่อง การส่งมอบส่วนเพิ่มที่ใช้งานได้ รายสัปดาห์
ความถี่ในการปล่อยรุ่น ผู้ใช้ได้รับการเปลี่ยนแปลงที่เข้าถึงได้บ่อยเพียงใด จำนวนเหตุการณ์การปล่อยรุ่นในช่วงเวลา / จำนวนวันในช่วงเวลา เหตุการณ์การปล่อยรุ่นคือช่วงเวลาที่การเปลี่ยนแปลงหรือกลุ่มการเปลี่ยนแปลงพร้อมให้ผู้ใช้ที่ตั้งใจไว้เข้าถึง (แฟลกที่เปิดสำหรับผู้ใช้ทั้งหมด ขั้นสุดท้ายของการทยอยปล่อยรุ่น หรือการติดตั้งใช้งานการเปลี่ยนแปลงที่ไม่มีแฟลก) การเปิดตัวแบบมืด การทยอยปล่อยที่หยุดในขั้นบางส่วน และการเปลี่ยนแฟลกที่กระทบเฉพาะผู้ใช้ภายในไม่นับรวม การปล่อยรุ่นต่อสัปดาห์หรือต่อเดือน บันทึกการตรวจสอบของบริการแฟลกเชื่อมกับบันทึกไปป์ไลน์และปฏิทินการปล่อยรุ่น การจัดการการปล่อยรุ่น การปล่อยรุ่นเมื่อสิ้นสุดแต่ละส่วนเพิ่ม ส่วนเพิ่มที่พร้อมส่งมอบได้ถูกทำให้ใช้งานได้ รายสัปดาห์ ทบทวนรายเดือน
ลีดไทม์การปล่อยรุ่น การเปลี่ยนแปลงที่เสร็จแล้วรอนานเท่าใดก่อนผู้ใช้เข้าถึงได้ นาฬิกาเริ่มเมื่อการเปลี่ยนแปลงถูกรวมเข้าสายหลักและผ่านการตรวจสอบอัตโนมัติ (หรือหากทีมเขียนไว้เช่นนั้น เมื่อคอมมิตแรก) และหยุดเมื่อการเปลี่ยนแปลงถูกปล่อยรุ่นตามนิยามข้างต้น รายงานค่ามัธยฐานและเปอร์เซ็นไทล์ที่ 85 ของการเปลี่ยนแปลงที่ปล่อยรุ่นในช่วงเวลา การเปลี่ยนแปลงที่ยังไม่ปล่อยรุ่นไม่นับรวมและรายงานเป็นอายุของงานที่รออยู่ ชั่วโมงหรือวัน การควบคุมเวอร์ชันเชื่อมกับไปป์ไลน์และบันทึกการตรวจสอบแฟลก การจัดการการปล่อยรุ่น การจัดการการติดตั้งใช้งาน ลีดไทม์จากเสร็จถึงส่งมอบ ลีดไทม์ถึงลูกค้า รายสัปดาห์ ทบทวนรายเดือน
ช่องว่างระหว่างการติดตั้งใช้งานกับการปล่อยรุ่น โค้ดที่ติดตั้งแล้วอยู่ในสภาพมืดนานเท่าใดก่อนผู้ใช้เข้าถึงได้ นาฬิกาเริ่มเมื่อการเปลี่ยนแปลงถูกติดตั้งใช้งานในระบบจริงและหยุดเมื่อปล่อยรุ่น รายงานค่ามัธยฐานและเปอร์เซ็นไทล์ที่ 85 การเปลี่ยนแปลงที่ปล่อยรุ่นในขณะติดตั้งใช้งานมีช่องว่างเป็นศูนย์และรวมอยู่ด้วย การเปลี่ยนแปลงที่ติดตั้งใช้งานแล้วถอดออกภายหลังโดยไม่ปล่อยรุ่นไม่นับรวมและนับแยกต่างหาก ชั่วโมงหรือวัน บันทึกไปป์ไลน์เชื่อมกับบันทึกการตรวจสอบแฟลก การจัดการการปล่อยรุ่น การจัดการการติดตั้งใช้งาน การเปิดตัวแบบมืด การแยกการติดตั้งใช้งานออกจากการปล่อยรุ่น รายเดือน
ขนาดชุดงานของการปล่อยรุ่น การเปลี่ยนแปลงจำนวนเท่าใดที่ส่งมอบพร้อมกันในการปล่อยรุ่นครั้งเดียว ค่ามัธยฐานและเปอร์เซ็นไทล์ที่ 85 ของจำนวนการเปลี่ยนแปลงที่รวมแล้ว (พูลรีเควสต์หรือรายการงาน) ต่อการปล่อยรุ่นในช่วงเวลา เขียนหน่วยของการเปลี่ยนแปลงไว้ แต่ละการเปลี่ยนแปลงนับหนึ่งครั้งในการปล่อยรุ่นที่ทำให้เข้าถึงได้ การเปลี่ยนแปลงต่อการปล่อยรุ่น การควบคุมเวอร์ชันและตัวติดตามประเด็นเชื่อมกับเหตุการณ์การปล่อยรุ่น การจัดการการปล่อยรุ่น การสนับสนุนการเปลี่ยนแปลง ชุดงานเล็ก ชิ้นงานแนวตั้ง ต่อการปล่อยรุ่น ทบทวนรายเดือน
ความครอบคลุมของฟีเจอร์แฟลก สัดส่วนของการเปลี่ยนแปลงที่ผู้ใช้เห็นได้ซึ่งปล่อยรุ่นหลังแฟลก การเปลี่ยนแปลงที่ผู้ใช้เห็นได้ซึ่งปล่อยรุ่นในช่วงเวลาที่มีแฟลก ณ เวลาปล่อยรุ่น / การเปลี่ยนแปลงที่ผู้ใช้เห็นได้ทั้งหมดที่ปล่อยรุ่นในช่วงเวลา การเปลี่ยนแปลงโครงสร้างพื้นฐานและการแก้ข้อบกพร่องที่ใส่แฟลกไม่ได้ไม่นับรวม และเขียนกฎของ “ผู้ใช้เห็นได้” ไว้ เปอร์เซ็นต์ บริการแฟลกเชื่อมกับตัวติดตามประเด็นและบันทึกการปล่อยรุ่น การจัดการการปล่อยรุ่น การสนับสนุนการเปลี่ยนแปลง การส่งมอบแบบก้าวหน้า การพัฒนาที่ขับเคลื่อนด้วยการทดลอง รายเดือน
จำนวนแฟลกที่ล้าสมัย มีแฟลกกี่รายการที่อยู่เกินจุดประสงค์ของมัน จำนวนแฟลกการปล่อยรุ่นที่ยังอยู่ในโค้ดหรือการกำหนดค่าเกินจำนวนวันที่ระบุหลังจากการเปลี่ยนแปลงที่แฟลกปกป้องถึงผู้ใช้ทั้งหมด แฟลกปฏิบัติการถาวร (สวิตช์ปิดฉุกเฉิน แฟลกสิทธิ์การใช้งาน) ถูกติดแท็กและไม่นับรวม เขียนขีดจำกัดอายุไว้ต่อประเภทแฟลก แฟลก และค่ามัธยฐานอายุของแฟลกการปล่อยรุ่นเป็นวัน คลังแฟลกของบริการเชื่อมกับการค้นหาโค้ด การจัดการการปล่อยรุ่น การจัดการความรู้ การเคลียร์หนี้ทางเทคนิค เกณฑ์ความเสร็จของการถอดแฟลก รายเดือน

ข้อเสนอแนะ

เขียนว่าอะไรนับเป็นการติดตั้งใช้งานและการปล่อยรุ่น

นิยามทั้งสองเหตุการณ์ก่อนนับอย่างใดอย่างหนึ่ง การติดตั้งใช้งานนับเมื่อเวอร์ชันที่ระบุชื่อไปถึงสภาพแวดล้อมที่ระบุชื่อและไปป์ไลน์รายงานความสำเร็จ การปล่อยรุ่นนับเมื่อผู้ใช้ที่ตั้งใจไว้เข้าถึงการเปลี่ยนแปลงได้ ซึ่งสำหรับการเปลี่ยนแปลงที่มีแฟลกคือช่วงเวลาที่แฟลกถูกเปิดให้พวกเขา ไม่ใช่ช่วงเวลาที่โค้ดมาถึง ระบุข้อยกเว้นในประโยคเดียวกัน ได้แก่ สภาพแวดล้อมทดสอบ การย้อนกลับ การติดตั้งใช้งานซ้ำของบิลด์ที่ไม่เปลี่ยน และการเข้าถึงเฉพาะภายใน

รายงานสองชุดข้อมูลเคียงกัน

แสดงความถี่ในการติดตั้งใช้งานและความถี่ในการปล่อยรุ่นบนแผนภูมิเดียว ที่เส้นทับกัน บริการยังผูกสองเหตุการณ์เข้าด้วยกัน ที่การติดตั้งใช้งานนำการปล่อยรุ่นไปไกล ทีมเริ่มแยกทั้งสองออกจากกัน และระยะห่างระหว่างเส้นเป็นสัญญาณของความสามารถ ตัวเลขรวมเดียวซ่อนเรื่องนี้ และให้ทีมอ้างความถี่สูงที่ผู้ใช้ไม่เคยเห็น

วัดลีดไทม์การปล่อยรุ่นจากจุดเริ่มที่ระบุจนถึงผู้ใช้

เลือกจุดเริ่มของนาฬิกาหนึ่งครั้งและรักษาไว้ การเริ่มที่คอมมิตแรกแสดงการเดินทางเต็มรูปแบบ และการเริ่มที่การรวมเข้าสายหลักแยกไปป์ไลน์การปล่อยรุ่นและการอนุมัติออกมา ทั้งสองรับได้หากระบุบนแผนภูมิและไม่เปลี่ยนอย่างเงียบ ๆ จบนาฬิกาที่การปล่อยรุ่น ไม่ใช่การติดตั้งใช้งาน มิฉะนั้นตัวชี้วัดจะหยุดวัดสิ่งที่ผู้ใช้รอ

ติดตามขนาดชุดงานควบคู่กับความถี่

จับคู่ทุกความถี่กับขนาด ทีมเพิ่มจำนวนการติดตั้งใช้งานได้ด้วยการตัดการเปลี่ยนแปลงหนึ่งเป็นชิ้นที่ไม่มีประโยชน์ในตัวเอง และจำนวนเพิ่มขึ้นในขณะที่การไหลจริงเหมือนเดิม ค่ามัธยฐานและเปอร์เซ็นไทล์ที่ 85 ของขนาดชุดงานแสดงว่าชิ้นนั้นเป็นของจริงหรือไม่ ชุดงานเล็กทบทวน ทดสอบ และย้อนกลับได้ง่ายกว่า และนั่นคือประโยชน์ที่ความถี่เป็นตัวแทน

ถือขั้นของการทยอยปล่อยรุ่นเป็นเหตุการณ์

บันทึกแต่ละขั้นของการทยอยปล่อยรุ่นพร้อมตราเวลา การทยอยปล่อยจาก 1 เปอร์เซ็นต์เป็น 10 เปอร์เซ็นต์แล้วทุกคนให้ตราเวลาสามค่า และแต่ละค่าเป็นโอกาสที่จะหยุด จับขั้น สัดส่วนการเข้าถึง และผลของการตรวจสุขภาพที่อนุญาตให้ไปขั้นถัดไป ช่วยแยกการทยอยปล่อยที่หยุดเพราะสัญญาณจริงออกจากที่ติดขัด

เก็บทะเบียนแฟลกที่มีเจ้าของและวันหมดอายุ

ให้ทุกแฟลกการปล่อยรุ่นมีเจ้าของ จุดประสงค์ และวันที่วางแผนถอดออกตั้งแต่สร้าง บริการแฟลกหรือทะเบียนธรรมดาเก็บสิ่งเหล่านี้ได้ ทบทวนทะเบียนทุกเดือนและคำนวณจำนวนแฟลกที่ล้าสมัย แฟลกที่เปิดทิ้งไว้หลังปล่อยครบแล้วคือโค้ดตายที่ยังแตกแขนงอยู่ ถือการถอดออกเป็นส่วนหนึ่งของความเสร็จของการเปลี่ยนแปลง

ติดแท็กแฟลกตามประเภท

แยกแฟลกการปล่อยรุ่นชั่วคราวออกจากแฟลกปฏิบัติการถาวร สวิตช์ปิดฉุกเฉินและแฟลกสิทธิ์การใช้งานถาวรโดยการออกแบบ ขณะที่แฟลกการปล่อยรุ่นควรถูกถอดหลังปล่อยครบ การผสมประเภทเข้าด้วยกันทำให้จำนวนที่ล้าสมัยมีสัญญาณรบกวนและชวนให้ทีมลบสวิตช์ที่ใครบางคนต้องใช้ระหว่างเหตุขัดข้อง กำหนดให้ระบุประเภทเมื่อสร้างแฟลก

เชื่อมโยงการปล่อยรุ่นกับบันทึกเหตุขัดข้องและการเปลี่ยนแปลง

บันทึกรหัสการปล่อยรุ่นบนเหตุขัดข้องและการเปลี่ยนแปลง เหตุการณ์การปล่อยรุ่นควรตามรอยได้จากเครื่องมือเหตุขัดข้อง เพื่อให้เชื่อมโยงสาเหตุของเหตุขัดข้องกับการเปลี่ยนแปลงที่ปล่อยรุ่น ไม่ว่าจะติดตั้งใช้งานเมื่อสัปดาห์ที่แล้วหรือเปิดสวิตช์เมื่อเช้านี้ หากไม่มีการเชื่อมโยง ตัวชี้วัดความไม่เสถียรจะกำหนดความล้มเหลวให้วันที่ติดตั้งใช้งานและพลาดความล้มเหลวที่เกิดจากการเปลี่ยนแฟลก การเปลี่ยนแฟลกในระบบจริงเป็นการเปลี่ยนแปลงตามความหมายของ ITIL และควรมองเห็นได้สำหรับการสนับสนุนการเปลี่ยนแปลง แม้จะอนุมัติล่วงหน้าเป็นการเปลี่ยนแปลงมาตรฐาน (ดูหัวข้อ 4.3 “ตัวชี้วัดการสนับสนุนการเปลี่ยนแปลง”)

ช่องทางการบิดเบือนและมาตรการป้องกัน

ตัวชี้วัด วิธีที่ถูกบิดเบือน ตัวชี้วัดหรือแนวปฏิบัติป้องกันที่จับคู่กัน
ความถี่ในการติดตั้งใช้งาน แยกการเปลี่ยนแปลงหนึ่งเป็นการติดตั้งใช้งานเล็กน้อย ติดตั้งใช้งานบิลด์ที่ไม่เปลี่ยนซ้ำ นับการติดตั้งใช้งานไปสเตจจิง นับการติดตั้งใช้งานที่เป็นการกำหนดค่าอย่างเดียวรวมกับชุดข้อมูลหลัก ขนาดชุดงานของการปล่อยรุ่นและสัดส่วนของการติดตั้งใช้งานที่มีการเปลี่ยนแปลงที่ผู้ใช้เห็นได้ ชุดข้อมูลการกำหนดค่าที่แยกต่างหาก อัตราการเปลี่ยนแปลงที่ล้มเหลวควบคู่กัน
ความถี่ในการปล่อยรุ่น ติดป้ายการติดตั้งใช้งานใหม่เป็นการปล่อยรุ่น นับแฟลกที่เปิดให้พนักงานภายในเป็นการปล่อยรุ่น ปล่อยรุ่นการเปลี่ยนแปลงที่ว่างเปล่าหรือเพียงรูปลักษณ์เพื่อให้ถึงเป้าหมาย นับแต่ละขั้นของการทยอยปล่อยเป็นการปล่อยรุ่นแยกกัน นิยามการปล่อยรุ่นที่เขียนไว้ ตัวอย่างการปล่อยรุ่นรายไตรมาสที่ตรวจเทียบกับการเปลี่ยนแปลงที่ผู้ใช้เห็นได้ ขนาดชุดงานและจำนวนการเปลี่ยนแปลงที่ลูกค้าเห็น
ลีดไทม์การปล่อยรุ่น เริ่มนาฬิกาช้า เช่น ที่การอนุมัติแทนการรวมเข้าสายหลัก ไม่รวมการเปลี่ยนแปลงที่รอนานโดยเรียกว่า “ถูกบล็อก” ปล่อยรุ่นการเปลี่ยนแปลงเล็กน้อยก่อนเพื่อดึงค่ามัธยฐานลง จบนาฬิกาที่การติดตั้งใช้งาน เปอร์เซ็นไทล์ที่ 85 และอายุของการเปลี่ยนแปลงที่รออยู่เก่าที่สุด จุดเริ่มที่เขียนไว้ตายตัว ทบทวนการเปลี่ยนแปลงที่ช้าที่สุด 10 เปอร์เซ็นต์ทุกไตรมาส
ช่องว่างระหว่างการติดตั้งใช้งานกับการปล่อยรุ่น เปิดแฟลกให้ผู้ใช้สัญลักษณ์เพื่อบันทึกการปล่อยรุ่นให้เร็ว ไม่รวมโค้ดที่มืดนานในตัวอย่างโดยเรียกว่า “ไม่ใช่การปล่อยรุ่น” ลบโค้ดมืดเพื่อหลีกเลี่ยงช่องว่างยาว สัดส่วนการเข้าถึง ณ การปล่อยรุ่น (เกณฑ์ว่าอะไรนับเป็นปล่อยรุ่นแล้ว) จำนวนการเปลี่ยนแปลงที่ติดตั้งใช้งานแล้วถอดออกโดยไม่ปล่อยรุ่น จำนวนแฟลกที่ล้าสมัย
ขนาดชุดงานของการปล่อยรุ่น แยกงานเป็นพูลรีเควสต์เทียม รวมการเปลี่ยนแปลงที่ไม่เกี่ยวข้องเป็นหนึ่งเพื่อลดจำนวนการปล่อยรุ่น นับเฉพาะการเปลี่ยนแปลงใหญ่ในชุดรวม ค่ามัธยฐานขนาดการเปลี่ยนแปลงเป็นบรรทัดหรือไฟล์เป็นตัวชี้วัดบริบท ทบทวนตัวอย่างการปล่อยรุ่นเพื่อหาการรวมที่ไม่เกี่ยวข้อง ความถี่ควบคู่กับขนาด
ความครอบคลุมของฟีเจอร์แฟลก เพิ่มแฟลกให้การเปลี่ยนแปลงเล็กน้อยเพื่อเพิ่มอัตรา ใส่แฟลกเฉพาะการเปลี่ยนแปลงที่ปลอดภัยและส่งการเปลี่ยนแปลงเสี่ยงโดยไม่มีแฟลก สร้างแฟลกที่ในทางปฏิบัติปิดไม่ได้ ผลทดสอบการปิดแฟลกสำหรับตัวอย่างแฟลก จำนวนแฟลกที่ล้าสมัย สาเหตุเหตุขัดข้องที่ไม่มีแฟลก
จำนวนแฟลกที่ล้าสมัย ติดแท็กแฟลกการปล่อยรุ่นใหม่เป็นถาวรเพื่อออกจากจำนวนที่ล้าสมัย ลบบันทึกแฟลกโดยปล่อยไว้ในโค้ด ขยายวันหมดอายุโดยไม่ทบทวน ค้นหาโค้ดเทียบกับทะเบียนเป็นระยะ ทบทวนทุกการเปลี่ยนประเภทแฟลก อายุของแฟลกการปล่อยรุ่นที่เก่าที่สุด

การอ่านค่าที่ดีแสดงการติดตั้งใช้งานนำหน้าการปล่อยรุ่นสำหรับบริการที่ใช้แฟลก โดยมีช่องว่างพอประมาณ ขนาดชุดงานเล็กและคงที่ และเปอร์เซ็นไทล์ที่ 85 ของลีดไทม์ไม่สูงกว่าค่ามัธยฐานมากนัก ความครอบคลุมของแฟลกสูงสำหรับการเปลี่ยนแปลงเสี่ยง และจำนวนแฟลกที่ล้าสมัยต่ำหรือลดลง การอ่านค่าที่ดูดีเกินไป เช่น ความถี่สูงควบคู่กับขนาดชุดงานที่โตขึ้น หรือจำนวนแฟลกล้าสมัยเป็นศูนย์ขณะที่จำนวนแฟลกถาวรบวม ควรได้รับการตรวจสอบตัวอย่างก่อนเฉลิมฉลองใด ๆ

ข้อแลกเปลี่ยน: ข้อดีและข้อเสีย

แนวทาง จุดแข็ง จุดอ่อน
ติดตั้งใช้งานอย่างต่อเนื่องและปล่อยรุ่นด้วยแฟลก ความเสี่ยงทางเทคนิคต่อการติดตั้งใช้งานเล็ก เวลาปล่อยรุ่นเป็นทางเลือกทางธุรกิจ ปิดได้เร็ว ต้องมีวินัยและเครื่องมือเรื่องแฟลก เพิ่มเส้นทางโค้ดที่ต้องทดสอบและถอดออก
ผูกการติดตั้งใช้งานและการปล่อยรุ่นเข้าด้วยกัน อธิบายง่าย เหตุการณ์เดียวให้นับ ไม่มีหนี้แฟลก ทุกการปล่อยรุ่นแบกทั้งความเสี่ยงทางเทคนิคและต่อผู้ใช้ ซึ่งส่งเสริมชุดงานใหญ่ที่ปล่อยไม่บ่อย
ขบวนปล่อยรุ่นตามกำหนด คาดการณ์ได้สำหรับฝ่ายสนับสนุนและผู้กำกับดูแล การเปลี่ยนแปลงรอขบวนถัดไป จำนวนสะท้อนปฏิทิน ไม่ใช่ความสามารถ
การทยอยปล่อยรุ่นตามเปอร์เซ็นต์ จำกัดผลของการปล่อยรุ่นที่ไม่ดี สร้างหลักฐานในแต่ละขั้น ต้องมีเทเลเมทรีและการตรวจสุขภาพที่ดี อาจมีหลายเวอร์ชันทำงานเคียงกันอยู่ช่วงหนึ่ง
นับทั้งการติดตั้งใช้งานและการปล่อยรุ่น แสดงการแยกและการรอ ต้องเชื่อมบันทึกการตรวจสอบแฟลกหรือบันทึกการปล่อยรุ่นกับไปป์ไลน์

บริการที่ยังแยกการติดตั้งใช้งานออกจากการปล่อยรุ่นไม่ได้ เช่น แอปพลิเคชันมือถือที่แจกผ่านการตรวจของแอปสโตร์ ควรวัดสิ่งที่ทำได้ คือความถี่ในการปล่อยรุ่น ลีดไทม์การปล่อยรุ่น และขนาดชุดงาน โดยรายงานเวลาตรวจของสโตร์เป็นการรอแยกต่างหาก

คำถามสำหรับอภิปรายกับทีม

1. เราใช้คำว่า “การติดตั้งใช้งาน” และ “การปล่อยรุ่น” สำหรับเหตุการณ์เดียวกันหรือไม่ และตรงกับสิ่งที่เกิดขึ้นหรือไม่ ขอให้สามคนอธิบายการเปลี่ยนแปลงล่าสุดที่ขึ้นระบบจริง และจดว่าโค้ดมาถึงเมื่อใดและผู้ใช้ใช้ได้ครั้งแรกเมื่อใด ผู้อำนวยความสะดวกควรช่วยกลุ่มตกลงประโยคหนึ่งประโยคสำหรับแต่ละคำ และตัดสินใจว่าตัวเลขบนแดชบอร์ดที่มีอยู่แต่ละตัวนั้นวัดเหตุการณ์ใดในสองเหตุการณ์

2. การเปลี่ยนแปลงที่เสร็จแล้วรอการปล่อยรุ่นนานที่สุดเท่าใด และเพราะเหตุใด ดึงการเปลี่ยนแปลงที่รวมแล้วเก่าที่สุดที่ผู้ใช้ยังเข้าถึงไม่ได้ ไล่เส้นทางตั้งแต่การรวมจนถึงปัจจุบัน และจดทุกการรอตลอดทาง

3. หากจำนวนการติดตั้งใช้งานของเราเพิ่มเป็นสองเท่า เราจะตรวจอะไรก่อนเรียกว่าข่าวดี เชิญกลุ่มระบุวิธีที่จำนวนเพิ่มได้โดยไม่มีคุณค่าไปถึงผู้ใช้มากขึ้น ดูขนาดชุดงาน สัดส่วนของการติดตั้งใช้งานที่มีการเปลี่ยนแปลงที่ผู้ใช้เห็นได้ และตัวเลขความล้มเหลวและการทำซ้ำ ผู้อำนวยความสะดวกควรจดว่าการตรวจเหล่านี้อย่างใดมีบนแดชบอร์ดอยู่แล้วและอย่างใดต้องเพิ่มก่อนที่ใครจะตั้งเป้าหมาย

4. แฟลกใดของเราที่เราจะกลัวที่จะลบ และนั่นบอกอะไรเรา ไล่ดูทะเบียนแฟลกและเลือกสามรายการที่เก่าที่สุด ถามว่าใครเป็นเจ้าของแต่ละรายการ ปกป้องอะไร และจะเกิดอะไรขึ้นหากถอดออก ความกลัวที่จะลบมักหมายถึงขาดการทดสอบ ขาดเจ้าของ หรือขาดบันทึกจุดประสงค์ ตกลงวันถอดอย่างน้อยหนึ่งรายการและการตรวจที่จะทำให้การถอดปลอดภัย

5. ใครตัดสินใจว่าเมื่อใดการเปลี่ยนแปลงจะถูกปล่อยรุ่น และพวกเขามีข้อมูลที่ต้องการหรือไม่ ในที่ที่การปล่อยรุ่นเป็นทางเลือกทางธุรกิจ ผู้ตัดสินต้องเห็นสถานะการทยอยปล่อย สัญญาณสุขภาพ และความพร้อมของฝ่ายสนับสนุน ถามว่าข้อเท็จจริงเหล่านั้นอยู่ที่ใดในปัจจุบันและผู้ตัดสินใจย้อนการปล่อยรุ่นได้เร็วเพียงใด

6. การปล่อยรุ่นใดในไตรมาสที่ผ่านมาแย่ที่สุด และตัวชี้วัดใดจะเตือนเราได้ เลือกการปล่อยรุ่นหนึ่งที่ก่อปัญหาและอ่านไทม์ไลน์ร่วมกัน ถามว่าชุดงานใหญ่ ช่องว่างยาว การทยอยปล่อยมีขั้น และแฟลกจะจำกัดความเสียหายได้หรือไม่ เลือกตัวชี้วัดหนึ่งตัวที่จะเพิ่มหรือเกณฑ์หนึ่งข้อที่จะเข้มขึ้นเป็นผลลัพธ์

สี่มุมมอง

ทีมผลิตภัณฑ์และการส่งมอบ

ทีมส่งมอบใช้ตัวชี้วัดเหล่านี้เพื่อดูว่าไปป์ไลน์และแฟลกให้การควบคุมการเข้าถึงแก่ตนจริงหรือไม่ มุมมองที่มีประโยชน์ที่สุดคือช่องว่าง ขนาดชุดงาน และอายุของการเปลี่ยนแปลงที่รออยู่เก่าที่สุด เพราะแต่ละอย่างชี้ไปที่สิ่งที่ทีมเปลี่ยนได้

ทีมบริการและปฏิบัติการ

ทีมปฏิบัติการและสนับสนุนสนใจว่าอะไรเปลี่ยนในระบบจริงและเมื่อใด เหตุการณ์การปล่อยรุ่นและการเปลี่ยนแฟลกต้องมองเห็นได้สำหรับทีม โดยในอุดมคติมีรหัสการปล่อยรุ่นบนทุกเหตุขัดข้อง การทยอยปล่อยเป็นขั้นและการปิดที่รวดเร็วลดจำนวนเหตุขัดข้องที่ต้องกู้คืนเต็มรูปแบบ และตัวชี้วัดช่วยให้ทีมปฏิบัติการขอการควบคุมที่ทำให้งานของตนสงบขึ้น

ภาวะผู้นำและการกำกับดูแล

ผู้นำควรขอแนวโน้มและการกระจายสำหรับแต่ละบริการ และขอคำตอบของคำถามง่าย ๆ ว่าการเปลี่ยนแปลงที่เสร็จแล้วใช้เวลานานเท่าใดจึงถึงผู้ใช้ และปลอดภัยเพียงใด เป้าหมายความถี่ในการติดตั้งใช้งานข้ามทีมเชิญชวนการแยกและการเปลี่ยนป้าย จึงควรเลือกเป้าหมายสำหรับผลลัพธ์ เช่น การแจกแจงลีดไทม์ และการขจัดการรอที่ทราบ องค์กรกำกับดูแลลดภาระการอนุมัติการปล่อยรุ่นได้ด้วยการอนุมัติล่วงหน้าการเปลี่ยนแปลงที่มีแฟลกและเสี่ยงต่ำ ตราบเท่าที่ร่องรอยการตรวจสอบของแฟลกสมบูรณ์ (ดูหัวข้อ 4.3 “ตัวชี้วัดการสนับสนุนการเปลี่ยนแปลง”)

ลูกค้าและผู้ใช้

ลูกค้าเห็นการปล่อยรุ่น ไม่ใช่การติดตั้งใช้งาน ลูกค้าสนใจว่าการแก้ไขมาถึงเร็ว พฤติกรรมใหม่ไม่ทำให้ตกใจ และการเปลี่ยนแปลงที่ไม่ดีย้อนกลับได้อย่างรวดเร็ว ทีมที่แยกสองเหตุการณ์ให้ลูกค้าเข้าถึงฟีเจอร์ได้ก่อน ประกาศวันที่ที่รักษาได้ และย้อนฟีเจอร์เดียวโดยไม่เสียส่วนที่เหลือ จับคู่ตัวชี้วัดเหล่านี้กับตัวชี้วัดฝั่งลูกค้า (ดูหัวข้อ 5.3 “ตัวชี้วัดความพร้อมใช้งาน” และหัวข้อ 6.1 “ตัวชี้วัดความพึงพอใจของลูกค้า”)

ในทางปฏิบัติ: ตัวอย่าง ITIL แบบคล่องตัว

ผู้ค้าปลีกออนไลน์ระดับภูมิภาครายหนึ่งดำเนินบริการค้นหาสินค้าที่ทีมผลิตภัณฑ์หนึ่งทีมเป็นเจ้าของ โดยมีทีมแพลตฟอร์มและเซอร์วิสเดสก์สนับสนุน บริการติดตั้งใช้งานสู่ระบบจริงผ่านไปป์ไลน์และมีบริการแฟลกที่นำเข้ามาเมื่อหกเดือนก่อน ตัวเลขทั้งหมดด้านล่างเป็นตัวเลขเพื่อประกอบภาพ

ตลอดไตรมาสที่ผ่านมา ทีมทำการติดตั้งใช้งานระบบจริง 52 ครั้ง ประมาณสี่ครั้งต่อสัปดาห์ ความถี่ในการปล่อยรุ่น ซึ่งนับเป็นช่วงเวลาที่การเปลี่ยนแปลงพร้อมให้ผู้ใช้ที่ตั้งใจไว้ทั้งหมดเข้าถึง คือ 11 ครั้งในไตรมาสเดียวกัน ประมาณหนึ่งครั้งต่อสัปดาห์ ค่ามัธยฐานของลีดไทม์การปล่อยรุ่น จากการรวมถึงการปล่อยรุ่น คือ 9 วัน โดยเปอร์เซ็นไทล์ที่ 85 คือ 21 วัน ค่ามัธยฐานของช่องว่างระหว่างการติดตั้งใช้งานกับการปล่อยรุ่นคือ 6 วัน ค่ามัธยฐานขนาดชุดงานของการปล่อยรุ่นคือ 3 การเปลี่ยนแปลง และเปอร์เซ็นไทล์ที่ 85 คือ 14 ความครอบคลุมของแฟลกสำหรับการเปลี่ยนแปลงที่ผู้ใช้เห็นได้คือ 58 เปอร์เซ็นต์ และมีแฟลกการปล่อยรุ่น 17 รายการที่เกิน 30 วันหลังปล่อยครบ

ความเสี่ยงของการบิดเบือนมองเห็นได้แล้ว การติดตั้งใช้งานบางส่วนเป็นการกำหนดค่าอย่างเดียว และไปป์ไลน์นับแต่ละอย่างเป็นการติดตั้งใช้งาน ดังนั้นแดชบอร์ดจึงแสดงชุดข้อมูลการกำหนดค่าแยกต่างหาก และการทบทวนรายเดือนสุ่มตัวอย่างการติดตั้งใช้งาน 10 ครั้งเพื่อหาการเปลี่ยนแปลงที่ผู้ใช้เห็นได้ ผู้จัดการระดับภูมิภาคเห็นจำนวนการติดตั้งใช้งานและขอให้ทีมเพิ่มให้ตรงกับตัวเลขของทีมอื่น หัวหน้าทีมต่อต้านเป้าหมายนั้นและนำตัวเลขทั้งชุดมาที่การทบทวนรายเดือนแทน การทบทวนพบว่าช่องว่างยาวเพราะการปล่อยรุ่นรอการบรรยายสรุปด้านการตลาดและฝ่ายสนับสนุนรายสัปดาห์ ว่า 4 จาก 17 แฟลกที่ล้าสมัยปกป้องเส้นทางโค้ดที่ไม่มีใครทดสอบ และว่าเปอร์เซ็นไทล์ที่ 85 ของขนาดชุดงานมาจากการปล่อยรุ่นไม่กี่ครั้งที่รวมการเปลี่ยนแปลงที่ไม่เกี่ยวข้องก่อนช่วงหยุดห้ามเปลี่ยนแปลงในวันหยุด

การตัดสินใจที่บันทึกในบันทึกการตัดสินใจมีสี่ส่วน ฝ่ายสนับสนุนและการตลาดจะเข้าร่วมการบรรยายสรุปที่สั้นลงสัปดาห์ละสองครั้ง เพื่อให้การตัดสินใจปล่อยรุ่นไม่ต้องรอช่วงรายสัปดาห์ ทุกแฟลกการปล่อยรุ่นมีเจ้าของและวันถอด และแฟลกที่ล้าสมัยที่ไม่ได้ทดสอบสี่รายการถูกถอดภายในสองสัปดาห์ถัดไป การปล่อยรุ่นที่รวมการเปลี่ยนแปลงที่ไม่เกี่ยวข้องต้องระบุเหตุผลในบันทึกการปล่อยรุ่น และทีมปฏิเสธเป้าหมายการติดตั้งใช้งานทั่วไป โดยเสนอมุมมองร่วมของการแจกแจงลีดไทม์การปล่อยรุ่นและความเป็นระเบียบของแฟลกของแต่ละบริการแทน ผู้จัดการการเปลี่ยนแปลงตกลงถือการเปลี่ยนแปลงที่มีแฟลกและผ่านการตรวจสอบของไปป์ไลน์เป็นการเปลี่ยนแปลงมาตรฐาน โดยมีการทบทวนในไตรมาสหน้า ในไตรมาสถัดมา (ตัวเลขเพื่อประกอบภาพ) ค่ามัธยฐานลีดไทม์การปล่อยรุ่นลดเหลือ 5 วัน จำนวนแฟลกล้าสมัยลดเหลือ 6 และอัตราการเปลี่ยนแปลงที่ล้มเหลวคงที่ การทดลองจึงดำเนินต่อไป

มุมมองตามประเภทองค์กร

สตาร์ตอัป สตาร์ตอัปมักมีบริการเดียวและไลบรารีแฟลกในโค้ด จึงแยกการติดตั้งใช้งานออกจากการปล่อยรุ่นได้ในราคาถูก เก็บทะเบียนแฟลกอย่างง่ายพร้อมวันหมดอายุ และรอให้มีปริมาณพอก่อนเชื่อถือเปอร์เซ็นไทล์

ธุรกิจขนาดเล็ก ธุรกิจขนาดเล็กอาจใช้ซอฟต์แวร์สำเร็จรูปหรือที่ซื้อมาซึ่งซัพพลายเออร์ควบคุมการปล่อยรุ่น ตัวชี้วัดที่มีประโยชน์คือเวลาระหว่างการปล่อยรุ่นของซัพพลายเออร์กับการที่ธุรกิจนำมาใช้ และชุดการเปลี่ยนแปลงที่มาพร้อมกันในเวอร์ชันหลัก บันทึกวันปล่อยรุ่นของซัพพลายเออร์และวันติดตั้งใช้งานของตนเอง เพื่อให้เห็นการรอระหว่างทั้งสอง

องค์กรขนาดใหญ่ องค์กรขนาดใหญ่เผชิญหลายบริการที่มีรูปแบบการปล่อยรุ่นต่างกัน กระบวนการเปลี่ยนแปลงส่วนกลาง และสภาพแวดล้อมร่วม งานหลักคือการตกลงนิยามของการติดตั้งใช้งานและการปล่อยรุ่นข้ามทีมและซัพพลายเออร์ และรักษาการรวมยอดที่เคารพความแตกต่าง ใช้การกระจายและแนวโน้มเพื่อการกำกับดูแล และถือแพลตฟอร์มแฟลกเป็นบริการร่วมที่มีเจ้าของ

หน่วยงานภาครัฐและภาคสาธารณะ การปล่อยรุ่นมักผูกกับวันที่ตายตัว กฎหมาย รอบการจัดซื้อจัดจ้าง หรือประตูการประกันคุณภาพ ความถี่ในการปล่อยรุ่นจึงอาจต่ำด้วยเหตุผลที่ดี ความถี่ในการติดตั้งใช้งานและช่องว่างระหว่างการติดตั้งใช้งานกับการปล่อยรุ่นยังแสดงได้ว่าความเสี่ยงถูกรับไว้ก่อนเท่าใดและรอวันที่เท่าใด รายงานการรอประตูภายนอกแยกจากเวลาไปป์ไลน์ของทีมเอง

กรณีทางธุรกิจ: แรงจูงใจ ROI และ TCO

แรงจูงใจของตัวชี้วัดเหล่านี้คือลดความเสี่ยงและความล่าช้าระหว่างการทำการเปลี่ยนแปลงให้เสร็จกับการส่งมอบคุณค่าของมัน ชุดงานใหญ่ที่ปล่อยไม่บ่อยแบกการเปลี่ยนแปลงต่อเหตุการณ์มากกว่า ดังนั้นความล้มเหลวจึงวินิจฉัยยากกว่าและย้อนกลับยากกว่า การแยกการติดตั้งใช้งานออกจากการปล่อยรุ่นให้ทีมมีวิธีรับความเสี่ยงทางเทคนิคแต่เนิ่น ๆ และในปริมาณน้อย และรับความเสี่ยงต่อผู้ใช้อย่างจงใจ ตัวชี้วัดแสดงว่าการแยกเป็นของจริงหรือไม่ และการเปลี่ยนแปลงรออยู่ที่ใด

ต้นทุนอยู่ในระดับปานกลาง การเก็บเหตุการณ์การติดตั้งใช้งานและการปล่อยรุ่นต้องมีบันทึกไปป์ไลน์และบันทึกการตรวจสอบแฟลกเชื่อมกับการควบคุมเวอร์ชันและตัวติดตามประเด็น ซึ่งเป็นการเชื่อมต่อครั้งเดียวตามด้วยการดูแลเป็นครั้งคราว (ดูหัวข้อ 1.5 “แหล่งข้อมูลและการติดตั้งเครื่องมือวัด”) แนวปฏิบัติแฟลกเองมีต้นทุนดำเนินการ ได้แก่ แพลตฟอร์มหรือไลบรารี ทะเบียน การทดสอบทั้งสองเส้นทางของการเปลี่ยนแปลงที่มีแฟลก และการเคลียร์แฟลกที่หมดอายุ ต้นทุนแฝงหลักคือหนี้แฟลก ซึ่งจำนวนแฟลกที่ล้าสมัยทำให้มองเห็นได้

ผลตอบแทนเป็นไปตามรูปแบบที่ทีมส่วนใหญ่สังเกตได้ในข้อมูลของตนเอง ลีดไทม์การปล่อยรุ่นที่สั้นลงหมายถึงวงจรข้อมูลป้อนกลับที่เร็วขึ้นว่าการเปลี่ยนแปลงช่วยผู้ใช้หรือไม่ ชุดงานที่เล็กลงหมายถึงการวินิจฉัยที่ง่ายขึ้นและการย้อนกลับที่ง่ายขึ้น ช่องว่างระหว่างการติดตั้งใช้งานกับการปล่อยรุ่นที่สั้นลงหมายถึงเวลาที่งานเสร็จนั่งอยู่โดยไม่เกิดผลน้อยลง อย่าสร้างตัวเลขของคุณค่าขึ้นเอง ใช้ตัวอย่างของทีมเองของการเปลี่ยนแปลงที่ค้างมืดหลายสัปดาห์และแนวโน้มของตัวชี้วัดของตนเอง

รูปแบบที่ไม่ควรทำและข้อควรระวัง

  • ตั้งเป้าหมายความถี่ในการติดตั้งใช้งานให้ทุกทีม เชิญชวนให้แยกและเปลี่ยนป้าย ตั้งเป้าหมายผลลัพธ์ เช่น การแจกแจงลีดไทม์ที่แคบลง และให้ความถี่ตามมา
  • ถือขบวนปล่อยรุ่นเป็นหลักฐานของความสามารถ ปฏิทินตายตัวให้จำนวนที่คงที่และซ่อนอายุของงานที่รออยู่ ติดตามอายุของการเปลี่ยนแปลงที่รวมแล้วเก่าที่สุดที่ผู้ใช้เข้าถึงไม่ได้
  • นับการเปลี่ยนแปลงการกำหนดค่าเป็นการติดตั้งใช้งานในชุดข้อมูลหลัก ทำให้ตัวเลขพอง เก็บชุดข้อมูลแยกต่างหากและแสดงข้างชุดหลัก
  • ไม่เคยถอดแฟลก โค้ดสะสมแขนงตายและการรวมกันที่ไม่ได้ทดสอบ ให้ทุกแฟลกการปล่อยรุ่นมีเจ้าของและวันถอด และถือการถอดเป็นส่วนหนึ่งของความเสร็จ
  • เปลี่ยนแฟลกในระบบจริงโดยไม่มีบันทึก การเปลี่ยนแฟลกคือการเปลี่ยนพฤติกรรมของระบบจริง ส่งไปที่บันทึกการตรวจสอบและทำให้การสนับสนุนการเปลี่ยนแปลงมองเห็นได้

แบบจำลองวุฒิภาวะ

มิติ 1 เริ่มต้น 2 พัฒนา 3 ทำให้เป็นมาตรฐาน 4 บริหารจัดการ 5 ประสานจัดการ
นิยามและนาฬิกา “การติดตั้งใช้งาน” และ “การปล่อยรุ่น” ใช้แทนกัน แต่ละคนนับต่างกัน ไม่กี่ทีมเขียนนิยามของตนเอง นิยามที่เขียนไว้หนึ่งชุดของการติดตั้งใช้งานและการปล่อยรุ่น พร้อมนาฬิกาและข้อยกเว้น ในทะเบียนตัวชี้วัด บันทึกการเปลี่ยนนิยามและทำเครื่องหมายบนแผนภูมิ ตรวจตัวอย่างทุกไตรมาส ปรับนิยามร่วมกับซัพพลายเออร์และผู้กำกับดูแลเมื่อไม่ให้ข้อมูลต่อการตัดสินใจอีกต่อไป
การแยกการติดตั้งใช้งานออกจากการปล่อยรุ่น ทุกการติดตั้งใช้งานเป็นการปล่อยรุ่น บางทีมใช้แฟลกหรือการทยอยปล่อยเป็นขั้นสำหรับการเปลี่ยนแปลงเสี่ยง แฟลกและการทยอยปล่อยเป็นขั้นเป็นตัวเลือกมาตรฐาน พร้อมบันทึกเหตุการณ์การปล่อยรุ่น ติดตามแนวโน้มและทบทวนช่องว่าง ขนาดชุดงาน และขั้นของการทยอยปล่อย ประสานเวลาปล่อยรุ่นข้ามทีมและซัพพลายเออร์สำหรับบริการที่เกี่ยวข้อง
การจับข้อมูล รวบรวมจำนวนด้วยมือจากตั๋วและแชต ข้อมูลไปป์ไลน์สำหรับบางบริการ บันทึกการปล่อยรุ่นด้วยมือ จับการติดตั้งใช้งาน การปล่อยรุ่น และการเปลี่ยนแฟลกโดยอัตโนมัติสำหรับบริการส่วนใหญ่ วัดและติดตามแนวโน้มคุณภาพข้อมูล (อัตราการเชื่อมโยง ตรวจสอบตัวอย่าง) แบ่งปันเหตุการณ์ข้ามทีมและซัพพลายเออร์ผ่านอินเทอร์เฟซที่ตกลงกัน
ความเป็นระเบียบของแฟลก ไม่มีสินค้าคงคลัง รายการไม่เป็นทางการในบางทีม ทะเบียนที่มีเจ้าของ ประเภท และวันหมดอายุสำหรับทุกแฟลกการปล่อยรุ่น ติดตามแนวโน้มจำนวนแฟลกล้าสมัย การถอดเป็นส่วนหนึ่งของความเสร็จและมีการตรวจ จัดการแพลตฟอร์มแฟลกเป็นบริการร่วมพร้อมการเตือนหมดอายุอัตโนมัติ
การใช้ตัวเลข รายงานขึ้นไปเป็นจำนวนเดียว ทีมดูแผนภูมิของตนเองเป็นครั้งคราว ทีมเจ้าของทบทวนทุกเดือนควบคู่กับตัวเลขความล้มเหลวและการทำซ้ำ แนวโน้มป้อนการปรับปรุงที่ได้รับทุนพร้อมมาตรการป้องกัน การกระจายและแนวโน้มให้ข้อมูลต่อการลงทุนในแพลตฟอร์มและนโยบายการเปลี่ยนแปลงทั่วองค์กร

รายการตรวจสอบ

  • “การติดตั้งใช้งาน” และ “การปล่อยรุ่น” นิยามเป็นลายลักษณ์อักษร พร้อมเหตุการณ์นาฬิกาและข้อยกเว้นของแต่ละอย่าง
  • จับการติดตั้งใช้งานระบบจริงโดยอัตโนมัติจากไปป์ไลน์ โดยไม่รวมสภาพแวดล้อมทดสอบ
  • จับเหตุการณ์การปล่อยรุ่นจากบันทึกการตรวจสอบแฟลก ขั้นของการทยอยปล่อย หรือบันทึกการปล่อยรุ่น
  • ลีดไทม์การปล่อยรุ่นใช้จุดเริ่มนาฬิกาที่ระบุและรายงานค่ามัธยฐานและเปอร์เซ็นไทล์ที่ 85
  • รายงานช่องว่างระหว่างการติดตั้งใช้งานกับการปล่อยรุ่นและขนาดชุดงานของการปล่อยรุ่นควบคู่กับความถี่
  • การติดตั้งใช้งานที่เป็นการกำหนดค่าอย่างเดียวปรากฏในชุดข้อมูลแยกต่างหาก
  • ทุกแฟลกการปล่อยรุ่นมีเจ้าของ ประเภท และวันหมดอายุในทะเบียน
  • ทบทวนแฟลกที่ล้าสมัยทุกเดือนและการถอดเป็นส่วนหนึ่งของความเสร็จ
  • รหัสการปล่อยรุ่นปรากฏบนบันทึกเหตุขัดข้องและการเปลี่ยนแปลง
  • ตรวจสอบตัวอย่างการติดตั้งใช้งานและการปล่อยรุ่นทุกไตรมาสเทียบกับนิยาม
  • การทดลองปรับปรุงหนึ่งอย่างที่ผูกกับการรอนานที่สุดกำลังดำเนินอยู่พร้อมวันทบทวน

พรอมต์ AI

ร่างนิยามการติดตั้งใช้งานและการปล่อยรุ่นสำหรับบริการ

ฉันกำลังนิยามตัวชี้วัดการปล่อยรุ่นและการติดตั้งใช้งานสำหรับ [ชื่อบริการ]
เครื่องมือของเราคือ [โฮสต์การควบคุมเวอร์ชัน ระบบ CI/CD บริการแฟลก ตัวติดตาม
ประเด็น เครื่องมือ ITSM] รูปแบบการปล่อยรุ่นของเราคือ [ต่อเนื่อง ขบวนรายสัปดาห์
รายเดือน ผ่านการตรวจของสโตร์ หรืออื่น ๆ] สำหรับความถี่ในการติดตั้งใช้งาน
ความถี่ในการปล่อยรุ่น ลีดไทม์การปล่อยรุ่น ช่องว่างระหว่างการติดตั้งใช้งานกับ
การปล่อยรุ่น ขนาดชุดงานของการปล่อยรุ่น ความครอบคลุมของฟีเจอร์แฟลก และจำนวน
แฟลกที่ล้าสมัย ร่างนิยามที่ระบุว่านาฬิกาเริ่มและหยุดที่ใด สิ่งที่นับและไม่รวม
แหล่งข้อมูล และข้อกำกวมหนึ่งข้อที่ต้องแก้ อย่าสร้างค่าเปรียบเทียบขึ้นเอง หรืออ้างว่า
แนวปฏิบัติของเราตรงกับระดับประสิทธิภาพใดที่เผยแพร่ ระบุข้อสมมติของคุณและ
คำถามที่ฉันควรตอบเพื่อทำนิยามให้เสร็จ

ตรวจชุดตัวชี้วัดการปล่อยรุ่นเพื่อหาความเสี่ยงของการบิดเบือน

นี่คือวิธีที่เราคำนวณและรายงานตัวชี้วัดการปล่อยรุ่นและการติดตั้งใช้งาน:
[คำอธิบายของแต่ละตัวชี้วัด แหล่งข้อมูล และวิธีรายงาน] ผู้ชมคือ [ทีม ผู้นำ หรือ
องค์กรกำกับดูแล] และเป้าหมาย หากมี คือ [เป้าหมายหรือไม่มี] สำหรับแต่ละตัวชี้วัด
ระบุวิธีที่เป็นไปได้ที่ตัวเลขอาจถูกทำให้พอง ซ่อน หรือบิดเบือนโดยไม่มีการปรับปรุง
จริง และเสนอตัวชี้วัดหรือแนวปฏิบัติป้องกันที่จับคู่กันที่จะจับได้ อย่าสร้างสถิติ
ขึ้นเอง ระบุข้อสมมติของคุณและข้อมูลที่คุณต้องการเพื่อให้แม่นยำขึ้น

วิเคราะห์ข้อมูลส่งออกของการติดตั้งใช้งาน การปล่อยรุ่น และแฟลก

ฉันจะวางข้อมูลส่งออกขนาดเล็กที่มีฟิลด์เหล่านี้: [รายการฟิลด์ เช่น รหัสการ
ติดตั้งใช้งาน เวลาติดตั้งใช้งาน ผลลัพธ์ รหัสการเปลี่ยนแปลง ชื่อแฟลก เวลาเปิดแฟลก
สัดส่วนการเข้าถึง เวลาปล่อยรุ่น] ครอบคลุมการติดตั้งใช้งาน [จำนวน] ครั้งและ
แฟลก [จำนวน] รายการสำหรับ [ชื่อบริการ] ระหว่าง [วันที่เริ่มต้น] ถึง [วันที่สิ้นสุด]
คำนวณค่ามัธยฐานและเปอร์เซ็นไทล์ที่ 85 ของลีดไทม์การปล่อยรุ่นและของช่องว่าง
ระหว่างการติดตั้งใช้งานกับการปล่อยรุ่น การแจกแจงขนาดชุดงาน และรายการแฟลกที่
เกิน [ขีดจำกัดอายุ] วันหลังปล่อยครบ โดยแสดงจำนวนเบื้องหลังแต่ละค่า ทำเครื่องหมาย
บันทึกที่ขาดการเชื่อมโยงหรือมีตราเวลาน่าสงสัย อย่าคาดการณ์เกินข้อมูลหรือเปรียบเทียบ
ผลกับค่าเปรียบเทียบภายนอก ระบุข้อสมมติของคุณและปัญหาคุณภาพข้อมูลที่จำกัดข้อสรุป

วางแผนการทดลองเคลียร์แฟลกและลดการรอปล่อยรุ่น

การรอปล่อยรุ่นที่นานที่สุดของเราคือ [คำอธิบายของการรอ พร้อมช่วงวันที่และจำนวน]
และทะเบียนแฟลกของเรามีแฟลกการปล่อยรุ่น [จำนวน] รายการ ซึ่ง [จำนวน] รายการเกิน
วันหมดอายุ ข้อจำกัดคือ [ข้อจำกัด เช่น การปล่อยรุ่นที่ถูกกำกับดูแล การตรวจของสโตร์
สภาพแวดล้อมทดสอบร่วม] เสนอการทดลองเล็ก ๆ สามอย่างยาวสี่ถึงหกสัปดาห์ แต่ละอย่าง
มีสมมติฐาน วิธีสังเกตผล ตัวชี้วัดป้องกัน และความเสี่ยง อย่าสร้างตัวเลขการปรับปรุงที่
คาดหวังขึ้นเอง ระบุข้อสมมติของคุณและสิ่งที่เราควรตรวจก่อนเริ่ม

ทักษะ AI

  • ทักษะ Agile ITIL Metrics: ใช้เพื่อค้นหาหัวข้อการเปลี่ยนแปลง การปล่อยรุ่น และเหตุขัดข้องที่เกี่ยวข้อง และมาตรการป้องกันที่ควรอยู่ข้างตัวชี้วัดการปล่อยรุ่นแต่ละตัว
  • ทักษะผู้ดูแล Agile ITIL Metrics: ใช้เพื่อตรวจสอบว่าฉบับแก้ไขของหัวข้อนี้ยังคงนาฬิกาจับเวลา ช่องทางการบิดเบือน และการอ้างอิงข้ามหัวข้อให้สอดคล้องกัน

ข้อสรุปสำคัญ

  • การติดตั้งใช้งานนำเวอร์ชันไปไว้ในสภาพแวดล้อม และการปล่อยรุ่นทำให้ผู้ใช้เข้าถึงการเปลี่ยนแปลงได้ วัดทั้งสองแยกกันทุกที่ที่ทำได้
  • ลีดไทม์การปล่อยรุ่นควรจบที่การปล่อยรุ่น โดยมีจุดเริ่มที่ระบุ และรายงานเป็นค่ามัธยฐานและเปอร์เซ็นไทล์ที่ 85
  • ช่องว่างระหว่างการติดตั้งใช้งานกับการปล่อยรุ่นและขนาดชุดงานแสดงว่าการแยกเป็นของจริง และปกป้องความถี่จากการแยกและการเปลี่ยนป้าย
  • ฟีเจอร์แฟลกทำให้การแยกเป็นไปได้และมีต้นทุน จึงควรติดตามความครอบคลุมและแฟลกที่ล้าสมัยพร้อมเจ้าของและวันหมดอายุ
  • นับตามกฎที่เขียนไว้ เชื่อมโยงการปล่อยรุ่นกับเหตุขัดข้องและการเปลี่ยนแปลง และเปรียบเทียบบริการกับประวัติของตนเองแทนทีมอื่น

เอกสารอ้างอิงและแหล่งอ่านเพิ่มเติม

  1. Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
  2. Humble, J., and Farley, D., Continuous Delivery: Reliable Software Releases through Build, Test, and Deployment Automation, Addison-Wesley, 2010.
  3. DORA, DORA's software delivery performance metrics, Google Cloud, https://dora.dev/guides/dora-metrics/
  4. Hodgson, P., "Feature Toggles (aka Feature Flags)," martinfowler.com, 2017, https://martinfowler.com/articles/feature-toggles.html
  5. Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
  6. Wikipedia, Software deployment.
  7. Wikipedia, Release management.
  8. Wikipedia, Feature toggle.
  9. Wikipedia, Canary release.
  10. Wikipedia, Blue-green deployment.
  11. Wikipedia, Continuous delivery.
  12. Wikipedia, Goodhart's law.

ตัวชี้วัด ITIL แบบคล่องตัว — วัดบริการไอทีแบบคล่องตัวโดยไม่บิดเบือนงาน

ซอร์สและการมีส่วนร่วม: github.com/agile-itil-metrics. สร้างด้วย Lily Design System™.

สร้างโดย Joel Parker Henderson.