ตัวชี้วัดการปล่อยรุ่นและการติดตั้งใช้งาน
การติดตั้งใช้งานโค้ดและการปล่อยรุ่นให้ผู้ใช้เป็นคนละเหตุการณ์ที่มีความเสี่ยงต่างกัน ดังนั้นจึงควรวัดแยกกัน นับแต่ละอย่างตามกฎที่เขียนไว้ และอ่านความถี่ ลีดไทม์ ขนาดชุดงาน และความเป็นระเบียบของแฟลกร่วมกัน แทนที่จะเฉลิมฉลองตัวเลขใดตัวเลขหนึ่งโดยลำพัง
ภาพรวมและแรงจูงใจ
หลายทีมใช้คำว่า “การติดตั้งใช้งาน” และ “การปล่อยรุ่น” เสมือนเป็นสิ่งเดียวกัน ทั้งสองไม่เหมือนกัน และความแตกต่างนั้นเป็นแนวคิดที่มีประโยชน์ที่สุดในหัวข้อนี้ การติดตั้งใช้งาน (deployment) คือการนำซอฟต์แวร์เวอร์ชันหนึ่งไปไว้ในสภาพแวดล้อม โดยปกติคือระบบจริง ตามที่อธิบายในบทความเรื่องการติดตั้งซอฟต์แวร์ การปล่อยรุ่น (release) คือช่วงเวลาที่การเปลี่ยนแปลงพร้อมให้ผู้ใช้ที่ตั้งใจไว้เข้าถึงได้ ซึ่งเป็นการตัดสินใจที่การจัดการการปล่อยรุ่นมีขึ้นเพื่อกำกับ เมื่อทั้งสองเกิดพร้อมกัน การติดตั้งใช้งานก็เป็นการปล่อยรุ่น และตัวเลขเดียวอธิบายทั้งสอง เมื่อแยกกัน ทีมติดตั้งใช้งานได้บ่อยและเงียบ ๆ และปล่อยรุ่นอย่างจงใจ
การแยกมีความสำคัญเพราะทั้งสองเหตุการณ์มีความเสี่ยงต่างกัน การติดตั้งใช้งานมีความเสี่ยงทางเทคนิค คือบิลด์ใหม่อาจเริ่มทำงานไม่ได้ อาจทำให้สิ่งที่พึ่งพาเสียหาย หรืออาจต้องย้อนกลับ การปล่อยรุ่นมีความเสี่ยงทางธุรกิจและต่อผู้ใช้ คือการเปลี่ยนแปลงอาจทำให้ลูกค้าสับสน หรืออาจต้องไปถึงในวันที่ตกลงกัน ทีมที่ผูกสองเหตุการณ์เข้าด้วยกันยอมรับทั้งสองความเสี่ยงพร้อมกัน ซึ่งผลักไปสู่ชุดการเปลี่ยนแปลงขนาดใหญ่ที่ปล่อยไม่บ่อย ทีมที่แยกกันรับความเสี่ยงทางเทคนิคเป็นก้าวเล็ก ๆ และความเสี่ยงต่อผู้ใช้เป็นก้าวที่ควบคุมได้
เครื่องมือหลักสำหรับการแยกคือฟีเจอร์ทอกเกิล (feature toggle) หรือที่เรียกว่าฟีเจอร์แฟลก (feature flag) คือสวิตช์ในการกำหนดค่าที่เปิดหรือปิดพฤติกรรมโดยไม่ต้องติดตั้งใช้งานใหม่ เทคนิคที่เกี่ยวข้องได้แก่การปล่อยรุ่นแบบคานารี (canary release) ซึ่งเปิดการเปลี่ยนแปลงให้การจราจรส่วนเล็กก่อน และการติดตั้งใช้งานแบบบลูกรีน (blue-green deployment) ซึ่งเก็บสภาพแวดล้อมระบบจริงสองชุดและสลับการจราจรระหว่างกัน ทั้งหมดนี้ช่วยให้ตอบสองคำถามที่แยกกัน คือเวอร์ชันใหม่ทำงานอย่างปลอดภัยหรือไม่ และใครควรเห็นพฤติกรรมใหม่และเมื่อใด
คำต่อไปนี้ปรากฏซ้ำในหัวข้อนี้
- การปล่อยรุ่น (release) คือเวอร์ชันหรือชุดการเปลี่ยนแปลงที่ทำให้ผู้ใช้เข้าถึงได้
- การติดตั้งใช้งาน (deployment) คือการย้ายเวอร์ชันไปยังสภาพแวดล้อม ITIL 4 ตั้งชื่อแนวปฏิบัติสำหรับเรื่องนี้ว่าการจัดการการติดตั้งใช้งาน
- การเปิดตัวแบบมืด (dark launch) คือการติดตั้งใช้งานที่พฤติกรรมใหม่ถูกปิดไว้สำหรับผู้ใช้
- การทยอยปล่อยรุ่น (progressive rollout) คือการปล่อยรุ่นที่ขยายการเข้าถึงเป็นขั้น เช่น 1 เปอร์เซ็นต์ 10 เปอร์เซ็นต์ แล้วทุกคน
- ชุดงาน (batch) คือชุดการเปลี่ยนแปลงที่ส่งมอบพร้อมกันในการติดตั้งใช้งานหรือการปล่อยรุ่นครั้งเดียว ขนาดชุดงานคือจำนวนการเปลี่ยนแปลง หรือปริมาณการเปลี่ยนแปลงในชุดนั้น
- ลีดไทม์การปล่อยรุ่น (release lead time) คือเวลาที่ผ่านไปจากจุดเริ่มต้นที่ระบุจนการเปลี่ยนแปลงพร้อมให้ผู้ใช้เข้าถึง ทีมของคุณเขียนจุดเริ่มต้นไว้ เพราะมีหลายจุดที่ใช้กันทั่วไป
- เปอร์เซ็นไทล์ (percentile) คือค่าที่ต่ำกว่าสัดส่วนที่ระบุของข้อสังเกตตกอยู่ เปอร์เซ็นไทล์ที่ 85 ของลีดไทม์การปล่อยรุ่นคือตัวเลขที่การปล่อยรุ่น 85 เปอร์เซ็นต์ทำได้ดีกว่า
มุมมองแบบคล่องตัวและ ITIL มาพบกันที่นี่ ทีมแบบคล่องตัวที่ปฏิบัติการส่งมอบอย่างต่อเนื่องต้องการให้ทุกการเปลี่ยนแปลงพร้อมปล่อยได้ทุกเมื่อ และถือว่าการปล่อยรุ่นเป็นการตัดสินใจทางธุรกิจที่แยกจากการกระทำทางเทคนิค ผู้ปฏิบัติ ITIL มองการจัดการการปล่อยรุ่น การจัดการการติดตั้งใช้งาน และการสนับสนุนการเปลี่ยนแปลงเป็นแนวปฏิบัติที่วางแผน กำหนดตาราง และควบคุมการเคลื่อนของการเปลี่ยนแปลงสู่การใช้งานจริง สองมุมมองขัดแย้งกันเมื่อการจัดการการปล่อยรุ่นถูกเข้าใจเป็นปฏิทินของเหตุการณ์ใหญ่ ทั้งสองเข้ากันได้เมื่อแนวปฏิบัติถูกเข้าใจเป็นความสามารถในการปล่อยรุ่นอย่างปลอดภัยตามต้องการ โดยมีการควบคุมสร้างไว้ในไปป์ไลน์และแฟลก
หัวข้อนี้ไม่ทวนนิยามของตัวชี้วัดประสิทธิภาพการส่งมอบทั้งห้าจากโครงการวิจัย DORA (ดูหัวข้อ 2.8 “ตัวชี้วัด DORA”) หรือตัวชี้วัดความล้มเหลวและการทำซ้ำหลังการปล่อยรุ่น (ดูหัวข้อ 4.4 “ความล้มเหลวของการเปลี่ยนแปลงและการทำซ้ำ”) หรือปริมาณและการอนุมัติการเปลี่ยนแปลง (ดูหัวข้อ 4.3 “ตัวชี้วัดการสนับสนุนการเปลี่ยนแปลง”) หัวข้อนี้เพิ่มสิ่งที่หัวข้อเหล่านั้นเปิดไว้ คือวิธีนับการปล่อยรุ่นแยกจากการติดตั้งใช้งาน การเปลี่ยนแปลงที่เสร็จแล้วรอนานเท่าใดก่อนผู้ใช้ได้รับ ชุดงานใหญ่เพียงใด และแฟลกที่ทำให้การแยกเป็นไปได้ได้รับการดูแลให้เป็นระเบียบหรือไม่
สุดท้าย จำนวนการปล่อยรุ่นและการติดตั้งใช้งานเป็นตัวเลขที่น่าลองสำหรับแดชบอร์ดของผู้นำ และกฎของกูดฮาร์ตใช้ได้ทันที (ดูหัวข้อ 1.2 “กฎของกูดฮาร์ตและจิตวิทยาของตัวชี้วัด”) จำนวนการติดตั้งใช้งานเพิ่มขึ้นเมื่อแยกการเปลี่ยนแปลงเป็นชิ้นเล็กน้อย จำนวนการปล่อยรุ่นเพิ่มขึ้นเมื่อเปลี่ยนป้าย ดังนั้นแต่ละตัวชี้วัดด้านล่างจึงมาพร้อมวิธีที่มันบิดเบี้ยวและมาตรการป้องกันที่จับความบิดเบี้ยวนั้น
หลักการสำคัญ
- การติดตั้งใช้งานและการปล่อยรุ่นเป็นสองเหตุการณ์ วัดแยกกันทุกที่ที่สถาปัตยกรรมอนุญาต และบอกให้ชัดว่าตรงไหนยังเป็นเหตุการณ์เดียว
- นับตามกฎที่เขียนไว้ การติดตั้งใช้งานนับเมื่อสภาพแวดล้อมที่ระบุชื่อได้รับเวอร์ชันที่ระบุชื่อพร้อมผลสำเร็จ การปล่อยรุ่นนับเมื่อผู้ใช้ที่ตั้งใจไว้เข้าถึงการเปลี่ยนแปลงได้ เขียนกฎหนึ่งครั้งและใช้เหมือนกันทุกครั้ง
- อธิบายบริการ ไม่ใช่บุคคล จำนวนเป็นของบริการและทีม ไม่เคยเป็นของบุคคล
- วัดการรอ ไม่ใช่แค่งาน ลีดไทม์การปล่อยรุ่นมักมีการรอหลายวันเพื่อช่วงเวลา การอนุมัติ หรือการตัดสินใจ การรอคือที่ที่การปรับปรุงมักอยู่
- ชุดงานเล็กคือคานงัด ความถี่และขนาดเป็นสองมุมมองของสิ่งเดียวกัน จับคู่ทุกจำนวนกับตัวชี้วัดว่าแต่ละการปล่อยรุ่นนำการเปลี่ยนแปลงมาเท่าใด
- แฟลกคือสินค้าคงคลังที่มีต้นทุนการถือครอง แฟลกที่อยู่นานเกินไปกลายเป็นโค้ดตายและแหล่งความล้มเหลว จึงควรติดตามอายุของแฟลกอย่างระมัดระวังเท่ากับความครอบคลุมของแฟลก
นิยามตัวชี้วัด
| ตัวชี้วัด | นิยาม | สูตร | หน่วย | แหล่งข้อมูล | แนวปฏิบัติ ITIL | ส่วนที่เทียบเคียงได้แบบคล่องตัว | ความถี่ |
|---|---|---|---|---|---|---|---|
| ความถี่ในการติดตั้งใช้งาน | บริการได้รับการติดตั้งใช้งานที่สำเร็จในระบบจริงบ่อยเพียงใด | จำนวนการติดตั้งใช้งานระบบจริงที่สำเร็จของบริการในช่วงเวลา / จำนวนวันในช่วงเวลา การติดตั้งใช้งานในสภาพแวดล้อมทดสอบหรือสเตจจิง การติดตั้งใช้งานที่ล้มเหลวหรือย้อนกลับ และการติดตั้งใช้งานซ้ำของบิลด์ที่ไม่เปลี่ยนไม่นับรวม การติดตั้งใช้งานที่เป็นการกำหนดค่าอย่างเดียวนับในชุดข้อมูลแยกต่างหาก | การติดตั้งใช้งานต่อวันหรือต่อสัปดาห์ | บันทึกเหตุการณ์ของไปป์ไลน์การติดตั้งใช้งาน | การจัดการการติดตั้งใช้งาน | การส่งมอบอย่างต่อเนื่อง การส่งมอบส่วนเพิ่มที่ใช้งานได้ | รายสัปดาห์ |
| ความถี่ในการปล่อยรุ่น | ผู้ใช้ได้รับการเปลี่ยนแปลงที่เข้าถึงได้บ่อยเพียงใด | จำนวนเหตุการณ์การปล่อยรุ่นในช่วงเวลา / จำนวนวันในช่วงเวลา เหตุการณ์การปล่อยรุ่นคือช่วงเวลาที่การเปลี่ยนแปลงหรือกลุ่มการเปลี่ยนแปลงพร้อมให้ผู้ใช้ที่ตั้งใจไว้เข้าถึง (แฟลกที่เปิดสำหรับผู้ใช้ทั้งหมด ขั้นสุดท้ายของการทยอยปล่อยรุ่น หรือการติดตั้งใช้งานการเปลี่ยนแปลงที่ไม่มีแฟลก) การเปิดตัวแบบมืด การทยอยปล่อยที่หยุดในขั้นบางส่วน และการเปลี่ยนแฟลกที่กระทบเฉพาะผู้ใช้ภายในไม่นับรวม | การปล่อยรุ่นต่อสัปดาห์หรือต่อเดือน | บันทึกการตรวจสอบของบริการแฟลกเชื่อมกับบันทึกไปป์ไลน์และปฏิทินการปล่อยรุ่น | การจัดการการปล่อยรุ่น | การปล่อยรุ่นเมื่อสิ้นสุดแต่ละส่วนเพิ่ม ส่วนเพิ่มที่พร้อมส่งมอบได้ถูกทำให้ใช้งานได้ | รายสัปดาห์ ทบทวนรายเดือน |
| ลีดไทม์การปล่อยรุ่น | การเปลี่ยนแปลงที่เสร็จแล้วรอนานเท่าใดก่อนผู้ใช้เข้าถึงได้ | นาฬิกาเริ่มเมื่อการเปลี่ยนแปลงถูกรวมเข้าสายหลักและผ่านการตรวจสอบอัตโนมัติ (หรือหากทีมเขียนไว้เช่นนั้น เมื่อคอมมิตแรก) และหยุดเมื่อการเปลี่ยนแปลงถูกปล่อยรุ่นตามนิยามข้างต้น รายงานค่ามัธยฐานและเปอร์เซ็นไทล์ที่ 85 ของการเปลี่ยนแปลงที่ปล่อยรุ่นในช่วงเวลา การเปลี่ยนแปลงที่ยังไม่ปล่อยรุ่นไม่นับรวมและรายงานเป็นอายุของงานที่รออยู่ | ชั่วโมงหรือวัน | การควบคุมเวอร์ชันเชื่อมกับไปป์ไลน์และบันทึกการตรวจสอบแฟลก | การจัดการการปล่อยรุ่น การจัดการการติดตั้งใช้งาน | ลีดไทม์จากเสร็จถึงส่งมอบ ลีดไทม์ถึงลูกค้า | รายสัปดาห์ ทบทวนรายเดือน |
| ช่องว่างระหว่างการติดตั้งใช้งานกับการปล่อยรุ่น | โค้ดที่ติดตั้งแล้วอยู่ในสภาพมืดนานเท่าใดก่อนผู้ใช้เข้าถึงได้ | นาฬิกาเริ่มเมื่อการเปลี่ยนแปลงถูกติดตั้งใช้งานในระบบจริงและหยุดเมื่อปล่อยรุ่น รายงานค่ามัธยฐานและเปอร์เซ็นไทล์ที่ 85 การเปลี่ยนแปลงที่ปล่อยรุ่นในขณะติดตั้งใช้งานมีช่องว่างเป็นศูนย์และรวมอยู่ด้วย การเปลี่ยนแปลงที่ติดตั้งใช้งานแล้วถอดออกภายหลังโดยไม่ปล่อยรุ่นไม่นับรวมและนับแยกต่างหาก | ชั่วโมงหรือวัน | บันทึกไปป์ไลน์เชื่อมกับบันทึกการตรวจสอบแฟลก | การจัดการการปล่อยรุ่น การจัดการการติดตั้งใช้งาน | การเปิดตัวแบบมืด การแยกการติดตั้งใช้งานออกจากการปล่อยรุ่น | รายเดือน |
| ขนาดชุดงานของการปล่อยรุ่น | การเปลี่ยนแปลงจำนวนเท่าใดที่ส่งมอบพร้อมกันในการปล่อยรุ่นครั้งเดียว | ค่ามัธยฐานและเปอร์เซ็นไทล์ที่ 85 ของจำนวนการเปลี่ยนแปลงที่รวมแล้ว (พูลรีเควสต์หรือรายการงาน) ต่อการปล่อยรุ่นในช่วงเวลา เขียนหน่วยของการเปลี่ยนแปลงไว้ แต่ละการเปลี่ยนแปลงนับหนึ่งครั้งในการปล่อยรุ่นที่ทำให้เข้าถึงได้ | การเปลี่ยนแปลงต่อการปล่อยรุ่น | การควบคุมเวอร์ชันและตัวติดตามประเด็นเชื่อมกับเหตุการณ์การปล่อยรุ่น | การจัดการการปล่อยรุ่น การสนับสนุนการเปลี่ยนแปลง | ชุดงานเล็ก ชิ้นงานแนวตั้ง | ต่อการปล่อยรุ่น ทบทวนรายเดือน |
| ความครอบคลุมของฟีเจอร์แฟลก | สัดส่วนของการเปลี่ยนแปลงที่ผู้ใช้เห็นได้ซึ่งปล่อยรุ่นหลังแฟลก | การเปลี่ยนแปลงที่ผู้ใช้เห็นได้ซึ่งปล่อยรุ่นในช่วงเวลาที่มีแฟลก ณ เวลาปล่อยรุ่น / การเปลี่ยนแปลงที่ผู้ใช้เห็นได้ทั้งหมดที่ปล่อยรุ่นในช่วงเวลา การเปลี่ยนแปลงโครงสร้างพื้นฐานและการแก้ข้อบกพร่องที่ใส่แฟลกไม่ได้ไม่นับรวม และเขียนกฎของ “ผู้ใช้เห็นได้” ไว้ | เปอร์เซ็นต์ | บริการแฟลกเชื่อมกับตัวติดตามประเด็นและบันทึกการปล่อยรุ่น | การจัดการการปล่อยรุ่น การสนับสนุนการเปลี่ยนแปลง | การส่งมอบแบบก้าวหน้า การพัฒนาที่ขับเคลื่อนด้วยการทดลอง | รายเดือน |
| จำนวนแฟลกที่ล้าสมัย | มีแฟลกกี่รายการที่อยู่เกินจุดประสงค์ของมัน | จำนวนแฟลกการปล่อยรุ่นที่ยังอยู่ในโค้ดหรือการกำหนดค่าเกินจำนวนวันที่ระบุหลังจากการเปลี่ยนแปลงที่แฟลกปกป้องถึงผู้ใช้ทั้งหมด แฟลกปฏิบัติการถาวร (สวิตช์ปิดฉุกเฉิน แฟลกสิทธิ์การใช้งาน) ถูกติดแท็กและไม่นับรวม เขียนขีดจำกัดอายุไว้ต่อประเภทแฟลก | แฟลก และค่ามัธยฐานอายุของแฟลกการปล่อยรุ่นเป็นวัน | คลังแฟลกของบริการเชื่อมกับการค้นหาโค้ด | การจัดการการปล่อยรุ่น การจัดการความรู้ | การเคลียร์หนี้ทางเทคนิค เกณฑ์ความเสร็จของการถอดแฟลก | รายเดือน |
ข้อเสนอแนะ
เขียนว่าอะไรนับเป็นการติดตั้งใช้งานและการปล่อยรุ่น
นิยามทั้งสองเหตุการณ์ก่อนนับอย่างใดอย่างหนึ่ง การติดตั้งใช้งานนับเมื่อเวอร์ชันที่ระบุชื่อไปถึงสภาพแวดล้อมที่ระบุชื่อและไปป์ไลน์รายงานความสำเร็จ การปล่อยรุ่นนับเมื่อผู้ใช้ที่ตั้งใจไว้เข้าถึงการเปลี่ยนแปลงได้ ซึ่งสำหรับการเปลี่ยนแปลงที่มีแฟลกคือช่วงเวลาที่แฟลกถูกเปิดให้พวกเขา ไม่ใช่ช่วงเวลาที่โค้ดมาถึง ระบุข้อยกเว้นในประโยคเดียวกัน ได้แก่ สภาพแวดล้อมทดสอบ การย้อนกลับ การติดตั้งใช้งานซ้ำของบิลด์ที่ไม่เปลี่ยน และการเข้าถึงเฉพาะภายใน
รายงานสองชุดข้อมูลเคียงกัน
แสดงความถี่ในการติดตั้งใช้งานและความถี่ในการปล่อยรุ่นบนแผนภูมิเดียว ที่เส้นทับกัน บริการยังผูกสองเหตุการณ์เข้าด้วยกัน ที่การติดตั้งใช้งานนำการปล่อยรุ่นไปไกล ทีมเริ่มแยกทั้งสองออกจากกัน และระยะห่างระหว่างเส้นเป็นสัญญาณของความสามารถ ตัวเลขรวมเดียวซ่อนเรื่องนี้ และให้ทีมอ้างความถี่สูงที่ผู้ใช้ไม่เคยเห็น
วัดลีดไทม์การปล่อยรุ่นจากจุดเริ่มที่ระบุจนถึงผู้ใช้
เลือกจุดเริ่มของนาฬิกาหนึ่งครั้งและรักษาไว้ การเริ่มที่คอมมิตแรกแสดงการเดินทางเต็มรูปแบบ และการเริ่มที่การรวมเข้าสายหลักแยกไปป์ไลน์การปล่อยรุ่นและการอนุมัติออกมา ทั้งสองรับได้หากระบุบนแผนภูมิและไม่เปลี่ยนอย่างเงียบ ๆ จบนาฬิกาที่การปล่อยรุ่น ไม่ใช่การติดตั้งใช้งาน มิฉะนั้นตัวชี้วัดจะหยุดวัดสิ่งที่ผู้ใช้รอ
ติดตามขนาดชุดงานควบคู่กับความถี่
จับคู่ทุกความถี่กับขนาด ทีมเพิ่มจำนวนการติดตั้งใช้งานได้ด้วยการตัดการเปลี่ยนแปลงหนึ่งเป็นชิ้นที่ไม่มีประโยชน์ในตัวเอง และจำนวนเพิ่มขึ้นในขณะที่การไหลจริงเหมือนเดิม ค่ามัธยฐานและเปอร์เซ็นไทล์ที่ 85 ของขนาดชุดงานแสดงว่าชิ้นนั้นเป็นของจริงหรือไม่ ชุดงานเล็กทบทวน ทดสอบ และย้อนกลับได้ง่ายกว่า และนั่นคือประโยชน์ที่ความถี่เป็นตัวแทน
ถือขั้นของการทยอยปล่อยรุ่นเป็นเหตุการณ์
บันทึกแต่ละขั้นของการทยอยปล่อยรุ่นพร้อมตราเวลา การทยอยปล่อยจาก 1 เปอร์เซ็นต์เป็น 10 เปอร์เซ็นต์แล้วทุกคนให้ตราเวลาสามค่า และแต่ละค่าเป็นโอกาสที่จะหยุด จับขั้น สัดส่วนการเข้าถึง และผลของการตรวจสุขภาพที่อนุญาตให้ไปขั้นถัดไป ช่วยแยกการทยอยปล่อยที่หยุดเพราะสัญญาณจริงออกจากที่ติดขัด
เก็บทะเบียนแฟลกที่มีเจ้าของและวันหมดอายุ
ให้ทุกแฟลกการปล่อยรุ่นมีเจ้าของ จุดประสงค์ และวันที่วางแผนถอดออกตั้งแต่สร้าง บริการแฟลกหรือทะเบียนธรรมดาเก็บสิ่งเหล่านี้ได้ ทบทวนทะเบียนทุกเดือนและคำนวณจำนวนแฟลกที่ล้าสมัย แฟลกที่เปิดทิ้งไว้หลังปล่อยครบแล้วคือโค้ดตายที่ยังแตกแขนงอยู่ ถือการถอดออกเป็นส่วนหนึ่งของความเสร็จของการเปลี่ยนแปลง
ติดแท็กแฟลกตามประเภท
แยกแฟลกการปล่อยรุ่นชั่วคราวออกจากแฟลกปฏิบัติการถาวร สวิตช์ปิดฉุกเฉินและแฟลกสิทธิ์การใช้งานถาวรโดยการออกแบบ ขณะที่แฟลกการปล่อยรุ่นควรถูกถอดหลังปล่อยครบ การผสมประเภทเข้าด้วยกันทำให้จำนวนที่ล้าสมัยมีสัญญาณรบกวนและชวนให้ทีมลบสวิตช์ที่ใครบางคนต้องใช้ระหว่างเหตุขัดข้อง กำหนดให้ระบุประเภทเมื่อสร้างแฟลก
เชื่อมโยงการปล่อยรุ่นกับบันทึกเหตุขัดข้องและการเปลี่ยนแปลง
บันทึกรหัสการปล่อยรุ่นบนเหตุขัดข้องและการเปลี่ยนแปลง เหตุการณ์การปล่อยรุ่นควรตามรอยได้จากเครื่องมือเหตุขัดข้อง เพื่อให้เชื่อมโยงสาเหตุของเหตุขัดข้องกับการเปลี่ยนแปลงที่ปล่อยรุ่น ไม่ว่าจะติดตั้งใช้งานเมื่อสัปดาห์ที่แล้วหรือเปิดสวิตช์เมื่อเช้านี้ หากไม่มีการเชื่อมโยง ตัวชี้วัดความไม่เสถียรจะกำหนดความล้มเหลวให้วันที่ติดตั้งใช้งานและพลาดความล้มเหลวที่เกิดจากการเปลี่ยนแฟลก การเปลี่ยนแฟลกในระบบจริงเป็นการเปลี่ยนแปลงตามความหมายของ ITIL และควรมองเห็นได้สำหรับการสนับสนุนการเปลี่ยนแปลง แม้จะอนุมัติล่วงหน้าเป็นการเปลี่ยนแปลงมาตรฐาน (ดูหัวข้อ 4.3 “ตัวชี้วัดการสนับสนุนการเปลี่ยนแปลง”)
ช่องทางการบิดเบือนและมาตรการป้องกัน
| ตัวชี้วัด | วิธีที่ถูกบิดเบือน | ตัวชี้วัดหรือแนวปฏิบัติป้องกันที่จับคู่กัน |
|---|---|---|
| ความถี่ในการติดตั้งใช้งาน | แยกการเปลี่ยนแปลงหนึ่งเป็นการติดตั้งใช้งานเล็กน้อย ติดตั้งใช้งานบิลด์ที่ไม่เปลี่ยนซ้ำ นับการติดตั้งใช้งานไปสเตจจิง นับการติดตั้งใช้งานที่เป็นการกำหนดค่าอย่างเดียวรวมกับชุดข้อมูลหลัก | ขนาดชุดงานของการปล่อยรุ่นและสัดส่วนของการติดตั้งใช้งานที่มีการเปลี่ยนแปลงที่ผู้ใช้เห็นได้ ชุดข้อมูลการกำหนดค่าที่แยกต่างหาก อัตราการเปลี่ยนแปลงที่ล้มเหลวควบคู่กัน |
| ความถี่ในการปล่อยรุ่น | ติดป้ายการติดตั้งใช้งานใหม่เป็นการปล่อยรุ่น นับแฟลกที่เปิดให้พนักงานภายในเป็นการปล่อยรุ่น ปล่อยรุ่นการเปลี่ยนแปลงที่ว่างเปล่าหรือเพียงรูปลักษณ์เพื่อให้ถึงเป้าหมาย นับแต่ละขั้นของการทยอยปล่อยเป็นการปล่อยรุ่นแยกกัน | นิยามการปล่อยรุ่นที่เขียนไว้ ตัวอย่างการปล่อยรุ่นรายไตรมาสที่ตรวจเทียบกับการเปลี่ยนแปลงที่ผู้ใช้เห็นได้ ขนาดชุดงานและจำนวนการเปลี่ยนแปลงที่ลูกค้าเห็น |
| ลีดไทม์การปล่อยรุ่น | เริ่มนาฬิกาช้า เช่น ที่การอนุมัติแทนการรวมเข้าสายหลัก ไม่รวมการเปลี่ยนแปลงที่รอนานโดยเรียกว่า “ถูกบล็อก” ปล่อยรุ่นการเปลี่ยนแปลงเล็กน้อยก่อนเพื่อดึงค่ามัธยฐานลง จบนาฬิกาที่การติดตั้งใช้งาน | เปอร์เซ็นไทล์ที่ 85 และอายุของการเปลี่ยนแปลงที่รออยู่เก่าที่สุด จุดเริ่มที่เขียนไว้ตายตัว ทบทวนการเปลี่ยนแปลงที่ช้าที่สุด 10 เปอร์เซ็นต์ทุกไตรมาส |
| ช่องว่างระหว่างการติดตั้งใช้งานกับการปล่อยรุ่น | เปิดแฟลกให้ผู้ใช้สัญลักษณ์เพื่อบันทึกการปล่อยรุ่นให้เร็ว ไม่รวมโค้ดที่มืดนานในตัวอย่างโดยเรียกว่า “ไม่ใช่การปล่อยรุ่น” ลบโค้ดมืดเพื่อหลีกเลี่ยงช่องว่างยาว | สัดส่วนการเข้าถึง ณ การปล่อยรุ่น (เกณฑ์ว่าอะไรนับเป็นปล่อยรุ่นแล้ว) จำนวนการเปลี่ยนแปลงที่ติดตั้งใช้งานแล้วถอดออกโดยไม่ปล่อยรุ่น จำนวนแฟลกที่ล้าสมัย |
| ขนาดชุดงานของการปล่อยรุ่น | แยกงานเป็นพูลรีเควสต์เทียม รวมการเปลี่ยนแปลงที่ไม่เกี่ยวข้องเป็นหนึ่งเพื่อลดจำนวนการปล่อยรุ่น นับเฉพาะการเปลี่ยนแปลงใหญ่ในชุดรวม | ค่ามัธยฐานขนาดการเปลี่ยนแปลงเป็นบรรทัดหรือไฟล์เป็นตัวชี้วัดบริบท ทบทวนตัวอย่างการปล่อยรุ่นเพื่อหาการรวมที่ไม่เกี่ยวข้อง ความถี่ควบคู่กับขนาด |
| ความครอบคลุมของฟีเจอร์แฟลก | เพิ่มแฟลกให้การเปลี่ยนแปลงเล็กน้อยเพื่อเพิ่มอัตรา ใส่แฟลกเฉพาะการเปลี่ยนแปลงที่ปลอดภัยและส่งการเปลี่ยนแปลงเสี่ยงโดยไม่มีแฟลก สร้างแฟลกที่ในทางปฏิบัติปิดไม่ได้ | ผลทดสอบการปิดแฟลกสำหรับตัวอย่างแฟลก จำนวนแฟลกที่ล้าสมัย สาเหตุเหตุขัดข้องที่ไม่มีแฟลก |
| จำนวนแฟลกที่ล้าสมัย | ติดแท็กแฟลกการปล่อยรุ่นใหม่เป็นถาวรเพื่อออกจากจำนวนที่ล้าสมัย ลบบันทึกแฟลกโดยปล่อยไว้ในโค้ด ขยายวันหมดอายุโดยไม่ทบทวน | ค้นหาโค้ดเทียบกับทะเบียนเป็นระยะ ทบทวนทุกการเปลี่ยนประเภทแฟลก อายุของแฟลกการปล่อยรุ่นที่เก่าที่สุด |
การอ่านค่าที่ดีแสดงการติดตั้งใช้งานนำหน้าการปล่อยรุ่นสำหรับบริการที่ใช้แฟลก โดยมีช่องว่างพอประมาณ ขนาดชุดงานเล็กและคงที่ และเปอร์เซ็นไทล์ที่ 85 ของลีดไทม์ไม่สูงกว่าค่ามัธยฐานมากนัก ความครอบคลุมของแฟลกสูงสำหรับการเปลี่ยนแปลงเสี่ยง และจำนวนแฟลกที่ล้าสมัยต่ำหรือลดลง การอ่านค่าที่ดูดีเกินไป เช่น ความถี่สูงควบคู่กับขนาดชุดงานที่โตขึ้น หรือจำนวนแฟลกล้าสมัยเป็นศูนย์ขณะที่จำนวนแฟลกถาวรบวม ควรได้รับการตรวจสอบตัวอย่างก่อนเฉลิมฉลองใด ๆ
ข้อแลกเปลี่ยน: ข้อดีและข้อเสีย
| แนวทาง | จุดแข็ง | จุดอ่อน |
|---|---|---|
| ติดตั้งใช้งานอย่างต่อเนื่องและปล่อยรุ่นด้วยแฟลก | ความเสี่ยงทางเทคนิคต่อการติดตั้งใช้งานเล็ก เวลาปล่อยรุ่นเป็นทางเลือกทางธุรกิจ ปิดได้เร็ว | ต้องมีวินัยและเครื่องมือเรื่องแฟลก เพิ่มเส้นทางโค้ดที่ต้องทดสอบและถอดออก |
| ผูกการติดตั้งใช้งานและการปล่อยรุ่นเข้าด้วยกัน | อธิบายง่าย เหตุการณ์เดียวให้นับ ไม่มีหนี้แฟลก | ทุกการปล่อยรุ่นแบกทั้งความเสี่ยงทางเทคนิคและต่อผู้ใช้ ซึ่งส่งเสริมชุดงานใหญ่ที่ปล่อยไม่บ่อย |
| ขบวนปล่อยรุ่นตามกำหนด | คาดการณ์ได้สำหรับฝ่ายสนับสนุนและผู้กำกับดูแล | การเปลี่ยนแปลงรอขบวนถัดไป จำนวนสะท้อนปฏิทิน ไม่ใช่ความสามารถ |
| การทยอยปล่อยรุ่นตามเปอร์เซ็นต์ | จำกัดผลของการปล่อยรุ่นที่ไม่ดี สร้างหลักฐานในแต่ละขั้น | ต้องมีเทเลเมทรีและการตรวจสุขภาพที่ดี อาจมีหลายเวอร์ชันทำงานเคียงกันอยู่ช่วงหนึ่ง |
| นับทั้งการติดตั้งใช้งานและการปล่อยรุ่น | แสดงการแยกและการรอ | ต้องเชื่อมบันทึกการตรวจสอบแฟลกหรือบันทึกการปล่อยรุ่นกับไปป์ไลน์ |
บริการที่ยังแยกการติดตั้งใช้งานออกจากการปล่อยรุ่นไม่ได้ เช่น แอปพลิเคชันมือถือที่แจกผ่านการตรวจของแอปสโตร์ ควรวัดสิ่งที่ทำได้ คือความถี่ในการปล่อยรุ่น ลีดไทม์การปล่อยรุ่น และขนาดชุดงาน โดยรายงานเวลาตรวจของสโตร์เป็นการรอแยกต่างหาก
คำถามสำหรับอภิปรายกับทีม
1. เราใช้คำว่า “การติดตั้งใช้งาน” และ “การปล่อยรุ่น” สำหรับเหตุการณ์เดียวกันหรือไม่ และตรงกับสิ่งที่เกิดขึ้นหรือไม่ ขอให้สามคนอธิบายการเปลี่ยนแปลงล่าสุดที่ขึ้นระบบจริง และจดว่าโค้ดมาถึงเมื่อใดและผู้ใช้ใช้ได้ครั้งแรกเมื่อใด ผู้อำนวยความสะดวกควรช่วยกลุ่มตกลงประโยคหนึ่งประโยคสำหรับแต่ละคำ และตัดสินใจว่าตัวเลขบนแดชบอร์ดที่มีอยู่แต่ละตัวนั้นวัดเหตุการณ์ใดในสองเหตุการณ์
2. การเปลี่ยนแปลงที่เสร็จแล้วรอการปล่อยรุ่นนานที่สุดเท่าใด และเพราะเหตุใด ดึงการเปลี่ยนแปลงที่รวมแล้วเก่าที่สุดที่ผู้ใช้ยังเข้าถึงไม่ได้ ไล่เส้นทางตั้งแต่การรวมจนถึงปัจจุบัน และจดทุกการรอตลอดทาง
3. หากจำนวนการติดตั้งใช้งานของเราเพิ่มเป็นสองเท่า เราจะตรวจอะไรก่อนเรียกว่าข่าวดี เชิญกลุ่มระบุวิธีที่จำนวนเพิ่มได้โดยไม่มีคุณค่าไปถึงผู้ใช้มากขึ้น ดูขนาดชุดงาน สัดส่วนของการติดตั้งใช้งานที่มีการเปลี่ยนแปลงที่ผู้ใช้เห็นได้ และตัวเลขความล้มเหลวและการทำซ้ำ ผู้อำนวยความสะดวกควรจดว่าการตรวจเหล่านี้อย่างใดมีบนแดชบอร์ดอยู่แล้วและอย่างใดต้องเพิ่มก่อนที่ใครจะตั้งเป้าหมาย
4. แฟลกใดของเราที่เราจะกลัวที่จะลบ และนั่นบอกอะไรเรา ไล่ดูทะเบียนแฟลกและเลือกสามรายการที่เก่าที่สุด ถามว่าใครเป็นเจ้าของแต่ละรายการ ปกป้องอะไร และจะเกิดอะไรขึ้นหากถอดออก ความกลัวที่จะลบมักหมายถึงขาดการทดสอบ ขาดเจ้าของ หรือขาดบันทึกจุดประสงค์ ตกลงวันถอดอย่างน้อยหนึ่งรายการและการตรวจที่จะทำให้การถอดปลอดภัย
5. ใครตัดสินใจว่าเมื่อใดการเปลี่ยนแปลงจะถูกปล่อยรุ่น และพวกเขามีข้อมูลที่ต้องการหรือไม่ ในที่ที่การปล่อยรุ่นเป็นทางเลือกทางธุรกิจ ผู้ตัดสินต้องเห็นสถานะการทยอยปล่อย สัญญาณสุขภาพ และความพร้อมของฝ่ายสนับสนุน ถามว่าข้อเท็จจริงเหล่านั้นอยู่ที่ใดในปัจจุบันและผู้ตัดสินใจย้อนการปล่อยรุ่นได้เร็วเพียงใด
6. การปล่อยรุ่นใดในไตรมาสที่ผ่านมาแย่ที่สุด และตัวชี้วัดใดจะเตือนเราได้ เลือกการปล่อยรุ่นหนึ่งที่ก่อปัญหาและอ่านไทม์ไลน์ร่วมกัน ถามว่าชุดงานใหญ่ ช่องว่างยาว การทยอยปล่อยมีขั้น และแฟลกจะจำกัดความเสียหายได้หรือไม่ เลือกตัวชี้วัดหนึ่งตัวที่จะเพิ่มหรือเกณฑ์หนึ่งข้อที่จะเข้มขึ้นเป็นผลลัพธ์
สี่มุมมอง
ทีมผลิตภัณฑ์และการส่งมอบ
ทีมส่งมอบใช้ตัวชี้วัดเหล่านี้เพื่อดูว่าไปป์ไลน์และแฟลกให้การควบคุมการเข้าถึงแก่ตนจริงหรือไม่ มุมมองที่มีประโยชน์ที่สุดคือช่องว่าง ขนาดชุดงาน และอายุของการเปลี่ยนแปลงที่รออยู่เก่าที่สุด เพราะแต่ละอย่างชี้ไปที่สิ่งที่ทีมเปลี่ยนได้
ทีมบริการและปฏิบัติการ
ทีมปฏิบัติการและสนับสนุนสนใจว่าอะไรเปลี่ยนในระบบจริงและเมื่อใด เหตุการณ์การปล่อยรุ่นและการเปลี่ยนแฟลกต้องมองเห็นได้สำหรับทีม โดยในอุดมคติมีรหัสการปล่อยรุ่นบนทุกเหตุขัดข้อง การทยอยปล่อยเป็นขั้นและการปิดที่รวดเร็วลดจำนวนเหตุขัดข้องที่ต้องกู้คืนเต็มรูปแบบ และตัวชี้วัดช่วยให้ทีมปฏิบัติการขอการควบคุมที่ทำให้งานของตนสงบขึ้น
ภาวะผู้นำและการกำกับดูแล
ผู้นำควรขอแนวโน้มและการกระจายสำหรับแต่ละบริการ และขอคำตอบของคำถามง่าย ๆ ว่าการเปลี่ยนแปลงที่เสร็จแล้วใช้เวลานานเท่าใดจึงถึงผู้ใช้ และปลอดภัยเพียงใด เป้าหมายความถี่ในการติดตั้งใช้งานข้ามทีมเชิญชวนการแยกและการเปลี่ยนป้าย จึงควรเลือกเป้าหมายสำหรับผลลัพธ์ เช่น การแจกแจงลีดไทม์ และการขจัดการรอที่ทราบ องค์กรกำกับดูแลลดภาระการอนุมัติการปล่อยรุ่นได้ด้วยการอนุมัติล่วงหน้าการเปลี่ยนแปลงที่มีแฟลกและเสี่ยงต่ำ ตราบเท่าที่ร่องรอยการตรวจสอบของแฟลกสมบูรณ์ (ดูหัวข้อ 4.3 “ตัวชี้วัดการสนับสนุนการเปลี่ยนแปลง”)
ลูกค้าและผู้ใช้
ลูกค้าเห็นการปล่อยรุ่น ไม่ใช่การติดตั้งใช้งาน ลูกค้าสนใจว่าการแก้ไขมาถึงเร็ว พฤติกรรมใหม่ไม่ทำให้ตกใจ และการเปลี่ยนแปลงที่ไม่ดีย้อนกลับได้อย่างรวดเร็ว ทีมที่แยกสองเหตุการณ์ให้ลูกค้าเข้าถึงฟีเจอร์ได้ก่อน ประกาศวันที่ที่รักษาได้ และย้อนฟีเจอร์เดียวโดยไม่เสียส่วนที่เหลือ จับคู่ตัวชี้วัดเหล่านี้กับตัวชี้วัดฝั่งลูกค้า (ดูหัวข้อ 5.3 “ตัวชี้วัดความพร้อมใช้งาน” และหัวข้อ 6.1 “ตัวชี้วัดความพึงพอใจของลูกค้า”)
ในทางปฏิบัติ: ตัวอย่าง ITIL แบบคล่องตัว
ผู้ค้าปลีกออนไลน์ระดับภูมิภาครายหนึ่งดำเนินบริการค้นหาสินค้าที่ทีมผลิตภัณฑ์หนึ่งทีมเป็นเจ้าของ โดยมีทีมแพลตฟอร์มและเซอร์วิสเดสก์สนับสนุน บริการติดตั้งใช้งานสู่ระบบจริงผ่านไปป์ไลน์และมีบริการแฟลกที่นำเข้ามาเมื่อหกเดือนก่อน ตัวเลขทั้งหมดด้านล่างเป็นตัวเลขเพื่อประกอบภาพ
ตลอดไตรมาสที่ผ่านมา ทีมทำการติดตั้งใช้งานระบบจริง 52 ครั้ง ประมาณสี่ครั้งต่อสัปดาห์ ความถี่ในการปล่อยรุ่น ซึ่งนับเป็นช่วงเวลาที่การเปลี่ยนแปลงพร้อมให้ผู้ใช้ที่ตั้งใจไว้ทั้งหมดเข้าถึง คือ 11 ครั้งในไตรมาสเดียวกัน ประมาณหนึ่งครั้งต่อสัปดาห์ ค่ามัธยฐานของลีดไทม์การปล่อยรุ่น จากการรวมถึงการปล่อยรุ่น คือ 9 วัน โดยเปอร์เซ็นไทล์ที่ 85 คือ 21 วัน ค่ามัธยฐานของช่องว่างระหว่างการติดตั้งใช้งานกับการปล่อยรุ่นคือ 6 วัน ค่ามัธยฐานขนาดชุดงานของการปล่อยรุ่นคือ 3 การเปลี่ยนแปลง และเปอร์เซ็นไทล์ที่ 85 คือ 14 ความครอบคลุมของแฟลกสำหรับการเปลี่ยนแปลงที่ผู้ใช้เห็นได้คือ 58 เปอร์เซ็นต์ และมีแฟลกการปล่อยรุ่น 17 รายการที่เกิน 30 วันหลังปล่อยครบ
ความเสี่ยงของการบิดเบือนมองเห็นได้แล้ว การติดตั้งใช้งานบางส่วนเป็นการกำหนดค่าอย่างเดียว และไปป์ไลน์นับแต่ละอย่างเป็นการติดตั้งใช้งาน ดังนั้นแดชบอร์ดจึงแสดงชุดข้อมูลการกำหนดค่าแยกต่างหาก และการทบทวนรายเดือนสุ่มตัวอย่างการติดตั้งใช้งาน 10 ครั้งเพื่อหาการเปลี่ยนแปลงที่ผู้ใช้เห็นได้ ผู้จัดการระดับภูมิภาคเห็นจำนวนการติดตั้งใช้งานและขอให้ทีมเพิ่มให้ตรงกับตัวเลขของทีมอื่น หัวหน้าทีมต่อต้านเป้าหมายนั้นและนำตัวเลขทั้งชุดมาที่การทบทวนรายเดือนแทน การทบทวนพบว่าช่องว่างยาวเพราะการปล่อยรุ่นรอการบรรยายสรุปด้านการตลาดและฝ่ายสนับสนุนรายสัปดาห์ ว่า 4 จาก 17 แฟลกที่ล้าสมัยปกป้องเส้นทางโค้ดที่ไม่มีใครทดสอบ และว่าเปอร์เซ็นไทล์ที่ 85 ของขนาดชุดงานมาจากการปล่อยรุ่นไม่กี่ครั้งที่รวมการเปลี่ยนแปลงที่ไม่เกี่ยวข้องก่อนช่วงหยุดห้ามเปลี่ยนแปลงในวันหยุด
การตัดสินใจที่บันทึกในบันทึกการตัดสินใจมีสี่ส่วน ฝ่ายสนับสนุนและการตลาดจะเข้าร่วมการบรรยายสรุปที่สั้นลงสัปดาห์ละสองครั้ง เพื่อให้การตัดสินใจปล่อยรุ่นไม่ต้องรอช่วงรายสัปดาห์ ทุกแฟลกการปล่อยรุ่นมีเจ้าของและวันถอด และแฟลกที่ล้าสมัยที่ไม่ได้ทดสอบสี่รายการถูกถอดภายในสองสัปดาห์ถัดไป การปล่อยรุ่นที่รวมการเปลี่ยนแปลงที่ไม่เกี่ยวข้องต้องระบุเหตุผลในบันทึกการปล่อยรุ่น และทีมปฏิเสธเป้าหมายการติดตั้งใช้งานทั่วไป โดยเสนอมุมมองร่วมของการแจกแจงลีดไทม์การปล่อยรุ่นและความเป็นระเบียบของแฟลกของแต่ละบริการแทน ผู้จัดการการเปลี่ยนแปลงตกลงถือการเปลี่ยนแปลงที่มีแฟลกและผ่านการตรวจสอบของไปป์ไลน์เป็นการเปลี่ยนแปลงมาตรฐาน โดยมีการทบทวนในไตรมาสหน้า ในไตรมาสถัดมา (ตัวเลขเพื่อประกอบภาพ) ค่ามัธยฐานลีดไทม์การปล่อยรุ่นลดเหลือ 5 วัน จำนวนแฟลกล้าสมัยลดเหลือ 6 และอัตราการเปลี่ยนแปลงที่ล้มเหลวคงที่ การทดลองจึงดำเนินต่อไป
มุมมองตามประเภทองค์กร
สตาร์ตอัป สตาร์ตอัปมักมีบริการเดียวและไลบรารีแฟลกในโค้ด จึงแยกการติดตั้งใช้งานออกจากการปล่อยรุ่นได้ในราคาถูก เก็บทะเบียนแฟลกอย่างง่ายพร้อมวันหมดอายุ และรอให้มีปริมาณพอก่อนเชื่อถือเปอร์เซ็นไทล์
ธุรกิจขนาดเล็ก ธุรกิจขนาดเล็กอาจใช้ซอฟต์แวร์สำเร็จรูปหรือที่ซื้อมาซึ่งซัพพลายเออร์ควบคุมการปล่อยรุ่น ตัวชี้วัดที่มีประโยชน์คือเวลาระหว่างการปล่อยรุ่นของซัพพลายเออร์กับการที่ธุรกิจนำมาใช้ และชุดการเปลี่ยนแปลงที่มาพร้อมกันในเวอร์ชันหลัก บันทึกวันปล่อยรุ่นของซัพพลายเออร์และวันติดตั้งใช้งานของตนเอง เพื่อให้เห็นการรอระหว่างทั้งสอง
องค์กรขนาดใหญ่ องค์กรขนาดใหญ่เผชิญหลายบริการที่มีรูปแบบการปล่อยรุ่นต่างกัน กระบวนการเปลี่ยนแปลงส่วนกลาง และสภาพแวดล้อมร่วม งานหลักคือการตกลงนิยามของการติดตั้งใช้งานและการปล่อยรุ่นข้ามทีมและซัพพลายเออร์ และรักษาการรวมยอดที่เคารพความแตกต่าง ใช้การกระจายและแนวโน้มเพื่อการกำกับดูแล และถือแพลตฟอร์มแฟลกเป็นบริการร่วมที่มีเจ้าของ
หน่วยงานภาครัฐและภาคสาธารณะ การปล่อยรุ่นมักผูกกับวันที่ตายตัว กฎหมาย รอบการจัดซื้อจัดจ้าง หรือประตูการประกันคุณภาพ ความถี่ในการปล่อยรุ่นจึงอาจต่ำด้วยเหตุผลที่ดี ความถี่ในการติดตั้งใช้งานและช่องว่างระหว่างการติดตั้งใช้งานกับการปล่อยรุ่นยังแสดงได้ว่าความเสี่ยงถูกรับไว้ก่อนเท่าใดและรอวันที่เท่าใด รายงานการรอประตูภายนอกแยกจากเวลาไปป์ไลน์ของทีมเอง
กรณีทางธุรกิจ: แรงจูงใจ ROI และ TCO
แรงจูงใจของตัวชี้วัดเหล่านี้คือลดความเสี่ยงและความล่าช้าระหว่างการทำการเปลี่ยนแปลงให้เสร็จกับการส่งมอบคุณค่าของมัน ชุดงานใหญ่ที่ปล่อยไม่บ่อยแบกการเปลี่ยนแปลงต่อเหตุการณ์มากกว่า ดังนั้นความล้มเหลวจึงวินิจฉัยยากกว่าและย้อนกลับยากกว่า การแยกการติดตั้งใช้งานออกจากการปล่อยรุ่นให้ทีมมีวิธีรับความเสี่ยงทางเทคนิคแต่เนิ่น ๆ และในปริมาณน้อย และรับความเสี่ยงต่อผู้ใช้อย่างจงใจ ตัวชี้วัดแสดงว่าการแยกเป็นของจริงหรือไม่ และการเปลี่ยนแปลงรออยู่ที่ใด
ต้นทุนอยู่ในระดับปานกลาง การเก็บเหตุการณ์การติดตั้งใช้งานและการปล่อยรุ่นต้องมีบันทึกไปป์ไลน์และบันทึกการตรวจสอบแฟลกเชื่อมกับการควบคุมเวอร์ชันและตัวติดตามประเด็น ซึ่งเป็นการเชื่อมต่อครั้งเดียวตามด้วยการดูแลเป็นครั้งคราว (ดูหัวข้อ 1.5 “แหล่งข้อมูลและการติดตั้งเครื่องมือวัด”) แนวปฏิบัติแฟลกเองมีต้นทุนดำเนินการ ได้แก่ แพลตฟอร์มหรือไลบรารี ทะเบียน การทดสอบทั้งสองเส้นทางของการเปลี่ยนแปลงที่มีแฟลก และการเคลียร์แฟลกที่หมดอายุ ต้นทุนแฝงหลักคือหนี้แฟลก ซึ่งจำนวนแฟลกที่ล้าสมัยทำให้มองเห็นได้
ผลตอบแทนเป็นไปตามรูปแบบที่ทีมส่วนใหญ่สังเกตได้ในข้อมูลของตนเอง ลีดไทม์การปล่อยรุ่นที่สั้นลงหมายถึงวงจรข้อมูลป้อนกลับที่เร็วขึ้นว่าการเปลี่ยนแปลงช่วยผู้ใช้หรือไม่ ชุดงานที่เล็กลงหมายถึงการวินิจฉัยที่ง่ายขึ้นและการย้อนกลับที่ง่ายขึ้น ช่องว่างระหว่างการติดตั้งใช้งานกับการปล่อยรุ่นที่สั้นลงหมายถึงเวลาที่งานเสร็จนั่งอยู่โดยไม่เกิดผลน้อยลง อย่าสร้างตัวเลขของคุณค่าขึ้นเอง ใช้ตัวอย่างของทีมเองของการเปลี่ยนแปลงที่ค้างมืดหลายสัปดาห์และแนวโน้มของตัวชี้วัดของตนเอง
รูปแบบที่ไม่ควรทำและข้อควรระวัง
- ตั้งเป้าหมายความถี่ในการติดตั้งใช้งานให้ทุกทีม เชิญชวนให้แยกและเปลี่ยนป้าย ตั้งเป้าหมายผลลัพธ์ เช่น การแจกแจงลีดไทม์ที่แคบลง และให้ความถี่ตามมา
- ถือขบวนปล่อยรุ่นเป็นหลักฐานของความสามารถ ปฏิทินตายตัวให้จำนวนที่คงที่และซ่อนอายุของงานที่รออยู่ ติดตามอายุของการเปลี่ยนแปลงที่รวมแล้วเก่าที่สุดที่ผู้ใช้เข้าถึงไม่ได้
- นับการเปลี่ยนแปลงการกำหนดค่าเป็นการติดตั้งใช้งานในชุดข้อมูลหลัก ทำให้ตัวเลขพอง เก็บชุดข้อมูลแยกต่างหากและแสดงข้างชุดหลัก
- ไม่เคยถอดแฟลก โค้ดสะสมแขนงตายและการรวมกันที่ไม่ได้ทดสอบ ให้ทุกแฟลกการปล่อยรุ่นมีเจ้าของและวันถอด และถือการถอดเป็นส่วนหนึ่งของความเสร็จ
- เปลี่ยนแฟลกในระบบจริงโดยไม่มีบันทึก การเปลี่ยนแฟลกคือการเปลี่ยนพฤติกรรมของระบบจริง ส่งไปที่บันทึกการตรวจสอบและทำให้การสนับสนุนการเปลี่ยนแปลงมองเห็นได้
แบบจำลองวุฒิภาวะ
| มิติ | 1 เริ่มต้น | 2 พัฒนา | 3 ทำให้เป็นมาตรฐาน | 4 บริหารจัดการ | 5 ประสานจัดการ |
|---|---|---|---|---|---|
| นิยามและนาฬิกา | “การติดตั้งใช้งาน” และ “การปล่อยรุ่น” ใช้แทนกัน แต่ละคนนับต่างกัน | ไม่กี่ทีมเขียนนิยามของตนเอง | นิยามที่เขียนไว้หนึ่งชุดของการติดตั้งใช้งานและการปล่อยรุ่น พร้อมนาฬิกาและข้อยกเว้น ในทะเบียนตัวชี้วัด | บันทึกการเปลี่ยนนิยามและทำเครื่องหมายบนแผนภูมิ ตรวจตัวอย่างทุกไตรมาส | ปรับนิยามร่วมกับซัพพลายเออร์และผู้กำกับดูแลเมื่อไม่ให้ข้อมูลต่อการตัดสินใจอีกต่อไป |
| การแยกการติดตั้งใช้งานออกจากการปล่อยรุ่น | ทุกการติดตั้งใช้งานเป็นการปล่อยรุ่น | บางทีมใช้แฟลกหรือการทยอยปล่อยเป็นขั้นสำหรับการเปลี่ยนแปลงเสี่ยง | แฟลกและการทยอยปล่อยเป็นขั้นเป็นตัวเลือกมาตรฐาน พร้อมบันทึกเหตุการณ์การปล่อยรุ่น | ติดตามแนวโน้มและทบทวนช่องว่าง ขนาดชุดงาน และขั้นของการทยอยปล่อย | ประสานเวลาปล่อยรุ่นข้ามทีมและซัพพลายเออร์สำหรับบริการที่เกี่ยวข้อง |
| การจับข้อมูล | รวบรวมจำนวนด้วยมือจากตั๋วและแชต | ข้อมูลไปป์ไลน์สำหรับบางบริการ บันทึกการปล่อยรุ่นด้วยมือ | จับการติดตั้งใช้งาน การปล่อยรุ่น และการเปลี่ยนแฟลกโดยอัตโนมัติสำหรับบริการส่วนใหญ่ | วัดและติดตามแนวโน้มคุณภาพข้อมูล (อัตราการเชื่อมโยง ตรวจสอบตัวอย่าง) | แบ่งปันเหตุการณ์ข้ามทีมและซัพพลายเออร์ผ่านอินเทอร์เฟซที่ตกลงกัน |
| ความเป็นระเบียบของแฟลก | ไม่มีสินค้าคงคลัง | รายการไม่เป็นทางการในบางทีม | ทะเบียนที่มีเจ้าของ ประเภท และวันหมดอายุสำหรับทุกแฟลกการปล่อยรุ่น | ติดตามแนวโน้มจำนวนแฟลกล้าสมัย การถอดเป็นส่วนหนึ่งของความเสร็จและมีการตรวจ | จัดการแพลตฟอร์มแฟลกเป็นบริการร่วมพร้อมการเตือนหมดอายุอัตโนมัติ |
| การใช้ตัวเลข | รายงานขึ้นไปเป็นจำนวนเดียว | ทีมดูแผนภูมิของตนเองเป็นครั้งคราว | ทีมเจ้าของทบทวนทุกเดือนควบคู่กับตัวเลขความล้มเหลวและการทำซ้ำ | แนวโน้มป้อนการปรับปรุงที่ได้รับทุนพร้อมมาตรการป้องกัน | การกระจายและแนวโน้มให้ข้อมูลต่อการลงทุนในแพลตฟอร์มและนโยบายการเปลี่ยนแปลงทั่วองค์กร |
รายการตรวจสอบ
- “การติดตั้งใช้งาน” และ “การปล่อยรุ่น” นิยามเป็นลายลักษณ์อักษร พร้อมเหตุการณ์นาฬิกาและข้อยกเว้นของแต่ละอย่าง
- จับการติดตั้งใช้งานระบบจริงโดยอัตโนมัติจากไปป์ไลน์ โดยไม่รวมสภาพแวดล้อมทดสอบ
- จับเหตุการณ์การปล่อยรุ่นจากบันทึกการตรวจสอบแฟลก ขั้นของการทยอยปล่อย หรือบันทึกการปล่อยรุ่น
- ลีดไทม์การปล่อยรุ่นใช้จุดเริ่มนาฬิกาที่ระบุและรายงานค่ามัธยฐานและเปอร์เซ็นไทล์ที่ 85
- รายงานช่องว่างระหว่างการติดตั้งใช้งานกับการปล่อยรุ่นและขนาดชุดงานของการปล่อยรุ่นควบคู่กับความถี่
- การติดตั้งใช้งานที่เป็นการกำหนดค่าอย่างเดียวปรากฏในชุดข้อมูลแยกต่างหาก
- ทุกแฟลกการปล่อยรุ่นมีเจ้าของ ประเภท และวันหมดอายุในทะเบียน
- ทบทวนแฟลกที่ล้าสมัยทุกเดือนและการถอดเป็นส่วนหนึ่งของความเสร็จ
- รหัสการปล่อยรุ่นปรากฏบนบันทึกเหตุขัดข้องและการเปลี่ยนแปลง
- ตรวจสอบตัวอย่างการติดตั้งใช้งานและการปล่อยรุ่นทุกไตรมาสเทียบกับนิยาม
- การทดลองปรับปรุงหนึ่งอย่างที่ผูกกับการรอนานที่สุดกำลังดำเนินอยู่พร้อมวันทบทวน
พรอมต์ AI
ร่างนิยามการติดตั้งใช้งานและการปล่อยรุ่นสำหรับบริการ
ฉันกำลังนิยามตัวชี้วัดการปล่อยรุ่นและการติดตั้งใช้งานสำหรับ [ชื่อบริการ]
เครื่องมือของเราคือ [โฮสต์การควบคุมเวอร์ชัน ระบบ CI/CD บริการแฟลก ตัวติดตาม
ประเด็น เครื่องมือ ITSM] รูปแบบการปล่อยรุ่นของเราคือ [ต่อเนื่อง ขบวนรายสัปดาห์
รายเดือน ผ่านการตรวจของสโตร์ หรืออื่น ๆ] สำหรับความถี่ในการติดตั้งใช้งาน
ความถี่ในการปล่อยรุ่น ลีดไทม์การปล่อยรุ่น ช่องว่างระหว่างการติดตั้งใช้งานกับ
การปล่อยรุ่น ขนาดชุดงานของการปล่อยรุ่น ความครอบคลุมของฟีเจอร์แฟลก และจำนวน
แฟลกที่ล้าสมัย ร่างนิยามที่ระบุว่านาฬิกาเริ่มและหยุดที่ใด สิ่งที่นับและไม่รวม
แหล่งข้อมูล และข้อกำกวมหนึ่งข้อที่ต้องแก้ อย่าสร้างค่าเปรียบเทียบขึ้นเอง หรืออ้างว่า
แนวปฏิบัติของเราตรงกับระดับประสิทธิภาพใดที่เผยแพร่ ระบุข้อสมมติของคุณและ
คำถามที่ฉันควรตอบเพื่อทำนิยามให้เสร็จ
ตรวจชุดตัวชี้วัดการปล่อยรุ่นเพื่อหาความเสี่ยงของการบิดเบือน
นี่คือวิธีที่เราคำนวณและรายงานตัวชี้วัดการปล่อยรุ่นและการติดตั้งใช้งาน:
[คำอธิบายของแต่ละตัวชี้วัด แหล่งข้อมูล และวิธีรายงาน] ผู้ชมคือ [ทีม ผู้นำ หรือ
องค์กรกำกับดูแล] และเป้าหมาย หากมี คือ [เป้าหมายหรือไม่มี] สำหรับแต่ละตัวชี้วัด
ระบุวิธีที่เป็นไปได้ที่ตัวเลขอาจถูกทำให้พอง ซ่อน หรือบิดเบือนโดยไม่มีการปรับปรุง
จริง และเสนอตัวชี้วัดหรือแนวปฏิบัติป้องกันที่จับคู่กันที่จะจับได้ อย่าสร้างสถิติ
ขึ้นเอง ระบุข้อสมมติของคุณและข้อมูลที่คุณต้องการเพื่อให้แม่นยำขึ้น
วิเคราะห์ข้อมูลส่งออกของการติดตั้งใช้งาน การปล่อยรุ่น และแฟลก
ฉันจะวางข้อมูลส่งออกขนาดเล็กที่มีฟิลด์เหล่านี้: [รายการฟิลด์ เช่น รหัสการ
ติดตั้งใช้งาน เวลาติดตั้งใช้งาน ผลลัพธ์ รหัสการเปลี่ยนแปลง ชื่อแฟลก เวลาเปิดแฟลก
สัดส่วนการเข้าถึง เวลาปล่อยรุ่น] ครอบคลุมการติดตั้งใช้งาน [จำนวน] ครั้งและ
แฟลก [จำนวน] รายการสำหรับ [ชื่อบริการ] ระหว่าง [วันที่เริ่มต้น] ถึง [วันที่สิ้นสุด]
คำนวณค่ามัธยฐานและเปอร์เซ็นไทล์ที่ 85 ของลีดไทม์การปล่อยรุ่นและของช่องว่าง
ระหว่างการติดตั้งใช้งานกับการปล่อยรุ่น การแจกแจงขนาดชุดงาน และรายการแฟลกที่
เกิน [ขีดจำกัดอายุ] วันหลังปล่อยครบ โดยแสดงจำนวนเบื้องหลังแต่ละค่า ทำเครื่องหมาย
บันทึกที่ขาดการเชื่อมโยงหรือมีตราเวลาน่าสงสัย อย่าคาดการณ์เกินข้อมูลหรือเปรียบเทียบ
ผลกับค่าเปรียบเทียบภายนอก ระบุข้อสมมติของคุณและปัญหาคุณภาพข้อมูลที่จำกัดข้อสรุป
วางแผนการทดลองเคลียร์แฟลกและลดการรอปล่อยรุ่น
การรอปล่อยรุ่นที่นานที่สุดของเราคือ [คำอธิบายของการรอ พร้อมช่วงวันที่และจำนวน]
และทะเบียนแฟลกของเรามีแฟลกการปล่อยรุ่น [จำนวน] รายการ ซึ่ง [จำนวน] รายการเกิน
วันหมดอายุ ข้อจำกัดคือ [ข้อจำกัด เช่น การปล่อยรุ่นที่ถูกกำกับดูแล การตรวจของสโตร์
สภาพแวดล้อมทดสอบร่วม] เสนอการทดลองเล็ก ๆ สามอย่างยาวสี่ถึงหกสัปดาห์ แต่ละอย่าง
มีสมมติฐาน วิธีสังเกตผล ตัวชี้วัดป้องกัน และความเสี่ยง อย่าสร้างตัวเลขการปรับปรุงที่
คาดหวังขึ้นเอง ระบุข้อสมมติของคุณและสิ่งที่เราควรตรวจก่อนเริ่ม
ทักษะ AI
- ทักษะ Agile ITIL Metrics: ใช้เพื่อค้นหาหัวข้อการเปลี่ยนแปลง การปล่อยรุ่น และเหตุขัดข้องที่เกี่ยวข้อง และมาตรการป้องกันที่ควรอยู่ข้างตัวชี้วัดการปล่อยรุ่นแต่ละตัว
- ทักษะผู้ดูแล Agile ITIL Metrics: ใช้เพื่อตรวจสอบว่าฉบับแก้ไขของหัวข้อนี้ยังคงนาฬิกาจับเวลา ช่องทางการบิดเบือน และการอ้างอิงข้ามหัวข้อให้สอดคล้องกัน
ข้อสรุปสำคัญ
- การติดตั้งใช้งานนำเวอร์ชันไปไว้ในสภาพแวดล้อม และการปล่อยรุ่นทำให้ผู้ใช้เข้าถึงการเปลี่ยนแปลงได้ วัดทั้งสองแยกกันทุกที่ที่ทำได้
- ลีดไทม์การปล่อยรุ่นควรจบที่การปล่อยรุ่น โดยมีจุดเริ่มที่ระบุ และรายงานเป็นค่ามัธยฐานและเปอร์เซ็นไทล์ที่ 85
- ช่องว่างระหว่างการติดตั้งใช้งานกับการปล่อยรุ่นและขนาดชุดงานแสดงว่าการแยกเป็นของจริง และปกป้องความถี่จากการแยกและการเปลี่ยนป้าย
- ฟีเจอร์แฟลกทำให้การแยกเป็นไปได้และมีต้นทุน จึงควรติดตามความครอบคลุมและแฟลกที่ล้าสมัยพร้อมเจ้าของและวันหมดอายุ
- นับตามกฎที่เขียนไว้ เชื่อมโยงการปล่อยรุ่นกับเหตุขัดข้องและการเปลี่ยนแปลง และเปรียบเทียบบริการกับประวัติของตนเองแทนทีมอื่น
เอกสารอ้างอิงและแหล่งอ่านเพิ่มเติม
- Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
- Humble, J., and Farley, D., Continuous Delivery: Reliable Software Releases through Build, Test, and Deployment Automation, Addison-Wesley, 2010.
- DORA, DORA's software delivery performance metrics, Google Cloud, https://dora.dev/guides/dora-metrics/
- Hodgson, P., "Feature Toggles (aka Feature Flags)," martinfowler.com, 2017, https://martinfowler.com/articles/feature-toggles.html
- Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
- Wikipedia, Software deployment.
- Wikipedia, Release management.
- Wikipedia, Feature toggle.
- Wikipedia, Canary release.
- Wikipedia, Blue-green deployment.
- Wikipedia, Continuous delivery.
- Wikipedia, Goodhart's law.