DORA मेट्रिक्स
DORA मेट्रिक्स वर्णन करती हैं कि टीम के सॉफ़्टवेयर बदलाव उत्पादन तक कितनी जल्दी और कितनी सुरक्षित रूप से पहुँचते हैं, इसलिए गति के मापों और स्थिरता के मापों को साथ पढ़ें, उन्हें पाइपलाइन और घटना घटनाओं से गणना करें, और डिलीवरी प्रणाली के बारे में बातचीत शुरू करने के लिए उपयोग करें, टीमों या लोगों को रैंक करने के लिए कभी नहीं।
सारांश और प्रेरणा
DORA मेट्रिक्स DevOps रिसर्च एंड असेसमेंट (DORA) के शोध कार्यक्रम से आती हैं, इस बारे में लंबे समय से चलता अध्ययन कि सॉफ़्टवेयर डिलीवरी अभ्यास टीम और संगठन के परिणामों से कैसे संबंधित हैं। निकोल फ़ोर्सग्रेन, जेज़ हम्बल और जीन किम ने 2018 में पुस्तक Accelerate में शुरुआती निष्कर्ष प्रस्तुत किए, और कार्यक्रम Google Cloud के अंतर्गत वार्षिक रिपोर्ट के साथ जारी है। शोध ने पूछा कि डिलीवरी के कौन-से मापने योग्य पहलू अच्छे परिणामों की भविष्यवाणी करते हैं, और सॉफ़्टवेयर डिलीवरी प्रदर्शन के उस छोटे माप समूह पर पहुँचा जो डिलीवरी पाइपलाइन और घटना रिकॉर्ड से गणना हो सकते हैं।
अक्टूबर 2026 तक, DORA वेबसाइट पाँच सॉफ़्टवेयर डिलीवरी प्रदर्शन मेट्रिक्स का वर्णन करती है, जो दो समूहों में बँटी हैं। तीन थ्रूपुट का वर्णन करती हैं, यानी बदलाव कितनी तेज़ी से चलते हैं: बदलाव लीड टाइम, तैनाती आवृत्ति, और विफल तैनाती की बहाली का समय। दो अस्थिरता का वर्णन करती हैं, यानी रिलीज़ कितनी बार परेशानी पैदा करती है: बदलाव विफलता दर और तैनाती पुनर्कार्य दर। पहले के प्रकाशन चार मेट्रिक्स का वर्णन करते थे, विफल तैनाती की बहाली के समय की जगह "सेवा बहाली का समय" के साथ और पुनर्कार्य दर के बिना। परिभाषाएँ वर्षों में परिष्कृत हुई हैं, इसलिए हमेशा बताएँ कि आप मार्गदर्शन का कौन-सा संस्करण अपना रहे हैं और आपने उसे आखिरी बार कब जाँचा।
जिस शोध निष्कर्ष ने इन मेट्रिक्स को प्रसिद्ध बनाया वह यह है कि टीमों में गति और स्थिरता साथ-साथ चलती हैं। जिन टीमों ने अक्सर तैनाती की और जिनके लीड टाइम छोटे थे वे औसतन इसकी कीमत अधिक विफलताओं से नहीं चुका रही थीं। यह पुरानी मान्यता को पलट देता है कि तेज़ जाने का अर्थ अधिक तोड़ना है। यह सर्वेक्षण और पाइपलाइन डेटा में एक पैटर्न है, नियम नहीं, और यह उन टीमों के लिए सही है जिन्होंने सतत डिलीवरी, छोटे बैच, स्वचालित परीक्षण और तेज़ प्रतिक्रिया जैसे अभ्यासों में निवेश किया है। मेट्रिक्स उन अंतर्निहित क्षमताओं के संकेत हैं। वे स्वयं क्षमताएँ नहीं हैं।
नीचे के शब्द इस विषय में दोहराए जाते हैं।
- तैनाती सॉफ़्टवेयर का कोई संस्करण दिए गए परिवेश में डालने की क्रिया है। जब तक अन्यथा न कहा जाए, यह विषय उत्पादन का अर्थ लेता है।
- बदलाव सॉफ़्टवेयर में संशोधनों का समूह है, आमतौर पर एक या अधिक कमिट जो साथ शिप होते हैं। ITIL 4 में शब्द का व्यापक अर्थ है, किसी भी जोड़, संशोधन या हटावट को कवर करना जो सेवाओं को प्रभावित कर सकता है, और जो ITIL अभ्यास उसे शासित करता है वह परिवर्तन सक्षमीकरण है।
- विफल तैनाती वह तैनाती है जो उत्पादन में सेवा को कमज़ोर करती है या आउटेज पैदा करती है और जिसे उपचार चाहिए, जैसे हॉटफ़िक्स, रोलबैक या पैच। आपकी टीम सटीक नियम लिखती है, क्योंकि शोध उसे स्थानीय परिभाषा पर छोड़ता है।
- रोलबैक उत्पादन को पिछले ज्ञात अच्छे संस्करण पर लौटाने की क्रिया है।
- पर्सेंटाइल वह मान है जिसके नीचे देखे गए मानों का बताया हिस्सा गिरता है। लीड टाइम का 85वाँ पर्सेंटाइल वह संख्या है जिसे 85 प्रतिशत बदलाव हराते हैं।
एजाइल और ITIL के दृष्टिकोण इस ज़मीन पर मिलते हैं। एजाइल टीम इन संख्याओं को अपने इंजीनियरिंग अभ्यास और कार्य समझौतों पर प्रतिक्रिया के रूप में देखती है। ITIL अभ्यासकर्ता उन्हें परिवर्तन सक्षमीकरण, रिलीज़ प्रबंधन, तैनाती प्रबंधन और घटना प्रबंधन के परिणाम प्रमाण के रूप में देखता है। तनाव आमतौर पर नियंत्रण के बारे में है। पारंपरिक बदलाव अनुमोदन बोर्ड शिप होने से पहले हर बदलाव का निरीक्षण करके विफलता घटाने की कोशिश करता है। DORA शोध ने पाया कि भारी बाहरी अनुमोदन बेहतर स्थिरता से जुड़ा नहीं था, और सहकर्मी समीक्षा, स्वचालित परीक्षण और छोटे बदलाव जुड़े थे। ITIL 4 में, परिवर्तन सक्षमीकरण मानक, सामान्य और आपातकालीन बदलावों को अलग करके और कम जोखिम वाले बदलावों को पूर्व-अधिकृत होने देकर इसकी गुंजाइश रखता है (देखें विषय 4.3, परिवर्तन सक्षमीकरण मेट्रिक्स)।
मेट्रिक्स की सीमाएँ भी हैं जो शोध स्वयं बताता है, और इस विषय की व्यावहारिक सलाह उन पर बनती है। वे एक अनुप्रयोग या सेवा की डिलीवरी प्रणाली का वर्णन करती हैं, वे सुधार की बातचीत के लिए हैं, और वे इस बारे में कुछ नहीं कहतीं कि भेजा जा रहा काम मूल्यवान है या नहीं। टीम गलत चीज़ भेजते हुए उत्कृष्ट संख्याएँ दिखा सकती है। इसलिए यह विषय प्रवाह मापों (देखें विषय 2.1, प्रवाह माप), सेवा विश्वसनीयता मापों (देखें विषय 5.2, SLI, SLO और त्रुटि बजट) और परिणाम मापों (देखें विषय 1.3, आउटपुट से ऊपर परिणाम: क्या मापें, यह चुनना) के बगल में बैठता है, ऊपर नहीं।
अंत में, मेट्रिक्स नेतृत्व डैशबोर्ड पर आते ही गुडहार्ट के नियम को न्योता देती हैं। तैनाती आवृत्ति सबसे आसानी से फुलाई जा सकती है और विफल तैनाती की गिनतियाँ सबसे आसानी से छिपाई जा सकती हैं। इसलिए नीचे की हर सिफ़ारिश माप को इस जाँच से जोड़ती है कि उसे कैसे मोड़ा जा सकता है (देखें विषय 1.2, गुडहार्ट का नियम और मेट्रिक्स का मनोविज्ञान)।
मुख्य सिद्धांत
- घटनाओं से गणना करें, स्मृति से नहीं। तैनातियाँ पाइपलाइन से, विफलताएँ और बहालियाँ घटना रिकॉर्ड से, और लीड टाइम पाइपलाइन से जुड़े संस्करण नियंत्रण से आते हैं (देखें विषय 1.5, डेटा स्रोत और इंस्ट्रूमेंटेशन)।
- गति और स्थिरता को एक तस्वीर की तरह पढ़ें। बढ़ती विफलताओं वाली तेज़ टीम, या तिमाही में शिप करने वाली स्थिर टीम, आपको कुछ बता रही है जो अकेला कोई आधा हिस्सा नहीं दिखाता।
- सेवा या अनुप्रयोग को मापें, व्यक्ति को नहीं। विश्लेषण की इकाई डिलीवरी प्रणाली है। व्यक्ति अकेले तैनाती नहीं करते, और उन्हें रैंक करना डेटा को नष्ट करता है।
- टीम की तुलना उसके अपने अतीत से करें, दूसरी टीम से नहीं। भुगतान सेवा, डेटा प्लेटफ़ॉर्म और मोबाइल ऐप के बीच संदर्भ तेज़ी से भिन्न है, और शोध स्वयं मेट्रिक्स को लीग तालिका के रूप में उपयोग करने के विरुद्ध चेताता है।
- समयों के लिए वितरण उपयोग करें। लीड टाइम और बहाली का समय लंबी पूँछ वाले हैं, इसलिए माध्यिका और ऊँचा पर्सेंटाइल रिपोर्ट करें (देखें विषय 1.6, सेवा मेट्रिक्स के लिए सांख्यिकीय साक्षरता)।
- मेट्रिक्स को लक्षण मानें। जब कोई संख्या हिले, तो कारण उसके नीचे की क्षमताओं में खोजें, जैसे बैच आकार, परीक्षण स्वचालन, समीक्षा अभ्यास और आर्किटेक्चर, फिर प्रयोग चलाएँ।
- परिभाषाएँ लिखें। विफलता, तैनाती और "काम की शुरुआत" विवेक के निर्णय हैं। चुनाव दर्ज करें और उसे स्थिर रखें ताकि प्रवृत्ति का अर्थ हो।
मेट्रिक परिभाषाएँ
नीचे की पाँच मेट्रिक्स अक्टूबर 2026 तक के DORA मार्गदर्शन का अनुसरण करती हैं। सूत्र वे घड़ियाँ और अपवाद बताते हैं जो आपकी टीम को लिख लेने चाहिए। जहाँ शोध सीमा खुली छोड़ता है, तालिका उचित डिफ़ॉल्ट दिखाती है और सिफ़ारिशें चुनाव समझाती हैं।
| मेट्रिक | परिभाषा | सूत्र | इकाई | डेटा स्रोत | ITIL अभ्यास | एजाइल समकक्ष | आवृत्ति |
|---|---|---|---|---|---|---|---|
| बदलाव लीड टाइम | प्रतिबद्ध बदलाव को उत्पादन तक पहुँचने में लगा समय | घड़ी बदलाव के पहले कमिट पर (या मुख्य ब्रांच में उसके मर्ज पर, यदि परिभाषा में बताया हो) शुरू होती है और उत्पादन में तैनाती सफलतापूर्वक पूरी होने पर रुकती है; अवधि में तैनात बदलावों की माध्यिका और 85वाँ पर्सेंटाइल रिपोर्ट करें; कभी तैनात न हुए बदलाव बाहर और प्रगति में कार्य के रूप में अलग रिपोर्ट | घंटे या दिन | तैनाती पाइपलाइन से जुड़ा संस्करण नियंत्रण | तैनाती प्रबंधन; रिलीज़ प्रबंधन; परिवर्तन सक्षमीकरण | साइकल टाइम; उत्पादन तक लीड टाइम | साप्ताहिक या प्रति रिलीज़, मासिक समीक्षित |
| तैनाती आवृत्ति | टीम उत्पादन में कितनी बार तैनात करती है | अवधि में अनुप्रयोग की सफल उत्पादन तैनातियों की गिनती / अवधि के दिन; विफल या रोलबैक की गई तैनातियाँ सफल गिनती से बाहर; परीक्षण परिवेश की तैनातियाँ बाहर | प्रति दिन या प्रति सप्ताह तैनातियाँ | तैनाती पाइपलाइन घटना लॉग | तैनाती प्रबंधन; रिलीज़ प्रबंधन | सतत डिलीवरी; हर वृद्धि के अंत में रिलीज़ | साप्ताहिक |
| विफल तैनाती की बहाली का समय | जब तैनाती उत्पादन विफलता पैदा करे तो बहाली में कितना समय लगता है | घड़ी तब शुरू होती है जब विफलता पता चलती या रिपोर्ट होती है (हर बार वही नियम) और तब रुकती है जब उपयोगकर्ताओं के लिए सेवा बहाल हो; अवधि की विफल तैनातियों के लिए माध्यिका और 85वाँ पर्सेंटाइल रिपोर्ट करें; तैनाती से न हुई घटनाएँ बाहर | मिनट या घंटे | तैनाती घटनाओं और निगरानी अलर्ट से जुड़ा घटना रिकॉर्ड | घटना प्रबंधन; सेवा निरंतरता प्रबंधन | बहाली का समय; पुनर्स्थापन कार्य | प्रति विफलता, मासिक समीक्षित |
| बदलाव विफलता दर | उत्पादन तैनातियों का हिस्सा जो उपचार माँगने वाली विफलता पैदा करती हैं | जिन तैनातियों को हॉटफ़िक्स, रोलबैक, पैच या घटना प्रतिक्रिया चाहिए / अवधि की सभी उत्पादन तैनातियाँ; विफलता को उसकी तैनाती से जोड़ने का नियम लिखा हुआ और हर बार एक ही तरह लागू | प्रतिशत | घटनाओं, रोलबैक और हॉटफ़िक्स तैनातियों से जुड़ी तैनाती घटनाएँ | परिवर्तन सक्षमीकरण; घटना प्रबंधन | पूर्णता की परिभाषा; बच निकली खामियाँ | मासिक |
| तैनाती पुनर्कार्य दर | उत्पादन तैनातियों का हिस्सा जो अनियोजित थीं और उपयोगकर्ता-दृश्य समस्या ठीक करने के लिए की गईं | उत्पादन समस्या के जवाब में की गई अनियोजित तैनातियाँ / अवधि की सभी उत्पादन तैनातियाँ; जिन नियोजित तैनातियों में संयोग से सुधार शामिल है वे बाहर; "अनियोजित" का नियम लिखा हुआ | प्रतिशत | तैनाती के कारण से टैग पाइपलाइन लॉग, घटना या खामी रिकॉर्डों से जुड़ा | परिवर्तन सक्षमीकरण; समस्या प्रबंधन | अनियोजित कार्य; योजना के बाहर जारी खामी सुधार | मासिक |
तालिका पर दो नोट। पहला, बदलाव विफलता दर और तैनाती पुनर्कार्य दर एक-दूसरे पर ढँकती हैं पर एक ही चीज़ नहीं हैं: जिस विफलता को टीम नोटिस करती है और बिना किसी नई तैनाती के रोलबैक करती है वह बदलाव विफलता दर में गिनी जाती है पर पुनर्कार्य दर में नहीं, जबकि टीम की निर्धारित नियोजित सुधार किसी में नहीं गिना जाता। दूसरा, शोध तैनाती को इकाई मानता है और प्रति अनुप्रयोग गिनता है, इसलिए पचास सेवाओं वाले प्लेटफ़ॉर्म की पचास संख्या-समूह हैं, एक नहीं।
सिफ़ारिशें
परिभाषाओं और घड़ियों से शुरू करें
1. किसी मेट्रिक को चार्ट करने से पहले उसकी एक-पृष्ठ की परिभाषा लिखें। बताएँ कि तैनाती क्या गिनी जाती है, कौन-सा परिवेश उत्पादन है, लीड टाइम की घड़ी कहाँ शुरू होती है, और विफलता को तैनाती से कैसे जोड़ा जाता है। पृष्ठ को मेट्रिक रजिस्टर में रखें (देखें विषय 1.4, मेट्रिक्स शासन और स्वामित्व)। जो परिभाषा केवल किसी के दिमाग में रहती है वह उपकरण या टीम बदलने पर पहली बार भटक जाएगी।
2. लीड टाइम का आरंभ चुनें और उसी पर टिके रहें। सबसे आम चुनाव हैं बदलाव का पहला कमिट, मुख्य ब्रांच में मर्ज, और टिकट बनना। पहला कमिट डिलीवरी प्रणाली को मापता है और बैकलॉग में काम के बैठे रहने का समय अनदेखा करता है। टिकट आरंभ ग्राहक की अधिक प्रतीक्षा मापता है पर प्राथमिकता निर्धारण को मिला देता है (देखें विषय 2.2, लीड टाइम, साइकल टाइम और प्रवाह दक्षता)। एक का सुसंगत उपयोग करें और हर चार्ट में बताएँ कि कौन-सा।
3. विफलताओं को बताए नियम से आरोपित करें। विफलता तैनाती की तब है जब, उदाहरण के लिए, तैनाती के बाद बताई खिड़की के भीतर घटना खुलती है और उसका कारण विश्लेषण उस बदलाव की ओर इशारा करता है, या जब रोलबैक या हॉटफ़िक्स उससे टैग हो। ऐसा नियम चुनें जिसे लोग बिना बहस के लागू कर सकें, हर तिमाही मामलों के नमूने की समीक्षा करें, और नियम को इतना लंबा स्थिर रखें कि प्रवृत्ति दिखे।
पाइपलाइन से इंस्ट्रूमेंट करें
4. तैनाती घटनाएँ पाइपलाइन से लें, स्प्रेडशीट से नहीं। CI/CD प्रणाली जो हर उत्पादन तैनाती को टाइमस्टैम्प, संस्करण और परिणाम के साथ दर्ज करती है, बिना मानवीय प्रविष्टि के तैनाती आवृत्ति और लीड टाइम घड़ी का अंत देती है। हाथ से दर्ज की गिनतियाँ देर से और असंगत हैं, और वे विषय 1.5, डेटा स्रोत और इंस्ट्रूमेंटेशन में वर्णित पिछली-तारीख़ समस्याओं को न्योता देती हैं। DORA टीम की ओपन-सोर्स Four Keys परियोजना इन घटनाओं को इकट्ठा करने का एक हल किया उदाहरण है, हालाँकि आपकी अपनी कोई भी समकक्ष पाइपलाइन चलेगी।
5. घटना रिकॉर्ड को तैनातियों से जोड़ें। विफलता और बहाली माप के लिए दो स्रोत चाहिए: तैनाती लॉग और घटना उपकरण। घटना रिकॉर्ड में "तैनाती से हुई" के लिए एक फ़ील्ड और तैनाती पहचानकर्ता जोड़ें, जो समाधान के दौरान भरा जाए और घटना-पश्चात समीक्षा में जाँचा जाए (देखें विषय 4.2, पोस्टमॉर्टम और सीखने के मेट्रिक्स)। जोड़ के बिना बदलाव विफलता दर अंदाज़ा बन जाती है।
6. हर तैनाती का कारण टैग करें। पुनर्कार्य दर को नियोजित तैनातियों को अनियोजित सुधारों से अलग करना चाहिए। पाइपलाइन रन पर सरल लेबल, जैसे "नियोजित बदलाव" या "उत्पादन समस्या का सुधार", पर्याप्त है। लेबल सूची छोटी रखें, ताकि लोगों को दबाव में सोचना न पड़े।
संख्याएँ ईमानदारी से रिपोर्ट करें
7. वितरण और गिनतियाँ रिपोर्ट करें, एकल औसत नहीं। लीड टाइम और बहाली के समय के लिए माध्यिका और 85वाँ पर्सेंटाइल दिखाएँ, हर एक के पीछे अवलोकनों की संख्या के साथ। दो तैनातियों और एक विफलता वाले सप्ताह में 50 प्रतिशत बदलाव विफलता दर होती है जिसका बहुत कम अर्थ है, इसलिए प्रतिशत के बगल में गिनतियाँ दिखाएँ और दरों के लिए लंबी खिड़की पसंद करें (देखें विषय 1.6, सेवा मेट्रिक्स के लिए सांख्यिकीय साक्षरता)।
8. थ्रूपुट और अस्थिरता के समूह साथ-साथ दिखाएँ। तीन थ्रूपुट मेट्रिक्स और दो अस्थिरता मेट्रिक्स एक दृश्य में रखें, प्रति सेवा, कम से कम एक तिमाही के रुझान के साथ। विफलता मापों को बगल में रखे बिना तैनाती आवृत्ति कभी प्रकाशित न करें। यदि कोई नेता एक संख्या माँगे, तो समझाएँ कि एकल DORA स्कोर नहीं है, और इसकी जगह दो-समूह दृश्य दें।
9. तुलनाएँ टीम के अपने इतिहास के भीतर रखें। जो टीम अपना माध्यिका लीड टाइम नौ दिन से पाँच तक ले जाती है उसने कुछ सीखा। उसे भिन्न आर्किटेक्चर, नियामक भार या रिलीज़ ट्रेन वाली दूसरी टीम के विरुद्ध रैंक करना बहुत कम सिद्ध करता है, और दोनों टीमों को अपनी संख्याएँ बचाना सिखाता है। जब शासन के लिए रोल-अप करना पड़े, तो सेवाओं में फैलाव और सुधार का रुझान दिखाएँ, लीग तालिका नहीं (देखें विषय 1.2, गुडहार्ट का नियम और मेट्रिक्स का मनोविज्ञान)।
उस प्रणाली को सुधारें जिसका संख्याएँ वर्णन करती हैं
10. पहले बैच आकार घटाएँ। छोटे बदलाव लीड टाइम छोटा करते हैं, विफलताओं का निदान आसान बनाते हैं, और रोलबैक की लागत घटाते हैं। तकनीकों में फ़ीचर टॉगल, ट्रंक-आधारित काम, और काम को इस तरह बाँटना शामिल है कि हर वृद्धि अकेले शिप हो सके (देखें विषय 2.7, पुल रिक्वेस्ट और कोड रिव्यू मेट्रिक्स)। लीड टाइम के बगल में बदलावों का माध्यिका आकार ट्रैक करें ताकि आप देख सकें कि बैच सचमुच सिकुड़ रहा है या नहीं।
11. तेज़ पहचान और तेज़ उलटाव में निवेश करें। बहाली का समय तब गिरता है जब टीम विफलता मिनटों में देख सकती है, और जब वह नए बिल्ड के बिना बदलाव को रोलबैक या बंद कर सकती है। कैनरी रिलीज़, फ़ीचर टॉगल और स्वचालित रोलबैक हर एक विफलता और बहाली के बीच का अंतराल छोटा करता है। तैनाती से पहचान तक का समय अलग मापें, क्योंकि धीमी पहचान बहाली के समय की संख्या के भीतर छिपती है (देखें विषय 3.3, घटना प्रतिक्रिया और समाधान समय)।
12. संख्याओं का उपयोग सुधारने के लिए क्षमता चुनने में करें। एक कमज़ोर मेट्रिक चुनें, पूछें कि वह कमज़ोर क्यों है, और शोध की क्षमता सूची से ऐसा अभ्यास चुनें जो कारण को संबोधित करे, जैसे परीक्षण स्वचालन, ढीले-जुड़े आर्किटेक्चर या हल्का बदलाव अनुमोदन। बदलाव को एक तिमाही चलाएँ और रुझान देखें। प्रयोग को रेट्रोस्पेक्टिव विषय से जोड़ें ताकि टीम सुधार की स्वामी हो (देखें विषय 9.5, सतत सुधार मेट्रिक्स)।
हेरफेर के तरीके और रेलिंग
| मेट्रिक | हेरफेर कैसे होता है | जोड़ी गई रेलिंग मेट्रिक या अभ्यास |
|---|---|---|
| बदलाव लीड टाइम | घड़ी की शुरुआत देर से करना, जैसे पहले कमिट की जगह मर्ज से शुरू करना; लंबी उम्र की ब्रांच में जल्दी मर्ज करना; कठिन बदलावों को "कोड नहीं" कहकर बाहर करना; माध्यिका नीचे खींचने के लिए तुच्छ बदलाव पाइपलाइन से भेजना | प्रगति में कार्य का पर्सेंटाइल और आयु; घड़ी का स्थिर लिखित आरंभ; हर तिमाही सबसे धीमे 10 प्रतिशत बदलावों का नमूना; बदलाव आकार वितरण |
| तैनाती आवृत्ति | एक बदलाव को कई तुच्छ तैनातियों में बाँटना; अपरिवर्तित बिल्ड फिर तैनात करना; स्टेजिंग की तैनातियाँ या खाली विन्यास बदलाव गिनना | प्रति तैनाती बदलाव का आकार; उपयोगकर्ता-दृश्य बदलाव वाली तैनातियों का हिस्सा; बगल में बदलाव विफलता दर और पुनर्कार्य दर |
| विफल तैनाती की बहाली का समय | घड़ी देर से शुरू करना या घटनाएँ जल्दी बंद करना; आंशिक सुधार के बाद विफलता को नई घटना के रूप में पुनर्वर्गीकृत करना; "विफलता" की गंभीरता सीमा बढ़ाना | बताई खिड़की के भीतर उसी घटना की पुनरावृत्ति; निगरानी अलर्ट से लिया घड़ी का आरंभ; ग्राहक-रिपोर्टेड प्रभाव की अवधि |
| बदलाव विफलता दर | घटनाओं को तैनातियों से न जोड़ना; केवल उन विफलताओं को गिनना जो पूरा आउटेज करें; खिड़की चौड़ी करना ताकि विफलताएँ उसके बाहर गिरें; आगे की ओर ठीक करके उसे नया बदलाव कहना | हर तिमाही तैनाती लॉग के विरुद्ध घटनाओं के नमूने की समीक्षा; तैनाती कड़ी दर्ज वाली घटनाओं का अनुपात ट्रैक करें; तैनाती पुनर्कार्य दर |
| तैनाती पुनर्कार्य दर | सुधारों को नियोजित कार्य के रूप में लेबल करना; सुधार को निर्धारित रिलीज़ में बाँधना; सुधार टालकर सुधार-तैनातियों से बचना | ट्रैकर से खामी और बच निकली खामी की गिनती; खुली उत्पादन खामियों की आयु; तैनातियों के नमूने पर टैग ऑडिट |
स्वस्थ पठन ऐसा दिखाता है कि लीड टाइम और बहाली का समय सिकुड़ रहे हैं या कम स्तर पर स्थिर हैं, तैनाती आवृत्ति छोटे बदलावों के साथ स्थिर या बढ़ रही है, और विफलता तथा पुनर्कार्य दरें सपाट या गिर रही हैं, इतनी बड़ी गिनतियों के साथ जिन पर भरोसा किया जा सके। संदिग्ध पठनों में काम में बिना बदलाव के तैनाती आवृत्ति में अचानक उछाल, एक महीने में शून्य तक गिरती विफलता दर, और ग्राहक शिकायतें वही रहने पर गिरता बहाली का समय शामिल हैं। हर एक जश्न से पहले उपकरण पर नज़र माँगता है।
समझौते: लाभ और हानि
| दृष्टिकोण | ताकत | कमज़ोरी |
|---|---|---|
| प्रति सेवा सभी पाँच DORA मेट्रिक्स उपयोग करें | शोध-आधारित, गति को स्थिरता से संतुलित करती है, वस्तुनिष्ठ घटनाओं से गणना | ऐसी पाइपलाइन और घटना रिकॉर्ड चाहिए जो साफ़ जुड़ें; इस बारे में चुप कि काम मूल्यवान था या नहीं |
| केवल तैनाती आवृत्ति और लीड टाइम रिपोर्ट करें | पाइपलाइन से इकट्ठा करना आसान | केवल गति को पुरस्कृत करती है और ठीक उसी हेरफेर को न्योता देती है जिसे स्थिरता माप पकड़ते हैं |
| प्रति टीम स्थानीय परिभाषाएँ उपयोग करें | टीम के आर्किटेक्चर और रिलीज़ शैली के अनुकूल | टीमों की तुलना नहीं हो सकती, और रोल-अप अविश्वसनीय हैं |
| एक संगठन-व्यापी परिभाषा उपयोग करें | सुसंगत रिपोर्टिंग; सरल शासन | कुछ प्रणालियों में बुरी तरह जमती है, जैसे बैच खिड़कियों वाले मेनफ़्रेम या विनियमित रिलीज़ |
| टीमों की तुलना प्रकाशित प्रदर्शन बैंडों से करें | नेताओं को स्थिति का त्वरित बोध देता है | संदर्भ की अनदेखी करता है, और शोध चेताता है कि बैंड हर टीम के लिए लक्ष्य नहीं हैं |
| मेट्रिक्स का उपयोग टीम के आत्म-सुधार के लिए करें | स्वामित्व बनाता है; ईमानदार डेटा का समर्थन | उन नेताओं को कम सुकून देता है जो एकल स्कोर चाहते हैं |
केंद्रीय तनाव तुलनीयता और ईमानदारी के बीच है। संख्या का जितना अधिक टीमों को आँकने में उपयोग होता है, डेटा उतना अधिक मुड़ता है, और जो टीम उसकी स्वामी है उसकी वह उतनी कम मदद करता है। मेट्रिक्स का पहले सुधार का समर्थन करने के लिए उपयोग करें, अपूर्ण तुलनीयता स्वीकार करें, और नेतृत्व-स्तर के दृश्य रुझान और फैलाव तक रखें। जहाँ विनियमित रिपोर्टिंग को मानक परिभाषा चाहिए, उसे प्रलेखित करें और टीम-स्तर के सुधार दृश्य को अलग रखें।
अपनी टीम के साथ चर्चा के प्रश्न
1. हमारे पाँच DORA आँकड़ों में से कौन-से घटनाओं से आते हैं, और कौन-से किसी की स्मृति से? हर मेट्रिक को उसके स्रोत तक ट्रेस करें। नोट करें कहाँ व्यक्ति तारीख टाइप करता है या तय करता है कि कुछ विफलता गिना जाए या नहीं। सुगमकर्ता को समूह को हाथ के चरणों को इस आधार पर क्रमित करने में मदद करनी चाहिए कि वे संख्या को कितना विकृत कर सकते हैं, और सहमत हों कि पहले किसे स्वचालित करें।
2. हमारी लीड टाइम घड़ी ठीक कहाँ शुरू और बंद होती है, और क्या सब सहमत हैं? तीन लोगों से पिछले शिप हुए बदलाव के लिए घड़ी का आरंभ और अंत बताने को कहें। उत्तरों की तुलना करें। अंतर आमतौर पर पहले कमिट, मर्ज, टिकट और अनुमोदन चरण के आसपास दिखते हैं। एक परिभाषा पर सहमत हों और लिख लें, और चर्चा करें कि चुनी परिभाषा कौन-सा प्रतीक्षा समय छिपाती है।
3. हमारे लिए विफल तैनाती क्या गिनी जाती है, और यह कौन तय करता है? पिछली पाँच उत्पादन घटनाओं से गुज़रें और पूछें कि क्या हर एक किसी तैनाती की है। असहमतियाँ दिखाती हैं कि नियम कहाँ अस्पष्ट है। चर्चा करें कि विन्यास बदलाव, रोलबैक या त्वरित पैच से ठीक की गई विफलता का क्या होता है, और तय करें कि हर एक कैसे दर्ज हो।
4. यदि अगली तिमाही तैनाती आवृत्ति दोगुनी हो जाए, तो उसे अच्छी खबर कहने से पहले हम क्या जाँचेंगे? समूह को वे तरीके बताने को आमंत्रित करें जिनसे संख्या अधिक मूल्य दिए बिना बढ़ सकती है। बदलाव का आकार, उपयोगकर्ता-दृश्य बदलाव वाली तैनातियों का हिस्सा, और विफलता तथा पुनर्कार्य दरें देखें। सुगमकर्ता को नोट करना चाहिए कि कौन-सी जाँचें पहले से डैशबोर्ड पर हैं और कौन-सी जोड़नी हैं।
5. टीम के बाहर के लोग इन संख्याओं का उपयोग कैसे करते हैं? पूछें कि इन्हें कौन देखता है, किस रूप में, और उनके साथ क्या करता है। अन्य टीमों से तुलना, बाहर से तय किए लक्ष्य, और व्यक्तिगत समीक्षाओं में उपयोग पर कान दें। चर्चा करें कि टीम को अपने डेटा पर भरोसा करने से पहले उस उपयोग में क्या बदलता देखना होगा, और बदलाव करने का अधिकार किसे है।
6. कौन-सी एक क्षमता हमारी सबसे कमज़ोर संख्या को सबसे अधिक सुधारेगी, और आज़माने का छोटा प्रयोग क्या है? सबसे कमज़ोर मेट्रिक चुनें और उसके संभावित कारणों पर बात करें, जैसे बड़े बैच, धीमी समीक्षा, अस्थिर परीक्षण या हाथ का रिलीज़ चरण। एक कारण चुनें और प्रभाव देखने के तरीके के साथ चार से छह सप्ताह का प्रयोग डिज़ाइन करें। परिणाम की समीक्षा की तारीख पर और डेटा कौन लाएगा, इस पर सहमत हों।
चार दृष्टिकोण
उत्पाद और डिलीवरी टीमें
डिलीवरी टीमें उन क्षमताओं की स्वामी हैं जो इन संख्याओं को चलाती हैं: छोटे बदलाव, स्वचालित परीक्षण, तेज़ पाइपलाइन, और एक-दूसरे के काम की समीक्षा की आदत। उन्हें मेट्रिक्स को अपने इंजीनियरिंग अभ्यास के दर्पण के रूप में उपयोग करना चाहिए, अपने सुधार लक्ष्य स्वयं तय करने चाहिए, और एकल संख्या ऊपर रिपोर्ट करने के दबाव का विरोध करना चाहिए। परिभाषाएँ भी वही तय करती हैं, इसलिए उन्हें ईमानदार रखने का कर्तव्य उन पर है (देखें विषय 2.7, पुल रिक्वेस्ट और कोड रिव्यू मेट्रिक्स)।
सेवा और संचालन टीमें
संचालन टीमें वह घटना रिकॉर्ड रखती हैं जिस पर विफलता और बहाली माप निर्भर हैं। वे घटनाओं को उस तैनाती से टैग करके जिसने उन्हें पैदा किया, विफलताओं को जल्दी पहचानने वाली निगरानी देकर, और हर विफल तैनाती की समीक्षा में शामिल होकर डिलीवरी टीम की मदद करती हैं। उन्हें देखना चाहिए कि डिलीवरी की गति ऐसी अस्थिरता नहीं खरीद रही जिसे वे ऑन-कॉल भार के रूप में सोखती हैं (देखें विषय 5.7, टॉइल और ऑन-कॉल मेट्रिक्स), और रोलबैक और पहचान के उन निवेशों की माँग करनी चाहिए जो बहाली का समय घटाते हैं।
नेतृत्व और शासन
नेताओं को सेवाओं में रुझान और फैलाव, दोनों समूहों की मेट्रिक्स साथ, और उनके पीछे के सुधार प्रयोग माँगने चाहिए। उन्हें "रोज़ तैनात करो" जैसे लक्ष्यों से बचना चाहिए जो संख्या को बाँध देते हैं, और व्यक्तिगत समीक्षाओं में मेट्रिक्स का उपयोग करने से बचना चाहिए। शासन निकाय संख्याओं का उपयोग इस प्रमाण के रूप में कर सकते हैं कि हल्का बदलाव अनुमोदन रास्ता सुरक्षित है, या उस पर पुनर्विचार का कारण, यह दिखाकर कि प्रक्रिया बदलने के साथ स्थिरता स्थिर रही या नहीं (देखें विषय 4.4, परिवर्तन विफलता और पुनर्कार्य)।
ग्राहक और उपयोगकर्ता
ग्राहकों को शायद ही तैनाती की गिनती की परवाह होती है। वे परवाह करते हैं कि सुधार या सुविधा उन तक कितनी जल्दी पहुँचती है, रिलीज़ कितनी कम बार उनकी निर्भर किसी चीज़ को तोड़ती है, और जब ऐसा होता है तो सेवा कितनी तेज़ी से लौटती है। DORA मेट्रिक्स का उपयोग इन परिणामों के संभावित होने के आंतरिक प्रमाण के रूप में करें, और उन्हें उपलब्धता और संतुष्टि जैसे ग्राहक-दृश्य मापों से पूरा करें (देखें विषय 5.3, उपलब्धता मेट्रिक्स, और विषय 6.1, ग्राहक संतुष्टि मेट्रिक्स)।
व्यवहार में: एक एजाइल ITIL उदाहरण
एक मध्यम आकार की ऑनलाइन रिटेलर चेकआउट सेवा चलाती है जिसकी स्वामी एक उत्पाद टीम है, जिसे प्लेटफ़ॉर्म टीम और सेवा डेस्क का समर्थन है। नीचे की सभी संख्याएँ उदाहरणार्थ संख्याएँ हैं।
टीम सप्ताह में लगभग दो बार उत्पादन में तैनात करती रही है, जिसका लीड टाइम (पहले कमिट से उत्पादन तक) माध्यिका 11 दिन और 85वाँ पर्सेंटाइल 26 दिन है। पिछली तिमाही में 24 में से 6 तैनातियों (25 प्रतिशत, उदाहरणार्थ) के बाद रोलबैक या घटना हुई। उन विफलताओं के लिए माध्यिका बहाली का समय 3 घंटे था। बदलाव अनुमोदन बोर्ड साप्ताहिक मिलता है और चेकआउट सेवा के हर बदलाव की समीक्षा करता है।
टीम एक योजना प्रस्तावित करती है। वह बड़े बदलाव बाँटेगी, पाइपलाइन में स्वचालित जाँचें जोड़ेगी, नए व्यवहार को फ़ीचर टॉगल के पीछे रखेगी, और बोर्ड से कहेगी कि जाँचें पास करने वाले कम जोखिम वाले बदलावों को मानक बदलावों के रूप में पूर्व-अधिकृत करे। बदलाव प्रबंधक सतर्क है, इसलिए टीम सहमत होती है कि सभी पाँच मेट्रिक्स मासिक रिपोर्ट करेगी और यदि विफलता दर लगातार दो महीने बढ़े तो प्रयोग रोक देगी।
एक तिमाही बाद संख्याएँ (उदाहरणार्थ) हैं प्रति माह 19 तैनातियाँ, माध्यिका लीड टाइम 3 दिन और 85वाँ पर्सेंटाइल 8 दिन, बदलाव विफलता दर 8 प्रतिशत, माध्यिका बहाली का समय 40 मिनट, और पुनर्कार्य दर 5 प्रतिशत। टीम प्रसन्न है, और एक क्षेत्रीय प्रबंधक चेकआउट टीम की तैनाती आवृत्ति की अन्य उत्पाद टीमों से तुलना करने और साझा लक्ष्य तय करने को कहता है।
टीम लीड समीक्षा में पुनर्कार्य और विफलता का विभाजन लाती है और हेरफेर का जोखिम नोटिस करती है। तैनाती आवृत्ति को कई छोटी विन्यास तैनातियों से मदद मिली है जिन्हें पाइपलाइन गिनती है, और माध्यिका बदलाव आकार वास्तविक काम से तेज़ सिकुड़ रहा है। इससे भी बुरा, पिछले महीने दो घटनाएँ विन्यास बदलाव से ठीक हुईं जिसे पाइपलाइन ने "नियोजित" टैग वाली सामान्य तैनाती के रूप में लॉग किया, इसलिए पुनर्कार्य दर कम आँकी गई थी। बदलाव विफलता दर आंशिक रूप से इसलिए अच्छी दिखी कि वे दो घटनाएँ अपनी मूल तैनातियों से जुड़ी नहीं थीं।
निर्णय लॉग में दर्ज निर्णय के चार हिस्से हैं। केवल-विन्यास तैनातियाँ अलग गिनी जाती हैं और मुख्य संख्या के बगल में दिखाई जाती हैं। तैनाती कारण टैग का हर महीने 10 तैनातियों के नमूने पर ऑडिट होता है। घटना उपकरण अब बदलाव कारण होने पर तैनाती पहचानकर्ता अनिवार्य करता है। और टीम साझा तैनाती आवृत्ति लक्ष्य अस्वीकार करती है, इसकी जगह ऐसा साझा दृश्य प्रस्तावित करती है जो हर सेवा का रुझान और उसकी विफलता दर दिखाए। बदलाव प्रबंधक मानक बदलावों के लिए पूर्व-अधिकार रखने पर सहमत होता है, अगली तिमाही के अंत पर समीक्षा के साथ।
क्षेत्र के अनुसार दृष्टि
स्टार्टअप। छोटी टीम अक्सर दिन में कई बार तैनात करती है और उसके घटना रिकॉर्ड पतले हैं, इसलिए तैनाती आवृत्ति और लीड टाइम आसान हैं पर विफलता डेटा कच्चा है। हर रोलबैक और हॉटफ़िक्स को पाइपलाइन में टैग करके और तैनाती पहचानकर्ता के साथ सरल घटना लॉग रखकर शुरू करें। ऊँची आवृत्ति को आपको विश्वास न दिलाने दें कि विफलता दर जाँचे बिना स्थिरता ठीक है।
छोटा व्यवसाय। होस्टेड प्लेटफ़ॉर्म या आउटसोर्स डेवलपर कम उपकरणों के साथ केवल मासिक तैनात कर सकता है। कुछ महीने जो गिन सकें हाथ से गिनें, आपूर्तिकर्ता से तैनाती और घटना तारीखें लिखित में माँगें, और लीड टाइम और विफलता दर पर ध्यान दें। संख्याओं का उपयोग यह तय करने के लिए करें कि क्या निरंतर डिलीवर किए छोटे बदलाव जोखिम घटाएँगे, किसी बैंड का पीछा करने के लिए नहीं।
उद्यम। कई टीमें, कई रिलीज़ शैलियाँ, और आधुनिक व पुरानी प्रणालियों का मिश्रण सुसंगत परिभाषाएँ कठिन बनाता है। हर मेट्रिक की साझा न्यूनतम परिभाषा पर सहमत हों, उसे प्रकाशित करें, और टीम को बताए कारण के साथ कड़ी स्थानीय परिभाषाएँ जोड़ने दें। औसत की बजाय प्रति सेवा फैलाव और रुझान दिखाकर रोल-अप करें, और टीम-स्तर का विवरण केवल स्वामी टीम और उसके सहायक समूहों को दृश्य रखें।
सरकार और सार्वजनिक क्षेत्र। रिलीज़ खिड़कियाँ, ऑडिट नियम और खरीद अनुबंध तय करते हैं कि क्या संभव है, और कुछ प्रणालियाँ आपूर्तिकर्ता चलाते हैं। अनुबंधों में डिलीवरी और घटना डेटा अधिकार शामिल करें ताकि मेट्रिक्स गणना हो सकें। संख्याओं का उपयोग इस प्रमाण के रूप में करें कि आधुनिकीकरण कार्यक्रम विफलता दरें बढ़ाए बिना लीड टाइम घटा रहा है, और सभी मेट्रिक्स साथ रिपोर्ट करें ताकि नतीजे चुने न जाएँ (देखें विषय 8.5, विनियमित और सरकारी रिपोर्टिंग)।
व्यावसायिक औचित्य: प्रेरणाएँ, ROI और TCO
प्रेरणा विचार और उसके उपयोग के बीच का समय छोटा करना है जबकि उत्पादन को स्थिर रखना। कार्यक्रम की लागत के तीन हिस्से हैं: इंस्ट्रूमेंटेशन (पाइपलाइन घटनाएँ, तैनाती टैग, और घटना जोड़), समीक्षा दिनचर्या (रुझानों पर मासिक नज़र और विफलता व पुनर्कार्य मामलों का तिमाही नमूना), और वह सुधार कार्य जिसकी ओर संख्याएँ इशारा करती हैं, जैसे परीक्षण स्वचालन या तेज़ पाइपलाइन। पहले दो मामूली हैं। तीसरा वह जगह है जहाँ असली खर्च है, और वह इंजीनियरिंग क्षमता पर खर्च होता है, मापन पर नहीं।
प्रतिफल उन निर्णयों से आता है जिन्हें संख्याएँ आसान बनाती हैं। टीम बदलाव बोर्ड को दिखा सकती है कि छोटे बदलाव सुरक्षित हैं, और इसलिए अनुमोदन चरण हटा सकती है। प्लेटफ़ॉर्म समूह देख सकता है कि किन सेवाओं में धीमी पाइपलाइन या खराब रोलबैक है और उसी के अनुसार निवेश लगा सकता है। संचालन टीम बेहतर पहचान उपकरण के लिए डेटा से तर्क दे सकती है। प्रतिफल का वर्णन उन पैटर्नों से करें जिन्हें आप स्वयं देख सकते हैं, जैसे कमिट से उत्पादन तक का समय, रिलीज़ों का वह हिस्सा जिन्हें सुधार चाहिए, और प्रति रिलीज़ ऑन-कॉल भार, बदलाव से पहले और बाद। अन्य संगठनों के बेंचमार्क आँकड़े अपेक्षित प्रतिफल के रूप में उद्धृत करने से बचें, क्योंकि आपका संदर्भ भिन्न होगा। स्वामित्व की कुल लागत पर लोगों का समय हावी है, इसलिए मेट्रिक समूह छोटा रखें और उसका संग्रह स्वचालित करें (देखें विषय 7.7, निवेश पर प्रतिफल और व्यावसायिक औचित्य)।
प्रति-पैटर्न और जाल
- मेट्रिक्स को व्यक्तियों के लिए प्रदर्शन स्कोरकार्ड मानना। यह शोध के आधार को तोड़ता है और डेटा बिगाड़ता है। केवल सेवा और टीम स्तर पर रिपोर्ट करें।
- "रोज़ तैनात करो" या "एक दिन से कम लीड टाइम" जैसे लक्ष्य तय करना। लक्ष्य उद्देश्य की जगह ले लेता है। सुधार की दिशा और प्रयोग तय करें, और संख्या को संकेत के रूप में रखें।
- टीमों को एक-दूसरे या प्रकाशित बैंडों के विरुद्ध रैंक करना। संदर्भ भिन्न है और हेरफेर पीछे आता है। टीम की तुलना उसके अपने रुझान से करें, और बैंडों को केवल ढीले मार्गदर्शन के रूप में उपयोग करें।
- स्थिरता के बिना गति रिपोर्ट करना। जोड़ी ही मुद्दा है। थ्रूपुट और अस्थिरता समूह हमेशा साथ दिखाएँ।
- परिभाषाओं को भटकने देना। विफलता, तैनाती और लीड टाइम का आरंभ उपकरण के साथ चुपचाप बदलते हैं। परिभाषा के हर बदलाव को उसके कारण के साथ लॉग करें, और चार्ट पर चिह्नित करें।
- किसी भी चीज़ की तैनाती गिनना। विन्यास पुश, परीक्षण परिवेश की रिलीज़ और उसी बिल्ड की पुनःतैनाती गिनती फुलाते हैं। उत्पादन तैनाती परिभाषित करें, और अन्य प्रकार अलग दिखाएँ।
- जो भेजा जा रहा है उसकी अनदेखी। मज़बूत संख्याएँ ऐसा काम छिपा सकती हैं जो मायने नहीं रखता। उन्हें प्रवाह और परिणाम मापों के बगल में पढ़ें (देखें विषय 2.9, परिचालन कार्य और अनियोजित कार्य)।
- क्षमता की जगह मेट्रिक का पीछा करना। लीड टाइम सबसे भरोसे से तब गिरता है जब बैच सिकुड़ते हैं और परीक्षण तेज़ होते हैं। अभ्यास सुधारें और संख्या को पीछे आने दें।
परिपक्वता मॉडल
| आयाम | 1 आरंभ | 2 विकास | 3 मानकीकरण | 4 प्रबंधन | 5 समन्वय |
|---|---|---|---|---|---|
| परिभाषाएँ और घड़ियाँ | हर व्यक्ति तैनाती और विफलता को अलग परिभाषित करता है | कुछ टीमें अपनी परिभाषाएँ प्रलेखित करती हैं | मेट्रिक रजिस्टर में घड़ियों और अपवादों सहित हर मेट्रिक की एक लिखित परिभाषा | परिभाषा बदलाव लॉग और चार्टों पर चिह्नित; हर तिमाही नमूने जाँचे जाते हैं | निर्णयों को जानकारी देना बंद करने पर आपूर्तिकर्ताओं और शासन के साथ मिलकर परिभाषाएँ संशोधित |
| डेटा संग्रह | टिकटों से हाथ से जुटाई गिनतियाँ | कुछ सेवाओं के लिए पाइपलाइन डेटा; घटनाएँ हाथ से जुड़ी | अधिकांश सेवाओं के लिए तैनातियाँ, कारण और घटना कड़ियाँ स्वचालित रूप से पकड़ी जाती हैं | डेटा गुणवत्ता (कड़ी दर, टैग ऑडिट) मापी और रुझान में देखी जाती है | सहमत इंटरफ़ेस के ज़रिए टीमों और आपूर्तिकर्ताओं के बीच घटनाएँ साझा |
| संख्याओं का उपयोग | एकल स्कोर के रूप में ऊपर रिपोर्ट | टीमें कभी-कभी अपने चार्ट देखती हैं | थ्रूपुट और अस्थिरता समूहों की स्वामी टीम द्वारा मासिक साथ समीक्षा | रुझान रेलिंग के साथ वित्त पोषित सुधार प्रयोगों को खिलाते हैं | फैलाव और रुझान संगठन में प्लेटफ़ॉर्म निवेश और बदलाव नीति को जानकारी देते हैं |
| हेरफेर के विरुद्ध रेलिंग | कोई नहीं | अनौपचारिक जागरूकता | हर मेट्रिक के लिए जोड़ी गई रेलिंग सूचीबद्ध | रेलिंग और नमूनों की समीक्षा, हेरफेर के मामले दर्ज | टीमों और उपकरणों के बदलने के साथ रेलिंग लगातार ट्यून |
चेकलिस्ट
- पाँचों मेट्रिक्स घड़ियों, अपवादों, और अपनाए DORA मार्गदर्शन की तारीख और संस्करण सहित लिखित रूप में परिभाषित हैं।
- उत्पादन तैनातियाँ पाइपलाइन द्वारा टाइमस्टैम्प, संस्करण और परिणाम के साथ दर्ज होती हैं।
- लीड टाइम का आरंभ (पहला कमिट, मर्ज या अन्य) बताया गया है और सुसंगत रूप से लागू है।
- घटनाओं में उस तैनाती के लिए फ़ील्ड है जिसने उन्हें पैदा किया, जो समाधान के दौरान भरा जाता है।
- हर तैनाती पर कारण टैग है, और नमूने का हर महीने ऑडिट होता है।
- समय गिनतियों सहित माध्यिका और ऊँचे पर्सेंटाइल के रूप में रिपोर्ट होते हैं।
- थ्रूपुट और अस्थिरता मेट्रिक्स हर सेवा के लिए साथ दिखाई जाती हैं।
- तैनाती आवृत्ति और लीड टाइम के बगल में बदलाव का आकार ट्रैक होता है।
- संख्याएँ व्यक्तिगत समीक्षाओं में या टीमों को रैंक करने के लिए उपयोग नहीं होतीं।
- एक नामित स्वामी हर महीने मेट्रिक्स की समीक्षा करता है और परिभाषा के किसी भी बदलाव को लॉग करता है।
- सबसे कमज़ोर मेट्रिक से जुड़ा एक सुधार प्रयोग समीक्षा तिथि के साथ चल रहा है।
AI प्रॉम्प्ट
पाँचों मेट्रिक्स के लिए एक-पृष्ठ की परिभाषा-समूह लिखें।
मैं [सेवा या अनुप्रयोग का नाम] के लिए DORA सॉफ़्टवेयर डिलीवरी मेट्रिक्स परिभाषित कर रहा/रही
हूँ। हमारे उपकरण हैं [संस्करण नियंत्रण होस्ट, CI/CD प्रणाली, घटना उपकरण, ITSM उपकरण]। हमारी
रिलीज़ शैली [निरंतर, साप्ताहिक, मासिक, या अन्य] है। बदलाव लीड टाइम, तैनाती आवृत्ति, विफल
तैनाती की बहाली का समय, बदलाव विफलता दर, और तैनाती पुनर्कार्य दर के लिए परिभाषा का मसौदा
बनाएँ, जिसमें घड़ी कहाँ शुरू और बंद होती है, क्या गिना और क्या बाहर रखा जाता है, डेटा स्रोत, और
अस्पष्टता का एक जोखिम हो। बेंचमार्क मान न गढ़ें और यह दावा न करें कि हमारा अभ्यास किसी
प्रकाशित प्रदर्शन बैंड से मेल खाता है। अपनी मान्यताएँ और परिभाषाएँ पूरी करने के लिए मुझे किन
प्रश्नों के उत्तर देने चाहिए, सूचीबद्ध करें।
मेट्रिक समूह में हेरफेर के जोखिमों की जाँच करें।
यहाँ हमारी वर्तमान डिलीवरी मेट्रिक्स की गणना का तरीका है: [हर मेट्रिक, उसके डेटा स्रोत,
और वह कैसे रिपोर्ट होती है का वर्णन]। दर्शक हैं [टीम, नेतृत्व, या शासन निकाय]। हर मेट्रिक के
लिए ऐसे संभावित तरीके सूचीबद्ध करें जिनसे संख्या वास्तविक सुधार के बिना फुलाई, छिपाई या
विकृत की जा सकती है, और जोड़ी गई रेलिंग मेट्रिक या अभ्यास सुझाएँ जो उसे पकड़े। आँकड़े न
गढ़ें। अपनी मान्यताएँ और अधिक सटीक होने के लिए आपको जो जानकारी चाहिए, सूचीबद्ध करें।
तैनातियों और घटनाओं के डेटा निर्यात का विश्लेषण करें।
मैं [संख्या] उत्पादन तैनातियों और [संख्या] घटनाओं का छोटा निर्यात चिपकाऊँगा/चिपकाऊँगी, इन फ़ील्डों
के साथ: [फ़ील्ड सूची, उदाहरण के लिए तैनाती id, टाइमस्टैम्प, परिणाम, कारण टैग, घटना id, खुलने
का समय, समाधान समय, तैनाती कड़ी]। बहाली के समय की माध्यिका और 85वाँ पर्सेंटाइल, बदलाव
विफलता दर, और पुनर्कार्य दर गणना करें, हर एक के पीछे की गिनतियाँ दिखाकर। छूटी कड़ियों या
संदिग्ध टाइमस्टैम्प वाले रिकॉर्डों को चिह्नित करें। डेटा से आगे न जाएँ और नतीजे की बाहरी
बेंचमार्क से तुलना न करें। अपनी मान्यताएँ और वे डेटा गुणवत्ता मुद्दे सूचीबद्ध करें जो निष्कर्षों
को सीमित करते हैं।
सुधार प्रयोग की योजना बनाएँ।
हमारी सबसे कमज़ोर डिलीवरी मेट्रिक [मेट्रिक का नाम] है, वर्तमान में [रिपोर्ट किया मान, तिथि
सीमा और गिनतियों सहित]। टीम ने जिन संभावित कारणों पर चर्चा की है वे हैं [सूची]। हमारी
बाधाएँ हैं [बाधाएँ, उदाहरण के लिए विनियमित रिलीज़, साझा परीक्षण परिवेश]। चार से छह सप्ताह के
तीन छोटे प्रयोग प्रस्तावित करें, हर एक परिकल्पना, प्रभाव देखने का तरीका, एक रेलिंग मेट्रिक और एक
जोखिम के साथ। अपेक्षित सुधार के आँकड़े न गढ़ें। अपनी मान्यताएँ और शुरू करने से पहले हमें क्या
जाँचना चाहिए, सूचीबद्ध करें।
AI कौशल
- एजाइल ITIL मेट्रिक्स कौशल: संबंधित बदलाव, रिलीज़ और घटना विषय और वह रेलिंग खोजने के लिए उपयोग करें जो हर DORA मेट्रिक के बगल में होनी चाहिए।
- एजाइल ITIL मेट्रिक्स अनुरक्षक कौशल: यह जाँचने के लिए उपयोग करें कि इस विषय का संशोधित संस्करण अपनी घड़ियाँ, हेरफेर के तरीके और संदर्भ सुसंगत रखता है।
मुख्य निष्कर्ष
- DORA मेट्रिक्स सॉफ़्टवेयर डिलीवरी के पाँच माप हैं, तीन थ्रूपुट के और दो अस्थिरता के, और वे एक सेवा के लिए साथ पढ़ने पर सबसे उपयोगी हैं।
- उन्हें लिखित परिभाषाओं के साथ पाइपलाइन और घटना घटनाओं से गणना करें, क्योंकि विफलता और लीड टाइम का आरंभ विवेक के निर्णय हैं।
- उनका उपयोग डिलीवरी प्रणाली के बारे में सीखने और टीम की तुलना उसके अपने इतिहास से करने के लिए करें, लोगों या टीमों को रैंक करने के लिए कभी नहीं।
- माध्यिकाएँ, ऊँचे पर्सेंटाइल और गिनतियाँ रिपोर्ट करें, और हर मेट्रिक को उस रेलिंग से जोड़ें जो उसमें हेरफेर पकड़े।
- छोटे बैच, तेज़ पहचान और आसान रोलबैक जैसी अंतर्निहित क्षमताएँ सुधारें, और संख्याओं को पीछे आने दें।
- जिस मार्गदर्शन का आप अनुसरण करते हैं उसका संस्करण और तारीख बताएँ, क्योंकि परिभाषाएँ समय के साथ परिष्कृत हुई हैं।
संदर्भ और आगे पढ़ें
- Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
- DORA, DORA's software delivery performance metrics, Google Cloud, https://dora.dev/guides/dora-metrics/
- DORA, DORA research program, Google Cloud, https://dora.dev/research/
- DORA, Four Keys project, https://github.com/dora-team/fourkeys
- Forsgren, N., Storey, M.-A., Maddila, C., Zimmermann, T., Houck, B., and Butler, J., "The SPACE of Developer Productivity," ACM Queue, 2021.
- Beyer, B., Jones, C., Petoff, J., and Murphy, N. R. (eds.), Site Reliability Engineering: How Google Runs Production Systems, O'Reilly Media, 2016, https://sre.google/sre-book/table-of-contents/
- Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
- Wikipedia, DevOps Research and Assessment.
- Wikipedia, Accelerate (book).
- Wikipedia, Continuous delivery.
- Wikipedia, ITIL.
- Wikipedia, Goodhart's law.
- Wikipedia, CI/CD.
- Wikipedia, Feature toggle.
- Wikipedia, Rollback (data management).
- Wikipedia, Canary release.