सेवा मेट्रिक्स के लिए सांख्यिकीय साक्षरता
टिकट और प्रवाह का डेटा असमान, गुच्छेदार और अक्सर पतला होता है, इसलिए औसत की जगह माध्यिका और ऊँचे पर्सेंटाइल रिपोर्ट करें, हर दर के पीछे कितनी मदें हैं यह बताएँ, और किसी के प्रतिक्रिया देने से पहले सामान्य विचरण को वास्तविक बदलाव से अलग करें।
सारांश और प्रेरणा
अधिकांश सेवा मेट्रिक्स डैशबोर्ड पर एक अकेली संख्या के रूप में आती हैं: औसत समाधान समय, लक्ष्य के भीतर सुलझी घटनाओं का प्रतिशत, इस सप्ताह बंद टिकट। एक अकेली संख्या सटीक लगती है। वह आमतौर पर घटनाओं के बेतरतीब संग्रह का संपीड़ित सारांश होती है, और संपीड़न तय करता है कि पाठक क्या देखता है। इस पुस्तक के उद्देश्यों के लिए सांख्यिकीय साक्षरता उन आदतों का छोटा समूह है जो सारांश को ईमानदार रखती हैं: ऐसा सारांश चुनें जो डेटा के आकार से मेल खाए, जानें कि उसके पीछे कितना डेटा है, और वास्तविक बदलाव को शोर से अलग पहचानें।
सेवा डेटा का आकार पहली समस्या है। समाधान समय, साइकल टाइम और प्रतीक्षा समय जैसे समय माप शून्य से बँधे हैं और दाईं ओर लंबी पूँछ रखते हैं। अधिकांश मदें जल्दी खत्म होती हैं, और कुछ बहुत लंबा समय लेती हैं। ऐसा डेटा विषम (skewed) है, और समांतर माध्य पूँछ की ओर खिंचता है, इसलिए एक अटका टिकट सौ नियमित टिकटों से अधिक औसत को हिला सकता है। माध्यिका, मदों को क्रम में रखने पर बीच का मान, कहीं कम प्रभावित होती है। पर्सेंटाइल इसे सामान्यीकृत करता है: 85वाँ पर्सेंटाइल वह मान है जिसके भीतर 85 प्रतिशत मदें पूरी होती हैं। इस प्रकार की अवधियों को अक्सर लॉग-सामान्य वितरण से मॉडल किया जाता है, जिसमें मान का लघुगणक सममित होता है। सबक यह है कि विषम डेटा के लिए "विशिष्ट" और "औसत" अलग होते हैं।
नमूने का आकार दूसरी समस्या है। जो टीम तिमाही में 12 प्राथमिकता-1 घटनाएँ सुलझाती है और "लक्ष्य के भीतर 83 प्रतिशत" रिपोर्ट करती है, वह 12 में से 10 का वर्णन कर रही है। एक और चूक आँकड़े को आठ अंक हिला देगी। ईमानदार कथन में गिनती शामिल होती है, और अक्सर एक सीमा। विश्वास अंतराल डेटा से गणना की गई सीमा है जो व्यक्त करती है कि वास्तविक मान देखे गए मान से कितनी दूर संभावित रूप से हो सकता है। अंतराल छोटे नमूनों के लिए चौड़े और बड़े नमूनों के लिए संकीर्ण होते हैं, जो 12 घटनाओं वाली तिमाही के लिए सही संदेश है।
विचरण तीसरी समस्या है। हर प्रक्रिया ऐसी संख्याएँ पैदा करती है जो बिना कुछ बदले हफ़्ते-दर-हफ़्ते डोलती हैं। 1920 के दशक में विनिर्माण गुणवत्ता पर काम करते हुए वाल्टर शेवहार्ट ने इस नियमित डोलन को उन संकेतों से अलग किया जो जाँच के योग्य हैं, और हमें कंट्रोल चार्ट दिया। ऐसे चार्टों को किसी प्रक्रिया पर लागू करना सांख्यिकीय प्रक्रिया नियंत्रण कहलाता है। उस आख़िरी गलती का एक हिस्सा माध्य की ओर प्रतिगमन है: चरम मान के बाद कम चरम मान आने की प्रवृत्ति होती है, इसलिए भयानक सप्ताह के बाद का सप्ताह रिकवरी जैसा दिखता है चाहे किसी ने कुछ किया हो या नहीं।
एजाइल प्रवाह अभ्यास, जैसे कानबन गाइड का साइकल टाइम पर्सेंटाइल और कार्य मद की आयु का उपयोग, पहले से वितरण और संभाव्यता के रूप में व्यक्त पूर्वानुमान माँगता है (देखें विषय 2.1, प्रवाह माप)। ITIL 4 में, मापन और रिपोर्टिंग अभ्यास और सतत सुधार अभ्यास दोनों ऐसे मापों पर निर्भर हैं जिनका वही अर्थ है जो दिखता है, और सेवा स्तर प्रबंधन उन लक्ष्यों पर जो यथार्थवादी विचरण के विरुद्ध तय हों। सांख्यिकीय साक्षरता दोनों के नीचे साझा परत है। यह विषय 1.2, गुडहार्ट का नियम और मेट्रिक्स का मनोविज्ञान की रेलिंग का भी समर्थन करती है: जो टीम पूरा वितरण दिखाती है उसके पास हेरफेर किए औसत को छिपाने की कम जगहें होती हैं।
सामान्य-कारण विचरण प्रक्रिया में निर्मित है, और विशेष-कारण विचरण किसी विशिष्ट चीज़ से आता है जो बदली या बिगड़ी। सेवा स्तर समझौता (SLA) ग्राहक के प्रति प्रलेखित प्रतिबद्धता है, और सेवा स्तर उद्देश्य (SLO) किसी माप के लिए लक्ष्य।
मुख्य सिद्धांत
- सारांश को आकार से मिलाएँ। अवधियों के लिए माध्यिका और पर्सेंटाइल उपयोग करें, और जब निर्णय मायने रखे तो पूरा वितरण दिखाएँ। माध्य उस डेटा के लिए रखें जो लगभग सममित हो, या लागत जैसे योगों के लिए।
- हर दर अपनी गिनती साथ रखती है। अंश और हर के बिना प्रतिशत बिना प्रमाण का दावा है। बताई गई न्यूनतम गिनती से नीचे, दर की जगह कच्ची मदें दिखाएँ।
- सामान्य विचरण समाचार नहीं है। प्रतिक्रिया देने से पहले माप की सामान्य सीमा जानें। संकेतों पर प्रतिक्रिया दें, हर हलचल पर नहीं।
- अनिश्चितता उत्तर का हिस्सा है। पूर्वानुमान संभाव्यता के रूप में ("85 प्रतिशत मदें 9 दिनों के भीतर पूरी होती हैं") और अनुमान सीमाओं के रूप में व्यक्त करें, और झूठी सटीकता का विरोध करें।
- वितरण उस टीम को दिखाएँ जो काम की स्वामी है। कच्ची मदें और हिस्टोग्राम असामान्य मामलों को दृश्य बनाते हैं, और वे चुपचाप हेरफेर को कठिन बनाते हैं।
- सहसंबंध, चयन और समय कई "सुधारों" की व्याख्या करते हैं। पूछें कि और क्या बदला, डेटा से किसे छोड़ा गया, और क्या शुरुआती बिंदु असामान्य रूप से खराब था।
- सांख्यिकी अनुपात में रखें। टीम को निरंतरता से प्रयुक्त मुट्ठी भर तकनीकें चाहिए, सांख्यिकी का पाठ्यक्रम नहीं। हर चार्ट सादे शब्दों में समझाएँ।
मेट्रिक परिभाषाएँ
नीचे की मेट्रिक्स मेट्रिक्स अभ्यास की सांख्यिकीय गुणवत्ता और सेवा कार्य के वितरण का वर्णन करती हैं। समय माप हर पंक्ति में बताई घड़ियों का उपयोग करते हैं, और परिभाषाएँ अगले विषयों द्वारा पुनः उपयोग के लिए हैं (देखें विषय 3.3, घटना प्रतिक्रिया और समाधान समय, और विषय 2.2, लीड टाइम, साइकल टाइम और प्रवाह दक्षता)।
| मेट्रिक | परिभाषा | सूत्र | इकाई | डेटा स्रोत | ITIL अभ्यास | एजाइल समकक्ष | आवृत्ति |
|---|---|---|---|---|---|---|---|
| माध्यिका समाधान समय | अवधि में सुलझी घटनाओं का बीच का समाधान समय | अवधि में सुलझी घटनाओं पर (सुलझाने का टाइमस्टैम्प घटा बनाने का टाइमस्टैम्प) का 50वाँ पर्सेंटाइल; घड़ी टिकट बनने से शुरू और समाधान पर रुकती है; ठहराव अलग से रिपोर्ट होते हैं, घटाए नहीं जाते; रद्द और डुप्लिकेट टिकट शामिल नहीं | घंटे या दिन | ITSM उपकरण का स्थिति इतिहास | घटना प्रबंधन; मापन और रिपोर्टिंग | माध्यिका साइकल टाइम | साप्ताहिक या मासिक |
| ऊँचा-पर्सेंटाइल समाधान समय | वह समय जिसके भीतर अधिकांश घटनाएँ सुलझती हैं, पर्सेंटाइल का नाम लेकर | ऊपर के उसी बीते समय का 85वाँ (या 95वाँ) पर्सेंटाइल; केवल तब गणना जब कम से कम 20 मदें सुलझी हों, अन्यथा कच्ची मदें सूचीबद्ध | घंटे या दिन | ITSM उपकरण का स्थिति इतिहास | घटना प्रबंधन; सेवा स्तर प्रबंधन | साइकल टाइम पर्सेंटाइल पूर्वानुमान | साप्ताहिक या मासिक |
| सबसे पुरानी खुली मद की आयु | अब भी खुली सबसे पुरानी मद की आयु, साथ में ऊँचे पर्सेंटाइल से पुरानी मदों की गिनती | खुली मदों के लिए अब घटा बनाने का टाइमस्टैम्प, कोई ठहराव घटाया नहीं; सेवा कतार की सभी खुली मदें गिनता है, ग्राहक की प्रतीक्षा वाली भी | दिन | ITSM उपकरण या इश्यू ट्रैकर | घटना प्रबंधन; समस्या प्रबंधन | कार्य मद की आयु | साप्ताहिक |
| दर रिपोर्टिंग कवरेज | रिपोर्ट की गई उन दरों का हिस्सा जो अंश, हर और न्यूनतम-गिनती जाँच दिखाती हैं | गिनतियों और नमूना झंडे के साथ रिपोर्ट की गई दरें / रिपोर्ट की गई दरें; केवल अवधि के समीक्षा पैक में प्रकाशित दरें गिनी जाती हैं | प्रतिशत | मेट्रिक रजिस्टर (देखें विषय 1.4, मेट्रिक्स शासन और स्वामित्व) | मापन और रिपोर्टिंग | कार्य समझौते | तिमाही |
| कंट्रोल चार्ट संकेत दर | किसी माप के कंट्रोल चार्ट पर बिंदुओं का हिस्सा जो टीम के लिखित नियमों के तहत विशेष-कारण विचरण का संकेत देते हैं | नियमों के तहत चिह्नित बिंदु / आलेखित बिंदु, पिछले 20 या अधिक बिंदुओं पर; नियम पहले से तय और लॉग किए गए | प्रतिशत | कंट्रोल चार्ट उपकरण या स्प्रेडशीट | सतत सुधार | प्रक्रिया का रेट्रोस्पेक्टिव निरीक्षण | मासिक |
| अंतराल की चौड़ाई | किसी प्रमुख दर पर बताई अनिश्चितता सीमा की चौड़ाई | अवधि की प्रमुख दर के लिए रजिस्टर में नामित विधि से अंतराल की ऊपरी सीमा घटा निचली सीमा | प्रतिशत अंक | ITSM गिनतियों से गणना | सेवा स्तर प्रबंधन | योजना में पूर्वानुमान की सीमा | मासिक |
जहाँ अनुबंध माध्य का नाम लेता है, अनुबंधित आँकड़ा रिपोर्ट करें और उसके बगल में माध्यिका और पर्सेंटाइल दिखाएँ।
सिफ़ारिशें
समय के डेटा को ईमानदारी से सारांशित करें
1. डिफ़ॉल्ट रूप से माध्यिका और एक नामित ऊँचा पर्सेंटाइल रखें। समाधान समय, साइकल टाइम और पूर्ति समय के लिए माध्यिका और 85वाँ या 95वाँ पर्सेंटाइल साथ प्रकाशित करें, और पर्सेंटाइल को मेट्रिक के नाम में लिखें। माध्यिका बताती है कि विशिष्ट क्या है, और ऊँचा पर्सेंटाइल बताता है कि ग्राहक से उचित रूप से क्या वादा किया जा सकता है। यदि प्रतिबद्धता के लिए एक संख्या चुननी पड़े, तो पर्सेंटाइल चुनें।
2. सारांश के साथ आकार भी दिखाएँ। बंद करने की तारीख के अनुसार समाधान समय का हिस्टोग्राम या स्कैटर प्लॉट गुच्छे, लंबी पूँछें और अचानक बदलाव दिखाता है जो कोई सारांश नहीं दिखाता। जब चित्र और संख्या असहमत हों, तो चित्र पर विश्वास करें और संख्या की जाँच करें।
3. सबसे पुरानी खुली मद की आयु जोड़ें। पूरे हुए काम के पर्सेंटाइल पीछे देखते हैं और जो अब भी अटका है उसे अनदेखा करते हैं। सबसे पुरानी खुली मद और अपने ऊँचे पर्सेंटाइल से पहले ही पुरानी खुली मदों की संख्या रिपोर्ट करें (देखें विषय 2.1, प्रवाह माप)। यह उन औसतों का सबसे उपयोगी एकल सुधारक है जो इसलिए सुधरते हैं कि कठिन मदें पुरानी होने को छोड़ दी जाती हैं।
छोटे नमूनों और अनिश्चितता का सम्मान करें
4. हर दर के साथ गिनती प्रकाशित करें। "83 प्रतिशत" की जगह "12 में से 10 लक्ष्य के भीतर सुलझे" लिखें। एक नियम जोड़ें कि बताई गई संख्या से कम मदों पर आधारित दरें गिनतियों या अंतर्निहित मदों के रूप में दिखाई जाएँ। सीमा एक निर्णय है: उसे लिखें, उसकी समीक्षा करें, और हर जगह लागू करें।
5. प्रमुख दरों और पूर्वानुमानों के लिए अंतराल उपयोग करें। अनुपात के लिए, जैसे विफल होने वाले बदलावों का हिस्सा, ऐसी विधि से विश्वास अंतराल गणना करें जिस पर आपकी टीम सहमत हो और विधि रजिस्टर में नोट करें। डिलीवरी पूर्वानुमानों के लिए नमूना-आधारित सीमा (उदाहरण के लिए, "प्रति सप्ताह संभवतः 8 से 14 मदों के बीच") योजनाकारों को एक अकेले थ्रूपुट आँकड़े से अधिक बताती है। यदि अंतराल निर्णय को जानकारी देने के लिए बहुत चौड़ा है, तो यह कहें।
संकेत को शोर से अलग करें
6. जिन मापों पर आप कार्रवाई करते हैं उनके लिए कंट्रोल चार्ट खींचें। एक सरल व्यक्तिगत-मान चार्ट हर बिंदु को समय-क्रम में केंद्र रेखा और डेटा से गणना की गई सीमाओं के साथ आलेखित करता है, और सीमाओं से बाहर के बिंदुओं या केंद्र के एक ओर की शृंखलाओं को चिह्नित करता है। साप्ताहिक माध्यिका समाधान समय और साप्ताहिक मात्रा से शुरू करें। संकेत के नियम एक बार लिखें (उदाहरण के लिए, सीमा से परे एक बिंदु, या एक ओर आठ की शृंखला) और उन्हें स्थिर रखें, ताकि टीम नियमों को तब तक न बदले जब तक चार्ट उसकी भावनाओं से सहमत न हो जाए।
7. संकेतों पर कार्रवाई करें और सामान्य-कारण विचरण को अकेला छोड़ दें। जब बिंदु सीमाओं के भीतर हो, तो उसके लिए स्पष्टीकरण का विरोध करें; प्रक्रिया वैसा ही व्यवहार कर रही है जैसा वह सामान्यतः करती है। जब संकेत दिखे, तो पूछें उस सप्ताह क्या बदला: रिलीज़, स्टाफ़ की कमी, आपूर्तिकर्ता आउटेज, नई श्रेणी। यदि प्रक्रिया स्थिर है पर असंतोषजनक, तो सुधार प्रणाली में बदलाव है, उससे बातचीत नहीं जिसका सप्ताह लाल था।
8. चरम अवधि के बाद माध्य की ओर प्रतिगमन की अपेक्षा रखें। यदि आप वर्ष के सबसे खराब महीने में कोई पहल शुरू करते हैं, तो संयोग से कुछ सुधार आएगा। पहल को श्रेय देने से पहले लंबी आधाररेखा से, उस समान सेवा से जो नहीं बदली, या कंट्रोल सीमाओं से तुलना करें। दो बिंदुओं की पहले-और-बाद की जोड़ी प्रमाण का सबसे कमज़ोर रूप है।
कारण और चयन के बारे में सावधानी से तर्क करें
9. पूछें डेटा में क्या गायब है। सर्वेक्षण के उत्तर उन लोगों से आते हैं जिन्होंने उत्तर देना चुना। बंद टिकट उन्हें बाहर करते हैं जो अब भी खुले हैं। निष्कर्ष निकालने से पहले सूचीबद्ध करें कि कौन या क्या अनुपस्थित है और वह नतीजे को कैसे झुका सकता है।
10. परिभाषाएँ सोच-समझकर बदलें, और चार्ट पर चिह्नित करें। नया स्थिति मॉडल, नया प्राथमिकता मैट्रिक्स, या नई श्रेणी सूची काम बदले बिना डेटा बदल देती है। हर बदलाव को चार्ट पर टिप्पणी करें और उसके बाद कंट्रोल सीमाएँ फिर शुरू करें (देखें विषय 1.5, डेटा स्रोत और इंस्ट्रूमेंटेशन)।
हेरफेर के तरीके और रेलिंग
| मेट्रिक | हेरफेर कैसे होता है | जोड़ी गई रेलिंग मेट्रिक या अभ्यास |
|---|---|---|
| माध्यिका समाधान समय | पहले जल्दी वाले टिकट बंद करना और कठिन खुले छोड़ना; एक टिकट को कई आसान में बाँटना; ग्राहक-प्रतीक्षा स्थिति में घड़ी रोकना | ऊँचा-पर्सेंटाइल समाधान समय और सबसे पुरानी खुली मद की आयु; ठहराव स्थितियों में समय का हिस्सा; जुड़े-टिकट की दर |
| ऊँचा-पर्सेंटाइल समाधान समय | ऐसा पर्सेंटाइल चुनना जो नतीजे को चापलूसी दे, या रिपोर्टों के बीच बदलना; लंबे मामलों को "आउटलायर" कहकर बाहर करना या पुनर्वर्गीकृत करना | रजिस्टर में तय किया पर्सेंटाइल; कारणों सहित बाहर रखी मदों की सूची; सबसे पुरानी खुली मद की आयु |
| सबसे पुरानी खुली मद की आयु | सबसे पुरानी मद को सुलझाए बिना बंद या मिला देना; उसे दूसरी कतार या श्रेणी में ले जाना | पुनः खुलने की दर; सबसे पुरानी बंद मदों का नमूना ऑडिट; कतार स्थानांतरण की गिनती |
| दर रिपोर्टिंग कवरेज | छोटे अक्षरों में गिनती जोड़ना जबकि शीर्षक प्रतिशत से ही शुरू हों; न्यूनतम गिनती इतनी कम रखना कि वह कभी न लगे | रजिस्टर नहीं, असल डैशबोर्ड की समीक्षा करें; न्यूनतम गिनती की समीक्षा अंतराल की चौड़ाई के साथ |
| कंट्रोल चार्ट संकेत दर | सीमाएँ चौड़ी करना, नियम जोड़ना, या आधाररेखा फिर शुरू करना ताकि संकेत गायब हो जाएँ; माप बदलकर बिंदु हिलाना | नियम और सीमाएँ बदलाव इतिहास सहित रजिस्टर में संग्रहीत; कच्चे हिस्टोग्राम से तुलना |
| अंतराल की चौड़ाई | ऐसी विधि या खिड़की चुनना जो संकीर्ण सीमा दे; नमूना बड़ा करने के लिए असमान सेवाओं को मिलाना | रजिस्टर में नामित विधि; माँगने पर सेवा के अनुसार विभाजन उपलब्ध; मिलाए और बिना मिलाए नतीजों की तुलना |
स्वस्थ पठन ऐसी माध्यिकाएँ और पर्सेंटाइल दिखाता है जो उपयोगकर्ताओं के अनुभव की दिशा में ही हिलते हैं, पुरानी मदों की छोटी सूची जो चुपचाप पुनर्वर्गीकृत किए बिना सिकुड़ती है, और दरें जो अपनी गिनतियों के साथ आती हैं। कंट्रोल चार्ट संकेत दर कम और शून्येतर होनी चाहिए: जो चार्ट कभी संकेत नहीं देता वह शायद दे ही नहीं सकता, और जो हमेशा संकेत देता है वह अस्थिर प्रक्रिया या बुरी तरह चुने नियमों को दर्शाता है।
समझौते: लाभ और हानि
| दृष्टिकोण | ताकत | कमज़ोरी |
|---|---|---|
| माध्य समाधान समय | सरल, कई अनुबंधों से मेल खाता है, जोड़ना आसान | पूँछ से प्रभावित; ग्राहक आमतौर पर जो अनुभव करते हैं उसे छिपाता है |
| माध्यिका और ऊँचा पर्सेंटाइल | आउटलायर के प्रति प्रतिरोधी; ग्राहकों से वादों का समर्थन | थोड़ी व्याख्या चाहिए; पर्सेंटाइल को स्थिर होने के लिए पर्याप्त मदें चाहिए |
| गिनती के बिना कच्ची दरें | संक्षिप्त और परिचित | छोटे नमूने छिपाती हैं और अति-पठन को न्योता देती हैं |
| गिनती और अंतराल सहित दरें | अनिश्चितता के बारे में ईमानदार; अति-प्रतिक्रिया हतोत्साहित | कम निर्णायक दिखती हैं; अंतराल विधियों पर सहमति चाहिए |
| कंट्रोल चार्ट | संकेत को शोर से अलग करते हैं; कब कार्रवाई करें यह बताते हैं | पर्याप्त बिंदु और स्थिर परिभाषाएँ चाहिए; सीमाएँ गलत पढ़ी या हेरफेर की जा सकती हैं |
| पहले-और-बाद की तुलना | तेज़ और संप्रेषित करने में आसान | माध्य की ओर प्रतिगमन और संयोगी बदलावों के प्रति प्रवण |
साल में मुट्ठी भर घटनाओं वाली सेवा के लिए कोई आँकड़ा स्थिर नहीं होता, और सही तरीका हर घटना को पढ़ना है। उच्च-मात्रा वाले डेस्क के लिए वितरण-सचेत माप सस्ते और स्पष्ट रूप से श्रेष्ठ हैं। मात्रा और निर्णय के दाँव के अनुसार चुनें।
अपनी टीम के साथ चर्चा के प्रश्न
1. हमारे वर्तमान डैशबोर्ड की कौन-सी संख्या किसी विषम चीज़ का औसत है, और माध्यिका तथा 95वाँ पर्सेंटाइल क्या दिखाएँगे? सबसे अधिक देखा जाने वाला समय माप चुनें और बैठक से पहले एक ही मदों के समूह पर तीनों गणना करें। पूछें कि क्या औसत जो कहानी बताता है वह उपयोगकर्ता जो कहते हैं उससे मेल खाती है। अंत में सहमत हों कि कौन-सा सारांश शीर्षक बनेगा और बाकी कहाँ दिखेंगे।
2. हमारे सबसे अधिक उद्धृत प्रतिशत के पीछे कितनी मदें हैं, और क्या हम उसे तब भी उद्धृत करेंगे यदि गिनतियाँ लिखें? नेतृत्व जो तीन प्रतिशत सबसे अधिक पढ़ता है उन्हें सूचीबद्ध करें। हर एक के बगल में पिछली अवधि का अंश और हर लिखें। पूछें कि एक अतिरिक्त सफलता या विफलता आँकड़े के साथ क्या करेगी। ऐसी न्यूनतम गिनती पर सहमत हों जिसके नीचे टीम दर की बजाय मदें दिखाए।
3. हमने आखिरी बार किसी सुधार का श्रेय किसी पहल को कब दिया, और उस समय और क्या सच था? हाल की कोई सफलता कहानी चुनें। पूछें कि माप कब सबसे खराब था, लंबा इतिहास कैसा दिखता है, और क्या कोई तुलनीय सेवा भी सुधरी। लहजा जिज्ञासु रखें।
4. हमारे प्रमुख मापों की सामान्य सीमा क्या है, और कौन कह सकेगा कि कोई सप्ताह असामान्य है? एक माप के पिछले 20 या अधिक साप्ताहिक मान आलेखित करें और केंद्र तथा सीमाएँ खींचें, या उन्हें मोटे तौर पर गणना करें। पूछें टीम ने किन सप्ताहों पर प्रतिक्रिया दी जो सीमा के भीतर थे। सहमत हों कि चार्ट का स्वामी कौन है और संकेत के नियम कहाँ लिखे हैं।
5. हमारे डेटा में कौन या क्या गायब है? माप के स्रोत सूचीबद्ध करें: बंद टिकट, सर्वेक्षण उत्तर, निगरानी में रखी सेवाएँ, टाइमस्टैम्प वाले उपकरण। हर एक के लिए पूछें कि कौन बाहर है और क्यों। हर अंतर को सुधार या सावधानी के रूप में दर्ज करें।
6. हम नेतृत्व को चौड़ी सीमा या "हम अभी नहीं जानते" बिना बहाने जैसा लगे कैसे समझाएँ? असली उदाहरण पर शब्दों का अभ्यास करें: "12 घटनाओं पर 70 से 95 प्रतिशत के बीच; हम अगली तिमाही के बाद इसे संकुचित करने की अपेक्षा करते हैं।" पूछें कि दर्शकों को तय करने के लिए क्या चाहिए और क्या सीमा निर्णय बदलती है। बैठक में एक छोटी पटकथा लिखें।
चार दृष्टिकोण
उत्पाद और डिलीवरी टीमें
डिलीवरी टीमें पूर्वानुमान के लिए साइकल टाइम और थ्रूपुट उपयोग करती हैं, और उन्हें औसत की बजाय पर्सेंटाइल-आधारित पूर्वानुमानों से सबसे अधिक लाभ होता है (देखें विषय 2.1, प्रवाह माप)। संभाव्यता सहित सीमा के रूप में बताया पूर्वानुमान तारीख से बचाव करने में आसान है। एक अवधि के बदलाव को रुझान की तरह पढ़ने का विरोध करें (देखें विषय 2.5, डिलीवरी पूर्वानुमान और योजना मेट्रिक्स)।
सेवा और संचालन टीमें
संचालन टीमें टिकट डेटा और घटना घड़ियों की स्वामी हैं, इसलिए वे माध्यिकाएँ, पर्सेंटाइल और सबसे पुरानी खुली मद प्रकाशित करने और ठहराव के नियम समझाने के लिए सबसे उपयुक्त हैं। उन्हें साप्ताहिक मात्रा और समाधान समय को कंट्रोल सीमाओं के साथ आलेखित करना चाहिए ताकि वास्तविक बदलाव, जैसे दोषपूर्ण रिलीज़, खराब सप्ताह से अलग पहचाना जा सके। जब किसी सेवा में कम घटनाएँ हों, तो उन्हें दरें गणना करने की बजाय हर एक की समीक्षा करनी चाहिए (देखें विषय 3.3, घटना प्रतिक्रिया और समाधान समय)।
नेतृत्व और शासन
नेता वे प्रश्न पूछते हैं जो तय करते हैं कि टीमें क्या दिखाती हैं। हर डोलन पर "यह क्यों बढ़ा?" पूछना संगठन को शोर समझाना और उसे छिपाना सिखाता है। नेताओं को पूछना चाहिए कि क्या हलचल सामान्य सीमा के भीतर है, आँकड़े के पीछे कितनी मदें हैं, और प्रक्रिया में क्या बदला है। शासन निकाय प्रमुख दरों पर गिनतियाँ अनिवार्य कर सकते हैं।
ग्राहक और उपयोगकर्ता
ग्राहक अलग-अलग मामलों का अनुभव करते हैं, औसत का नहीं। उन्हें वह एक अनुरोध याद रहता है जिसमें पाँच सप्ताह लगे, और दो दिन का औसत उस स्मृति की मरम्मत नहीं करता। पर्सेंटाइल प्रतिबद्धताएँ ("दस में से नौ अनुरोध तीन कार्य दिवसों के भीतर") माध्य समयों की तुलना में ग्राहक के मानसिक मॉडल से बेहतर मेल खाती हैं। सर्वेक्षण परिणाम उत्तर की गिनतियों के साथ दिखाए जाएँ, और खुली टिप्पणियाँ संख्याओं के साथ पढ़ी जाएँ (देखें विषय 6.1, ग्राहक संतुष्टि मेट्रिक्स)।
व्यवहार में: एक एजाइल ITIL उदाहरण
एक मध्यम आकार की ऑनलाइन रिटेलर की सेवा डेस्क और एक संचालन टीम है जो उसकी वेब शॉप का समर्थन करती है। नीचे के आँकड़े उदाहरणार्थ संख्याएँ हैं।
नेतृत्व मासिक शीर्षक देखता है: "औसत घटना समाधान समय 9.1 घंटे से घटकर 7.4 घंटे हुआ।" संचालन प्रमुख से इसकी पुष्टि करने और अगले लक्ष्य, 6 घंटे, की योजना प्रस्तुत करने को कहा जाता है। सहमत होने से पहले वह विश्लेषक से अंतर्निहित मदें निकालने और आलेखित करने को कहती है। महीने की 240 घटनाओं में (उदाहरणार्थ), माध्यिका 2.5 घंटे है, 85वाँ पर्सेंटाइल 14 घंटे है, और 9 घटनाएँ 5 दिन से पुरानी हैं और अब भी खुली हैं। पिछले महीने माध्यिका 2.6 घंटे थी। औसत इसलिए गिरा कि पिछले महीने की तीन बहुत लंबी घटनाएँ, जिनमें से एक 11 दिन पुरानी थी, संयोग से इस अवधि में पहले सुलझ गईं, और इसलिए कि पासवर्ड रीसेट टिकटों का एक समूह जल्दी बंद होने वाले अनुरोध प्रकार में पुनर्वर्गीकृत हुआ।
टीम पिछले 26 सप्ताहों की साप्ताहिक माध्यिका आलेखित करती है। केंद्र रेखा 2.6 घंटे के पास है, और पिछले दो महीनों का हर बिंदु सीमाओं के भीतर है। शीर्षक की गिरावट कोई संकेत नहीं है। दूसरे सप्ताह में पुनर्वर्गीकरण ने चार्ट के बीच में परिभाषा बदल दी, इसलिए टीम उसे चिह्नित करती है और उस बिंदु से सीमाएँ फिर शुरू करती है।
वे तीन बदलावों का निर्णय लेते हैं। मासिक रिपोर्ट माध्यिका, 85वाँ पर्सेंटाइल और सबसे पुरानी खुली मद दिखाएगी, हर एक के पीछे घटनाओं की संख्या सहित। प्रस्तावित 6-घंटे के औसत लक्ष्य की जगह पर्सेंटाइल उद्देश्य पर बातचीत होगी, जो नई परिभाषा के तहत एक तिमाही के डेटा के बाद तय होगा। टीम 9 पुरानी घटनाओं को भी हर एक के स्वामी और अगले कदम के साथ सूचीबद्ध करेगी।
हेरफेर का जो जोखिम वे पकड़ते हैं वह अगली समीक्षा में है। एक प्रबंधक सबसे पुरानी मद के आँकड़े को स्वस्थ दिखाने के लिए 9 सबसे पुरानी घटनाओं को "अब पुनः उत्पन्न नहीं होती" के रूप में बंद करने का प्रस्ताव देता है। क्योंकि रजिस्टर सबसे पुरानी खुली मद की आयु को पुनः खुलने की दर और पुराने बंदों के नमूना ऑडिट से जोड़ता है, टीम तीन प्रस्तावित बंदों को पढ़ती है, पाती है कि दो अब भी जीवित हैं, और उन्हें खुला रखती है। सबसे पुरानी मद का आँकड़ा एक और महीने असुविधाजनक रहता है। यही अभीष्ट व्यवहार है।
क्षेत्र के अनुसार दृष्टि
स्टार्टअप। मात्राएँ छोटी हैं, इसलिए अधिकांश दरें कुछ मदों से बनी हैं और अंतराल चौड़े हैं। आँकड़े गणना करने की बजाय हर घटना पढ़ें, एक-दो मापों का सरल साप्ताहिक चार्ट रखें, और तीन बिंदुओं से रुझान घोषित करने से बचें। जैसे-जैसे मात्रा बढ़े, माध्यिकाओं और पर्सेंटाइल पर जल्दी चले जाएँ ताकि आदतें पहले से बनी हों।
छोटा व्यवसाय। जो व्यक्ति आईटी चलाता है वही डेटा का स्वामी है, और नमूना आमतौर पर छोटा होता है। दुर्लभ घटनाओं के लिए प्रतिशत नहीं, गिनतियाँ रिपोर्ट करें, और अपने ही लंबे इतिहास से तुलना करें। जाँचें कि विक्रेता की "प्रतिक्रिया समय" की घड़ी वास्तव में क्या मापती है।
उद्यम। मात्रा वितरण को सार्थक बनाती है, और असमान सेवाओं को मिलाने वाले रोल-अप को भी प्रोत्साहित करती है। समान से समान की तुलना करें, परिभाषाएँ और प्रयुक्त पर्सेंटाइल प्रकाशित करें, और चार्ट व गणना नियमों की साझा लाइब्रेरी रखें ताकि टीमें एक ही माप को तीन तरह गणना न करें।
सरकार और सार्वजनिक क्षेत्र। अनुबंध और वैधानिक रिपोर्टिंग अक्सर माध्य या सीमा प्रतिशत तय करते हैं, और वे परिभाषाएँ बातचीत योग्य नहीं हैं। आवश्यक आँकड़ा ठीक वैसे रिपोर्ट करें जैसे परिभाषित है, और उसके साथ माध्यिका, पर्सेंटाइल और गिनतियाँ दिखाएँ ताकि निगरानी निकाय पूरी तस्वीर देखें। सार्वजनिक जाँच ईमानदार अनिश्चितता को अधिक मूल्यवान बनाती है, क्योंकि अति-आत्मविश्वासी संख्या वापस लेना महँगा है (देखें विषय 8.5, विनियमित और सरकारी रिपोर्टिंग)।
व्यावसायिक औचित्य: प्रेरणाएँ, ROI और TCO
सारांश नियमों पर सहमत होने, निर्यात से हिस्टोग्राम और कंट्रोल चार्ट बनाने, और रिपोर्ट टेम्पलेट में गिनतियाँ जोड़ने में कुछ घंटे लगते हैं, साथ ही उन्हें ताज़ा रखने में हर चक्र कुछ मिनट। अधिकांश उपकरण पहले से पर्सेंटाइल गणना करते हैं। बड़ी लागत उन लोगों से बातचीत है जो एक आरामदेह संख्या के आदी हैं।
प्रतिफल बेहतर निर्णय और कम बर्बाद प्रतिक्रिया है। टीमें खराब सप्ताह के बाद पुनर्गठन बंद कर देती हैं, संयोग से हुए सुधारों का श्रेय पहलों को देना बंद कर देती हैं, और उन औसतों का वादा करना बंद कर देती हैं जिनका उनके आधे ग्राहक अनुभव नहीं करते। कोई आँकड़ा उधार न लें: गिनें कि पिछले साल के निर्णय कितनी बार पलटे गए और कितने "सुधार" अगली अवधि में गायब हो गए, और औचित्य का आकार तय करने के लिए उन गिनतियों का उपयोग करें।
प्रति-पैटर्न और जाल
- विषम अवधियों का औसत निकालना। माध्य पूँछ से खिंचता है और उपयोगकर्ता जो महसूस करते हैं उसे छिपाता है। माध्यिका और नामित ऊँचा पर्सेंटाइल रिपोर्ट करें, और सबसे पुरानी खुली मद दिखाएँ।
- छोटे नमूनों से प्रतिशत। तीन मदों से "100 प्रतिशत" एक किस्सा है। गिनतियाँ दिखाएँ और न्यूनतम-गिनती नियम लागू करें।
- हर डोलन पर प्रतिक्रिया। हर लाल सप्ताह का पीछा करना प्रयास बर्बाद करता है और टीमों को शोर समझाना सिखाता है। कंट्रोल सीमाएँ और लिखित संकेत नियम उपयोग करें।
- पहले-और-बाद का प्रमाण। दो बिंदु हस्तक्षेप को संयोग या माध्य की ओर प्रतिगमन से अलग नहीं कर सकते। लंबी आधाररेखा और तुलना उपयोग करें।
- चार्ट पर गोलपोस्ट खिसकाना। बाद में सीमाएँ, नियम या परिभाषाएँ बदलना किसी भी चार्ट को कहानी से सहमत कर देता है। नियम तय रखें, बदलाव लॉग करें और उन पर टिप्पणी करें।
- डिफ़ॉल्ट रूप से आउटलायर हटाना। सबसे लंबे मामले आमतौर पर वही हैं जो ग्राहकों को याद रहते हैं। केवल लिखित कारण के साथ बाहर करें, और सूचीबद्ध करें कि क्या बाहर किया गया।
- झूठी सटीकता। 12 मदों से 83.3 प्रतिशत रिपोर्ट करना ऐसा ज्ञान जताता है जो डेटा में नहीं है। ईमानदारी से पूर्णांकन करें और सीमा दिखाएँ।
- असमान काम को मिलाना। पासवर्ड रीसेट और डेटा सेंटर विफलताओं का मिश्रित समय किसी का वर्णन नहीं करता। पहले विभाजित करें।
परिपक्वता मॉडल
| आयाम | 1 आरंभ | 2 विकास | 3 मानकीकरण | 4 प्रबंधन | 5 समन्वय |
|---|---|---|---|---|---|
| समय डेटा के सारांश | केवल औसत | कुछ टीमें माध्यिका दिखाती हैं | माध्यिका, नामित पर्सेंटाइल और सबसे पुरानी खुली मद मानक हैं | रेलिंग के साथ वितरण की समीक्षा और रुझान | ग्राहकों और आपूर्तिकर्ताओं के साथ पर्सेंटाइल प्रतिबद्धताएँ तय, और डेटा बदलने पर संशोधित |
| नमूना आकार और अनिश्चितता | बिना गिनती के दरें उद्धृत | कुछ रिपोर्टों में गिनतियाँ दिखाई जाती हैं | हर दर पर गिनतियाँ और न्यूनतम-गिनती नियम | प्रमुख दरों पर अंतराल, विधि रजिस्टर में | अनिश्चितता ग्राहकों के साथ खुलकर साझा और टीमों में योजना में उपयोग |
| विचरण और कारणता | हर बदलाव समझाया जाता है | सीमाओं सहित कुछ चार्ट | प्रमुख मापों के लिए लिखित नियमों सहित कंट्रोल चार्ट | संकेत नियोजित जाँच शुरू करते हैं; पहलों को आधाररेखा के विरुद्ध जाँचा जाता है | सेवाओं में साझा चार्ट लाइब्रेरी; बिना रैंकिंग के टीमों में आधाररेखाओं की तुलना |
चेकलिस्ट
- हर समय-माप केवल माध्य की बजाय माध्यिका और नामित ऊँचा पर्सेंटाइल रिपोर्ट करता है।
- सबसे पुरानी खुली मद की आयु और ऊँचे पर्सेंटाइल से परे की मदों की गिनती रिपोर्ट की जाती है।
- हर रिपोर्ट की गई दर अपना अंश और हर दिखाती है।
- न्यूनतम-गिनती नियम लिखित है और सभी दरों पर लागू है।
- प्रमुख दरें और पूर्वानुमान सीमा दिखाते हैं, विधि रजिस्टर में नामित है।
- उन तीन मापों के लिए कंट्रोल चार्ट हैं जिन पर टीम कार्रवाई करती है, लिखित संकेत नियमों सहित।
- परिभाषा बदलाव चार्ट पर चिह्नित और रजिस्टर में लॉग किए जाते हैं।
- बाहर रखी मदें कारणों सहित सूचीबद्ध हैं।
- सुधार के दावे दोहराने से पहले लंबी आधाररेखा के विरुद्ध जाँचे जाते हैं।
- हर मेट्रिक का हेरफेर का तरीका और रेलिंग रजिस्टर में हैं (देखें विषय 1.4, मेट्रिक्स शासन और स्वामित्व)।
AI प्रॉम्प्ट
जाँचें कि सारांश डेटा से मेल खाता है या नहीं।
मेरे पास [सेवा] के लिए [अवधि] में [माप, जैसे घटना समाधान समय] के [संख्या] मान हैं।
घड़ी [आरंभ घटना] पर शुरू और [समाप्ति घटना] पर बंद होती है। ठहराव [कैसे सँभाले गए]।
मान नीचे चिपकाए गए हैं।
वितरण का आकार बताएँ, माध्य, माध्यिका और [पर्सेंटाइल, जैसे 85वाँ] तथा [दूसरा
पर्सेंटाइल, जैसे 95वाँ] गणना करें, और बताएँ कि कौन-सा सारांश विशिष्ट मामले का सबसे
अच्छा प्रतिनिधित्व करता है और कौन-सा ग्राहकों से वादे का समर्थन करता है। ऐसे किसी भी
मान को इंगित करें जो डेटा त्रुटि जैसा लगे, पर उन्हें हटाएँ नहीं। बेंचमार्क मान न
गढ़ें। अपनी मान्यताएँ और जो आप डेटा से तय नहीं कर सके, सूचीबद्ध करें।
[मान चिपकाएँ, व्यक्तिगत डेटा हटाकर]
किसी दर को उसकी अनिश्चितता के साथ व्यक्त करें।
हमारी टीम [अवधि] और [सेवा] के लिए [दर का नाम] को [हर] में से [अंश] के रूप में
रिपोर्ट करती है। दिखाएँ कि इसे गिनतियों के साथ कैसे प्रस्तुत करें, सादे शब्दों में
समझाएँ कि एक और सफलता या एक कम सफलता इसे कितना बदलेगी, और [विधि, या "आपकी
सुझाई और नामित विधि"] से विश्वास अंतराल की गणना करें। ऐसे शब्द सुझाएँ जिन्हें गैर-
तकनीकी नेता समझ सके, और मदें कब दर की जगह दिखानी हैं इसके लिए न्यूनतम-गिनती नियम
सुझाएँ। तुलनात्मक आँकड़े न गढ़ें। अपनी मान्यताएँ सूचीबद्ध करें, विधि और उसे चाहिए
किसी भी डेटा शर्त सहित।
जाँचें कि कोई बदलाव संकेत है या शोर।
यहाँ [सेवा] के लिए [माप] के [संख्या] लगातार [साप्ताहिक या मासिक] मान हैं। [अवधि] में
एक बदलाव हुआ: [हस्तक्षेप, रिलीज़ या परिभाषा बदलाव का वर्णन करें]। केंद्र रेखा और
सीमाओं वाले कंट्रोल चार्ट को आलेखित या वर्णित करें, ये संकेत नियम लागू करें: [नियम
सूचीबद्ध करें, जैसे सीमा से परे एक बिंदु या एक ओर आठ की शृंखला], और बताएँ कौन-से बिंदु
संकेत देते हैं। बताएँ कि क्या बदलाव सामान्य विचरण से अलग पहचाना जा सकता है, और मुझे
कौन-सी अन्य व्याख्याएँ, जैसे माध्य की ओर प्रतिगमन या परिभाषा बदलाव, ख़ारिज करनी
चाहिए। कारणता का दावा न करें। अपनी मान्यताएँ और कौन-सा अतिरिक्त डेटा मदद करेगा,
सूचीबद्ध करें।
[मान चिपकाएँ]
AI कौशल
- एजाइल ITIL मेट्रिक्स कौशल: समय या दर मेट्रिक प्रकाशित करने से पहले उसका विषय और जोड़ी गई रेलिंग खोजने के लिए उपयोग करें।
- एजाइल ITIL मेट्रिक्स अनुरक्षक कौशल: यह जाँचने के लिए उपयोग करें कि किसी विषय में जोड़े गए सांख्यिकीय माप के पास अपनी परिभाषा, घड़ियाँ, हेरफेर का तरीका और रेलिंग हैं।
मुख्य निष्कर्ष
- सेवा अवधियाँ विषम हैं, इसलिए माध्यिका और नामित ऊँचा पर्सेंटाइल रिपोर्ट करें, और सबसे पुरानी खुली मद की आयु जोड़ें।
- हर दर अपनी गिनती साथ रखती है, और छोटे नमूने मदों या सीमा के रूप में दिखाए जाएँ, आत्मविश्वासी प्रतिशत के रूप में नहीं।
- किसी एक सप्ताह पर प्रतिक्रिया देने से पहले कंट्रोल चार्ट से माप की सामान्य सीमा जानें।
- दो बिंदुओं से मापे सुधारों पर संदेह करें: माध्य की ओर प्रतिगमन और परिभाषा बदलाव उनमें से कई की व्याख्या करते हैं।
- ईमानदार अनिश्चितता रिपोर्ट में ताकत है, और गुडहार्ट-शैली के हेरफेर के विरुद्ध रेलिंग है (देखें विषय 1.2, गुडहार्ट का नियम और मेट्रिक्स का मनोविज्ञान)।
- तकनीक अनुपात में रखें: कुछ सुसंगत तरीके, सादे शब्दों में समझाए गए, टीम की कई बिना समझाए तरीकों से बेहतर सेवा करते हैं।
संदर्भ और आगे पढ़ें
- Wheeler, D. J., Understanding Variation: The Key to Managing Chaos, 2nd edition, SPC Press, 2000.
- Shewhart, W. A., Economic Control of Quality of Manufactured Product, D. Van Nostrand, 1931.
- Vacanti, D. S., Actionable Agile Metrics for Predictability: An Introduction, Daniel S. Vacanti, Inc., 2015.
- Vacanti, D., Yeret, Y., et al., The Kanban Guide, 2020, https://kanbanguides.org/.
- Hubbard, D. W., How to Measure Anything: Finding the Value of Intangibles in Business, 3rd edition, Wiley, 2014.
- Kahneman, D., Thinking, Fast and Slow, Farrar, Straus and Giroux, 2011.
- Tufte, E. R., The Visual Display of Quantitative Information, 2nd edition, Graphics Press, 2001.
- Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
- Wikipedia, Skewness.
- Wikipedia, Median.
- Wikipedia, Percentile.
- Wikipedia, Log-normal distribution.
- Wikipedia, Confidence interval.
- Wikipedia, Control chart.
- Wikipedia, Statistical process control.
- Wikipedia, Regression toward the mean.