Ogni modifica a un servizio in produzione è una scommessa. Può portare valore prima, oppure può rompere qualcosa su cui gli utenti fanno affidamento. La Parte 3 ha misurato quanto funzionino bene il supporto e il ripristino quando qualcosa va storto (si veda l'Argomento 3.0 «Introduzione alla Parte 3: Metriche di service desk, incidenti e richieste»). Questa parte guarda l'altro lato della stessa medaglia: come le modifiche entrano nell'ambiente, con quale frequenza causano problemi e quanto bene l'organizzazione apprende, in modo che gli stessi problemi non si ripresentino.

La consegna continua e ITIL affrontano questo terreno da direzioni diverse. La pratica agile privilegia la consegna continua del software in piccole modifiche e considera il feedback rapido una misura di sicurezza. Le pratiche ITIL come la gestione dei problemi, l'abilitazione delle modifiche e la gestione dei rilasci esistono per proteggere la stabilità e per trovare e rimuovere le cause degli incidenti. Le metriche di questa parte consentono di verificare entrambi i punti di vista sulla stessa evidenza. Se le modifiche frequenti sono sicure, le misure di fallimento e di rilavorazione lo mostreranno. Se un controllo rallenta la consegna senza ridurre il rischio, lo mostreranno invece le misure di approvazione e di lead time.

Due avvertenze attraversano l'intera parte. Velocità e stabilità vanno lette insieme, perché un numero che migliora l'una danneggiando in silenzio l'altra è un cattivo scambio. Anche le misure di tempo vanno lette come distribuzioni con percentili, come illustrato nella Parte 1 (si veda l'Argomento 1.6 «Alfabetizzazione statistica per le metriche di servizio»). Ogni metrica qui descrive un team, un servizio o un sistema. Nessuna classifica un individuo e nessuna è un obiettivo da perseguire in isolamento (si veda l'Argomento 1.2 «La legge di Goodhart e la psicologia delle metriche»).

Argomenti di questa parte

  • 4.1 Metriche di gestione dei problemi: problemi aperti e chiusi, riuso degli errori noti, ricorrenza e tempo alla correzione definitiva.
  • 4.2 Metriche di postmortem e apprendimento: completamento delle revisioni, chiusura delle azioni, ricorrenza delle cause e segnali di apprendimento senza colpa.
  • 4.3 Metriche di abilitazione delle modifiche: volume delle modifiche per tipo, lead time di approvazione, quota di modifiche standard e automazione dell'approvazione.
  • 4.4 Fallimenti delle modifiche e rilavorazioni: tasso di fallimento delle modifiche, quota di modifiche d'emergenza, tassi di rollback e di hotfix e definizioni coerenti di fallimento.
  • 4.5 Metriche di rilascio e distribuzione: frequenza di distribuzione, frequenza di rilascio, uso dei feature flag, lead time di rilascio e separazione tra distribuzione e rilascio.
  • 4.6 Debito tecnico ed errori noti: backlog degli errori noti, stock e interessi del debito e definizione delle priorità delle correzioni rispetto al lavoro sulle funzionalità.

Come questi argomenti si collegano tra loro

La parte si divide in due metà che dipendono l'una dall'altra. Gli Argomenti 4.1 e 4.2 riguardano l'apprendimento: come gli incidenti vengono ricondotti alle cause e come le revisioni si trasformano in correzioni portate a termine. Gli Argomenti 4.3, 4.4 e 4.5 riguardano le modifiche: come vengono approvate, con quale frequenza falliscono e come arrivano agli utenti. L'Argomento 4.6 unisce le due metà, perché il debito e gli errori noti che l'apprendimento porta alla luce sono gli stessi elementi che competono con le nuove funzionalità per il tempo del team.

L'accoppiamento più importante è quello tra velocità e fallimento. La frequenza di distribuzione e di rilascio dell'Argomento 4.5 (si veda l'Argomento 4.5 «Metriche di rilascio e distribuzione») descrive con quale frequenza le modifiche raggiungono la produzione, e il programma di ricerca DORA abbina tali misure di throughput a misure di stabilità (si veda l'Argomento 2.8 «Metriche DORA»). L'Argomento 4.4 (si veda l'Argomento 4.4 «Fallimenti delle modifiche e rilavorazioni») fornisce il lato della stabilità. Un team che distribuisce più spesso mentre i suoi tassi di fallimento e di rilavorazione restano invariati o calano sta migliorando. Un team la cui frequenza sale mentre salgono con essa anche rollback e hotfix sta spostando il costo altrove.

L'abilitazione delle modifiche si colloca tra i due. L'Argomento 4.3 (si veda l'Argomento 4.3 «Metriche di abilitazione delle modifiche») misura il lato del controllo: quanto tempo richiede l'approvazione, quante modifiche sono preautorizzate come standard e quanta parte dell'approvazione è automatizzata. Il lead time di approvazione è il costo di un controllo, e il tasso di fallimento delle modifiche dell'Argomento 4.4 è la prova che quel controllo funziona. Lette insieme, mostrano se un passaggio di approvazione oneroso sta acquistando sicurezza o sta soltanto aggiungendo ritardo, e se un'approvazione più leggera e automatizzata ha mantenuto stabile il fallimento.

Gli argomenti sull'apprendimento fanno da guardia agli altri. La gestione dei problemi dell'Argomento 4.1 (si veda l'Argomento 4.1 «Metriche di gestione dei problemi») misura la ricorrenza e il tempo alla correzione definitiva, che è la prova di lungo periodo del fatto che la gestione degli incidenti della Parte 3 stia rimuovendo le cause e non soltanto ripristinando il servizio. L'Argomento 4.2 (si veda l'Argomento 4.2 «Metriche di postmortem e apprendimento») verifica che le revisioni avvengano davvero e che le loro azioni vengano chiuse, poiché una revisione completata senza seguito non cambia nulla. Contare le revisioni o i problemi chiusi è facile da manipolare, perciò questi conteggi vanno letti accanto alla ricorrenza delle stesse cause, che è più difficile da falsificare.

Infine, l'Argomento 4.6 (si veda l'Argomento 4.6 «Debito tecnico ed errori noti») spiega perché le altre misure derivano. Gli errori noti non affrontati e il debito accumulato aumentano la probabilità di fallimento e il costo di ogni modifica successiva. Leggere il backlog degli errori noti accanto al tasso di fallimento delle modifiche mostra quando il rinvio delle correzioni ha cominciato a rallentare la consegna.

Le parti successive si basano su queste misure. Gli obiettivi di livello di servizio e i budget di errore della Parte 5 forniscono un limite di affidabilità rispetto al quale valutare il ritmo delle modifiche, mentre la Parte 11 mostra come introdurre queste misure senza generare paura.