Listes de vérification
Trois listes de vérification pour l'équipe du programme : une pour revoir une seule métrique, une pour lancer un tableau de bord et une pour auditer un programme de métriques. Employez-les comme invitations à une conversation avec les équipes, non comme un formulaire à remplir et à classer. Adaptez-les, et laissez de côté les éléments qui ne conviennent pas à votre contexte.
Liste de vérification de la revue d'une métrique
Employez-la avant qu'une métrique soit adoptée et à chaque revue périodique (voir le sujet 1.4, Gouvernance et responsabilité des métriques).
But
- La métrique répond à une question qu'un public nommé a posée.
- La décision qu'elle devrait éclairer est écrite.
- Elle mesure un résultat, ou elle est clairement associée à un résultat (voir le sujet 1.3, Les résultats plutôt que la production : choisir ce qu'il faut mesurer).
Définition
- Une définition écrite, une formule, une unité et une source de données existent.
- Les règles d'horloge ou de frontière sont explicites (quand le comptage commence, s'arrête et se met en pause).
- Un responsable est nommé, ainsi qu'une personne à qui demander quand le chiffre paraît faux.
- Les limites connues des données sont consignées, y compris les lacunes et les changements dans la manière dont elles ont été saisies.
Honnêteté
- Le vecteur de détournement le plus probable est écrit.
- Une métrique ou pratique de garde-fou associée est en place.
- La métrique décrit une équipe, un service ou un système, et ne classe jamais des individus.
- Les mesures de temps montrent une médiane et un percentile élevé, avec la taille de l'échantillon (voir le sujet 1.6, Culture statistique pour les métriques de service).
- Une ligne de base de plusieurs périodes existe, pour que les changements se lisent par rapport à la variation ordinaire.
Usage
- L'équipe qui fait le travail voit d'abord le chiffre et a aidé à le définir.
- La dernière revue a mené à une décision consignée, y compris la décision d'attendre.
- Une condition de retrait de la métrique est écrite.
Liste de vérification du lancement d'un tableau de bord
Employez-la avant qu'un tableau de bord soit montré à son public (voir le sujet 11.1, Concevoir un tableau de bord de métriques de service).
Public et contenu
- Le public et ses questions sont écrits, et le public a aidé à revoir une esquisse.
- La vue compte au plus environ neuf mesures, le détail étant un cran plus bas.
- L'ensemble est équilibré entre flux, qualité, fiabilité, expérience et coût.
- Chaque mesure a une compagne qui garde contre sa distorsion probable.
Clarté
- Chaque valeur montre la tendance et le contexte, les événements étant notés.
- Chaque mesure a une définition, une source, un responsable, une heure d'actualisation et des lacunes connues à un clic.
- Les objectifs sont montrés comme des références, et toute couleur d'état suit une règle énoncée qui tient compte de la variation.
- La décoration qui n'ajoute aucune information a été retirée.
Confiance et exploitation
- La charte a été convenue, et les vues au niveau individuel sont désactivées (voir le sujet 11.3, Déployer les métriques sans semer la peur).
- Les équipes ont vu leurs propres données et ont eu le temps de les corriger.
- Les données sont tirées automatiquement, avec des contrôles de fraîcheur et un rapprochement avec la source (voir le sujet 11.2, Panorama des outils).
- Un responsable nommé, une date de revue et une voie de contestation existent.
- Les rapports que ce tableau de bord remplace ont une date de retrait.
Liste de vérification de l'audit d'un programme
Employez-la deux fois par an, avec les équipes, à côté de l'autoévaluation (voir le sujet 12.5, Autoévaluation de la maturité).
But et confiance
- Le programme a un commanditaire et une charte écrite que les dirigeants suivent.
- Les violations signalées de la charte ont été traitées et leurs suites publiées sans noms.
- Les sondages d'équipes et les signalements de quasi-incidents ne suggèrent pas une peur croissante.
- Aucun classement d'équipes ou d'individus n'existe nulle part dans les outils ou les diapositives de l'organisation.
Mesures et données
- Chaque équipe peut nommer les décisions que ses mesures ont éclairées le dernier trimestre.
- Les définitions sont gardées dans un catalogue portable, avec des responsables.
- La couverture des sources, la fiabilité de la chaîne de données et le rapprochement sont vérifiés et visibles.
- Un export des définitions et de l'historique a été testé au cours de la dernière année.
Équilibre et largeur
- Les mesures de résultats côtoient les mesures d'activité dans chaque vue.
- Les mesures liées à l'IA suivent les lignes de base, l'échantillonnage et les résultats vérifiés, non le seul volume (voir le sujet 10.4, Inflation des métriques et dilution de la qualité).
- Des mesures de coût, de risque et de personnes sont présentes là où elles comptent, et aucune ne sert à classer des individus.
Amélioration
- Les actions d'amélioration de la dernière revue sont achevées ou abandonnées avec une raison.
- Des mesures et des rapports ont été retirés au cours de la dernière année.
- L'effort demandé aux équipes pour la mesure a été estimé et leur est acceptable.
- Le programme lui-même a été revu avec les équipes, et le plan a été changé en conséquence (voir le sujet 11.5, Une feuille de route d'adoption progressive).