Construire un Quality Intelligence Dashboard qui déclenche des décisions
Brouillon du blog Shift Op, article 5 sur 5 de la série « Piloter la qualité » · @October 12, 2026 · @Jeff
Tu as maintenant des indicateurs pour trois couches : ce que vit l'utilisateur, la fluidité de la livraison, la santé de tes tests et de tes bugs. Reste à les assembler dans un tableau de bord que quelqu'un utilise vraiment. Un tableau de bord qui ne change aucune décision est une affiche : il est beau, il est plein de courbes, et il ne sert à rien le lundi matin.
Ce dernier article réunit les trois couches, montre à quoi ressemble un tableau de bord d'une page sur la boutique fictive de la série, et décrit le rituel qui le fait vivre.
Cet article fait partie d'une série de cinq articles sur le pilotage de la qualité : métriques, reporting et décisions. C'est le dernier. Les cinq articles se lisent idéalement dans l'ordre, mais chacun reste utile pris isolément.
Un tableau de bord sert à décider
J'appelle Quality Intelligence la capacité à transformer des signaux qualité en décisions actionnables. Cela revient à relier chaque indicateur à quatre choses : une décision, un risque, une action et un seuil. Si l'un des quatre manque, l'indicateur reste un commentaire.
Le test qui en découle est volontairement simple. Pour chaque chiffre de ton tableau, demande-toi ce que l'équipe fera différemment s'il passe au rouge. Si la réponse est « rien », enlève-le. C'est le tri en quatre questions du premier article, appliqué à l'ensemble.
Mon repère de départ : trois décisions récurrentes, cinq risques majeurs, au plus huit indicateurs, et pas plus d'une douzaine de graphiques. Au-delà, je soupçonne un tableau fait pour montrer plutôt que pour décider.
Les trois couches, reprises des articles précédents
Couche | Question qu'elle pose | Exemples vus dans la série | Nombre reprère |
A, utilisateur et business | Qu'est-ce que l'utilisateur vit vraiment ? | Incidents de production, taux d'échappement, tickets de support, abandon sur un parcours clé (article 2) | 1 à 3 |
B, livraison et flux | Livrons-nous sans nous faire peur ? | Taux d'échec des changements, délai de changement, temps de rétablissement, durée de la suite dans le pipeline (article 3) | 2 à 4 |
C, diagnostic | Qu'est-ce qui explique les deux premières ? | Tests instables, tests désactivés, âge des bugs, capacité absorbée par la correction, modules fragiles (article 4) | 3 à 6 |
La couche C est celle qui doit rester la plus petite. Elle n'existe que pour expliquer les deux autres : un signal de diagnostic qui n'explique aucune alerte de A ou de B est du bruit.
Le tableau de bord d'une boutique fictive, en une page
Voici à quoi peut ressembler un tableau de bord de huit indicateurs pour l'équipe de la boutique fictive. Toutes les valeurs et tous les seuils sont inventés pour l'exemple : tes seuils viendront de ton propre historique.
Couche | Indicateur | Valeur | Seuil d'alerte | Propriétaire | Action si l'alerte se déclenche |
A | Incidents de production touchant des utilisateurs (30 jours) | 2 | 3 ou plus | Exploitation | Revue avec le produit, gel des livraisons sur le parcours touché |
A | Taux d'échappement (trimestre) | 25 % | Plus de 30 % | Lead QA avec lead dev | Analyse des bugs échappés, renforcement des tests |
A | Tickets de support sur le paiement (semaine) | 12 | Plus de 5 | Support avec le produit | Priorisation d'une correction et d'un test de non-régression |
B | Taux d'échec des changements (mois) | 18 % | Plus de 15 % | Lead dev | Durcir les portes de qualité sur les parcours critiques |
B | Durée de la suite dans le pipeline | 40 min | Plus de 30 min | Lead QA | Scinder la suite, retirer les doublons |
C | Part de tests instables | 7 % | Plus de 5 % | Responsable de l'automatisation | Suspendre l'ajout de tests, stabiliser |
C | Tests désactivés depuis plus de 3 mois | 4 | Plus de 0 | Lead QA | Réparer ou supprimer, en notant le risque accepté |
C | Part de capacité absorbée par la correction de bugs | 30 % | Plus de 35 % | Product owner | Arbitrer entre nouvelles fonctionnalités et assainissement |
Cinq indicateurs sur huit sont en alerte, ce qui paraît beaucoup. Le tableau sert justement à voir que ces alertes parlent de la même chose : le paiement. Les tickets de support montent après la livraison du défaut connu sur les cartes refusées, le taux d'échec des changements dépasse son seuil, et le module de paiement concentre la moitié des bugs rouverts du trimestre. Aucun chiffre ne dit quoi décider à lui seul, mais leur lecture ensemble répond à une question concrète : avant d'ajouter le moindre test ailleurs, que fait-on sur le paiement ?
La décision, elle, se prend en réunion avec ceux qui la portent. Le tableau de bord leur donne la matière, pas le verdict.
Le rituel : qui regarde quoi, et quand
Un tableau de bord vit dans de petits moments réguliers, pas dans une grande présentation trimestrielle.
- Cinq minutes en daily : un seul point sur le risque qui monte.
- Trente minutes par semaine : les décisions d'investissement qualité. On regarde les alertes, on choisit une ou deux actions, on désigne qui les porte.
- Après chaque incident : on ajuste un seuil, on ajoute un risque, on retire un indicateur qui n'a rien vu venir.
C'est aussi ici que se joue le reporting du premier article : toute la matière ne va pas à tout le monde. La direction reçoit trois ou quatre chiffres avec la décision qu'on attend d'elle. Le product owner reçoit les indicateurs de la couche A et leur lecture en comportements utilisateur. L'équipe de développement reçoit les couches B et C, avec les traces et les causes. Le tableau est le même, les lectures changent.
Quand tu présentes un changement d'indicateur, commence par l'incident ou la décision qu'il aurait permis d'anticiper, pas par la métrique.
Quand le tableau de bord ment
Un tableau de bord peut se dégrader sans que personne s'en aperçoive. Les causes sont presque toujours les mêmes.
- Des seuils qui ne bougent plus. Fixés il y a un an, ils ne correspondent plus ni au produit ni à l'équipe. Révise-les après chaque incident.
- Des indicateurs devenus des objectifs. C'est la loi de Goodhart vue dans les articles 1 et 3 : dès qu'on vise le chiffre, on finit par l'optimiser lui plutôt que la qualité.
- Des données saisies à la main et jamais mises à jour. Un chiffre périmé est pire que pas de chiffre, parce qu'il inspire confiance.
- Trop d'indicateurs. Quand tout est suivi, rien n'est lu.
- Aucun propriétaire. Un indicateur qui n'appartient à personne n'est jamais discuté.
Un bon réflexe tous les mois : regarde quelles décisions le tableau a vraiment influencées. Si la réponse est « aucune », ne cherche pas un meilleur graphique. Retire des indicateurs et pose les quatre questions du premier article à ceux qui restent.
À retenir
- Un tableau de bord sert à décider : chaque indicateur est relié à une décision, un risque, une action et un seuil.
- Trois couches, peu d'indicateurs dans chacune : l'utilisateur et le business, la livraison, le diagnostic qui explique les deux autres.
- Lis les indicateurs ensemble : c'est leur recoupement, comme le paiement dans l'exemple, qui oriente la décision.
- Fais vivre le tableau avec un rituel court (cinq minutes en daily, trente minutes par semaine, un ajustement après chaque incident).
- Présente à chaque lecteur la lecture qui le concerne, et retire régulièrement les indicateurs qui n'ont influencé aucune décision.
FAQ
Quel outil utiliser pour construire ce tableau de bord ?
Celui que ton équipe consulte déjà. Un tableur ou une page partagée suffit pour démarrer : l'outil compte moins que le rituel qui l'accompagne.
Combien d'indicateurs au total ?
Mon repère est de huit au maximum et d'une douzaine de graphiques. C'est un point de départ, pas une norme. Le bon nombre est celui que l'équipe lit vraiment.
Comment fixer les seuils sans historique ?
Observe quelques livraisons, pose un seuil provisoire, puis révise-le après chaque incident. Ne recopie pas ceux d'une autre équipe.
Qui doit être propriétaire d'un indicateur ?
Celui qui peut agir quand l'alerte se déclenche, pas forcément la QA. Les tickets de support appartiennent au support, le taux d'échec des changements à l'équipe de développement. La QA porte ceux qui concernent ses tests et sa détection.
Faut-il automatiser la collecte des données ?
Commence à la main, une fois par mois, sur peu d'indicateurs. Automatise ceux que tu consultes chaque semaine : c'est là que l'effort est rentable.
Pour aller plus loin
Piloter la qualité fait partie des responsabilités qu'on découvre en prenant de l'envergure, souvent sans accompagnement. C'est précisément pour cette situation que j'ai créé le Bootcamp Leader QA : découvrir le Bootcamp Leader QA.