7.0 Introduction à la Partie 7 : Métriques à l’ère de l’IA

Chaque métrique de ce livre jusqu’ici a été construite pour un monde où écrire du code était la ressource rare et laborieuse. Les outils d’IA générative ont changé cette prémisse plus vite que les métriques de la plupart des organisations n’ont rattrapé. Quand un outil peut produire une demande de tirage à l’air plausible en secondes, plusieurs métriques que ce livre couvre dans les parties précédentes, les comptes d’activité le plus directement (sujet 3.4), et dans une mesure réelle la fréquence de déploiement brute (sujet 2.10) et même la couverture de test (sujet 4.2) si poursuivie avec négligence, cessent de mesurer ce qu’elles mesuraient auparavant. Cette partie existe parce qu’un programme de métriques qui ne prend pas explicitement en compte ce changement risque de rapporter avec assurance des chiffres devenus discrètement dénués de sens, ou pire, activement contre-productifs.

Les quatre sujets de cette partie suivent un arc délibéré. Le sujet 7.1 nomme le changement directement et explique pourquoi c’est un changement de paradigme, pas un ajustement incrémental. Le sujet 7.2 couvre comment réellement mesurer si le développement assisté par IA aide, en utilisant la discipline résultats-plutôt-que-production que le sujet 1.3 a établie dès le tout début de ce livre. Le sujet 7.3 nomme les risques nouveaux et spécifiques que ce changement introduit : des métriques qui gonflent sans valeur correspondante, et une dilution de qualité qui dépasse la capacité actuelle de l’industrie à la détecter. Le sujet 7.4 clôt la partie avec la réponse de ce livre à tout ce changement : un virage délibéré vers la télémétrie de résultat comme les métriques qui comptent le plus, précisément parce que le volume de production, cette partie l’argumente tout du long, n’a jamais été la bonne chose à optimiser en premier lieu, et l’IA générative a simplement rendu cette vérité impossible à ignorer plus longtemps.

Pour les grandes équipes, cette partie est urgente plutôt que spéculative. Les organisations de grande entreprise adoptant des assistants de codage IA à l’échelle ont besoin de savoir rapidement si leurs métriques existantes signifient encore ce qu’elles pensent qu’elles signifient ; les organisations de gouvernement, se déplaçant souvent plus prudemment sur l’adoption de l’IA mais faisant face au même changement d’outillage sous-jacent dans l’industrie plus large dans laquelle elles recrutent et contre laquelle elles comparent, ont besoin des conseils de cette partie pour interpréter correctement les repères de l’industrie à mesure que ces repères eux-mêmes changent sous la même pression.

Sujets de cette partie

7.1 Le changement de paradigme de l’IA générative : pourquoi c’est un changement fondamental à ce que plusieurs métriques existantes mesurent, pas seulement un nouvel outil à ajouter à la boîte à outils.
7.2 Mesurer le développement logiciel assisté par IA : comment mesurer si l’assistance IA aide réellement, en utilisant les données de résultat plutôt que le volume de production.
7.3 Risques d’inflation de métriques et de dilution de qualité : les risques nouveaux et spécifiques de manipulation et de qualité que ce changement introduit, et comment s’en protéger.
7.4 La télémétrie de résultat comme la nouvelle métrique-étoile polaire : la réponse de ce livre à tout le changement : un virage délibéré et permanent vers les métriques de résultat à mesure que la production devient bon marché.

Comment ces sujets s’articulent

Le sujet 7.1 établit pourquoi cette partie existe du tout ; le sujet 7.2 donne les conseils de mesure pratiques que le changement exige ; le sujet 7.3 nomme les modes de défaillance spécifiques contre lesquels une organisation doit se protéger à mesure qu’elle adopte le développement assisté par IA ; et le sujet 7.4 généralise la leçon en un principe permanent qui survit à tout outil ou fournisseur spécifique. Cette partie est moins une famille de métriques autonome, de la manière dont les Parties 2 à 6 couvrent chacune un domaine distinct, et plus une lentille appliquée rétroactivement à travers tout le livre : l’activité, la production, et même certaines métriques de résultat de chaque sujet précédent ont besoin d’être réexaminées à travers les questions de cette partie à mesure que le développement assisté par IA devient une pratique standard, pas exceptionnelle.

Cette partie se relie le plus directement au principe résultats-plutôt-que-production du sujet 1.3 et à la mise en garde contre les métriques d’activité du sujet 3.4, tous deux que cette partie traite comme ayant été corrects depuis le début, maintenant prouvés urgemment ainsi par un changement technologique qui rend leur opposé, mesurer par volume, activement dangereux plutôt que simplement sous-optimal. Elle prépare aussi les conseils pratiques de la Partie 8 sur la construction d’un programme de métriques, puisqu’un tableau de bord conçu avant ce changement nécessite une reconsidération délibérée, pas seulement un ajustement incrémental, à la lumière de ce que cette partie couvre.