9.3 Listas de comprobación

Listas de comprobación de referencia rápida y listas para usar. Copia una en tu propio proceso y adáptala; lo que importa es la cobertura, no la redacción exacta.

Lista de comprobación de revisión de nueva métrica (antes de añadir cualquier métrica a un panel)

La métrica tiene una decisión nombrada a la que informa (tema 1.1)
La métrica está clasificada como diagnóstica o evaluativa, por escrito (tema 1.1)
Si está incentivada, se define una métrica de salvaguarda al mismo tiempo (tema 1.2)
Se ha nombrado el vector de manipulación: cómo un equipo racional haría que este número se vea bien sin mejorar el resultado real (tema 1.2)
La métrica está clasificada como entrada, producción, o resultado (tema 1.3)
La métrica tiene un responsable nombrado y un sistema de origen y método de recopilación documentados (temas 1.4, 1.5)
La métrica usará una mediana o percentil, no un promedio, si los datos subyacentes están sesgados (tema 1.6)
La métrica nunca se usa para la evaluación individual, o ese uso se divulga por separado y explícitamente (tema 1.1)

Lista de comprobación de lanzamiento de panel

El panel tiene una audiencia y decisión nombrada y específica (tema 8.1)
Cada métrica incentivada aparece en la misma vista que su salvaguarda (temas 1.2, 8.1)
Los ejes comienzan en cero a menos que se documente una excepción declarada y visible (tema 1.6)
Se muestra la tendencia a lo largo del tiempo, no una instantánea única (tema 1.6)
El panel tiene un responsable nombrado y una cadencia de revisión (tema 1.4)
Una declaración visible indica para qué no sirve el panel, si es relevante (tema 1.1)
Las fuentes de datos tienen comprobaciones de salud básicas para que un flujo roto no se renderice silenciosamente como actual (tema 1.5)

Lista de comprobación de lanzamiento de programa de métricas

El propósito y los no-objetivos explícitos se comunican antes del lanzamiento, no de manera reactiva (tema 8.3)
Las personas medidas estuvieron involucradas en la selección de métricas (tema 8.3)
El programa empieza en modo solo diagnóstico, con un período de demostración mínimo comprometido (tema 8.3)
Existe un protocolo de respuesta rápido y visible para cualquier futuro incidente de mal uso (tema 8.3)
Se ha seleccionado un equipo piloto que genuinamente se ofreció como voluntario, no uno que fue obligado (tema 8.5)
La gobernanza fundacional (carta, propiedad, política diagnóstica) está en marcha antes de que empiece la instrumentación (temas 1.4, 8.5)

Lista de comprobación de incidentes y análisis retrospectivo

El análisis retrospectivo investiga el sistema, no al individuo (tema 6.2)
La gravedad se clasificó frente a criterios documentados y estandarizados (tema 6.2)
Los tiempos de detección, reconocimiento, y resolución se registran por separado (tema 6.2)
Los elementos de acción son específicos, están asignados, y se rastrean hasta su finalización (tema 6.2)
El análisis retrospectivo se comparte sin miedo a la consecuencia individual (temas 6.2, 8.3)

Lista de comprobación de auditoría de métricas de la era de la IA

Cada métrica del panel se ha probado frente a: “un equipo que usa asistencia de IA intensa pero produce no más valor real mostraría una lectura mejorada aquí” (tema 7.1)
La tasa de fallos de cambio y la tasa de defectos se revisan junto a cualquier aumento en la frecuencia de despliegue o el volumen de commits asistido por IA (tema 7.1)
La capacidad y profundidad de revisión se monitorizan a medida que cambia el volumen de código generado por IA (tema 7.1)
Los defectos escapados se etiquetan por nivel de asistencia de IA para probar, no asumir, si la relación histórica de tasa de defectos todavía se mantiene (temas 7.1, 7.3)
Existen métodos de detección resistentes a los defectos de “parece correcto” (pruebas de mutación, pruebas basadas en propiedades) para las rutas de código intensivas en IA (tema 7.3)
La carta de métricas se ha revisado y actualizado explícitamente para este cambio, sin dejarla derivar sin examinar (temas 1.4, 7.1)

Lista de comprobación de auditoría de programa de métricas (anual)

Cada métrica todavía tiene un responsable nombrado (tema 1.4)
Al menos una métrica se ha retirado en el último ciclo si dejó de ganarse su lugar (tema 1.1)
La evaluación de madurez de cinco dimensiones se ha realizado con honestidad, puntuada por el mínimo, no el promedio (tema 8.4)
Ninguna métrica ha derivado de un uso diagnóstico a uno evaluativo sin una decisión explícita y divulgada (tema 1.1)
Las definiciones se han comprobado puntualmente frente a la instrumentación real en busca de deriva (temas 1.2, 2.4, 5.1, 6.2, 6.4)
La proporción de resultado frente a producción en los paneles principales se ha calculado y revisado (tema 7.4)