9.3 Danh sách kiểm tra

Các danh sách kiểm tra tham chiếu nhanh, dùng ngay. Hãy sao chép một danh sách vào quy trình của riêng bạn và điều chỉnh nó; điều quan trọng là độ bao phủ, không phải cách diễn đạt chính xác.

Danh sách kiểm tra xem xét chỉ số mới (trước khi thêm bất kỳ chỉ số nào vào bảng điều khiển)

Chỉ số có một quyết định có tên mà nó thông tin cho (chủ đề 1.1)
Chỉ số được phân loại là chẩn đoán hoặc đánh giá, bằng văn bản (chủ đề 1.1)
Nếu có động cơ khuyến khích, một chỉ số rào chắn được định nghĩa cùng lúc (chủ đề 1.2)
Vector bị lách đã được gọi tên: một đội hợp lý sẽ làm con số này trông đẹp mà không cải thiện kết quả thật bằng cách nào (chủ đề 1.2)
Chỉ số được phân loại là đầu vào, đầu ra hay kết quả (chủ đề 1.3)
Chỉ số có một người chịu trách nhiệm có tên và một hệ thống nguồn cùng phương pháp thu thập được ghi chép (chủ đề 1.4, 1.5)
Chỉ số sẽ dùng trung vị hoặc bách phân vị, không dùng trung bình, nếu dữ liệu nền bị lệch (chủ đề 1.6)
Chỉ số không bao giờ được dùng để đánh giá cá nhân, hoặc việc dùng đó được công bố riêng và tường minh (chủ đề 1.1)

Danh sách kiểm tra ra mắt bảng điều khiển

Bảng điều khiển có một đối tượng và quyết định cụ thể, có tên (chủ đề 8.1)
Mọi chỉ số có động cơ khuyến khích xuất hiện trên cùng góc nhìn với rào chắn của nó (chủ đề 1.2, 8.1)
Các trục bắt đầu từ không trừ khi một ngoại lệ được nêu, hiển thị được ghi chép (chủ đề 1.6)
Xu hướng theo thời gian được hiển thị, không phải một ảnh chụp đơn lẻ (chủ đề 1.6)
Bảng điều khiển có một người chịu trách nhiệm có tên và một nhịp xem xét (chủ đề 1.4)
Một tuyên bố hiển thị nêu rõ bảng điều khiển không dùng cho việc gì, nếu liên quan (chủ đề 1.1)
Các nguồn dữ liệu có kiểm tra sức khỏe cơ bản để một đường ống hỏng không lặng lẽ hiển thị như đang cập nhật (chủ đề 1.5)

Danh sách kiểm tra triển khai chương trình chỉ số

Mục đích và các phi mục tiêu tường minh được truyền đạt trước khi ra mắt, không phải một cách phản ứng (chủ đề 8.3)
Những người được đo đã tham gia vào việc chọn chỉ số (chủ đề 8.3)
Chương trình bắt đầu ở chế độ chỉ để chẩn đoán, với một giai đoạn chứng minh tối thiểu đã cam kết (chủ đề 8.3)
Một giao thức phản ứng nhanh, hiển thị tồn tại cho mọi sự cố lạm dụng trong tương lai (chủ đề 8.3)
Một đội thí điểm đã được chọn là đội thực sự tình nguyện, không phải đội bị ra lệnh (chủ đề 8.5)
Quản trị nền tảng (hiến chương, quyền sở hữu, chính sách chẩn đoán) đã có trước khi bắt đầu đo đạc (chủ đề 1.4, 8.5)

Danh sách kiểm tra sự cố và hậu kiểm

Cuộc hậu kiểm điều tra hệ thống, không phải cá nhân (chủ đề 6.2)
Mức nghiêm trọng được phân loại theo tiêu chí chuẩn hóa, được ghi chép (chủ đề 6.2)
Thời gian phát hiện, tiếp nhận và giải quyết được ghi lại riêng (chủ đề 6.2)
Các hạng mục hành động cụ thể, được giao và được theo dõi đến khi hoàn thành (chủ đề 6.2)
Cuộc hậu kiểm được chia sẻ mà không sợ hậu quả cá nhân (chủ đề 6.2, 8.3)

Danh sách kiểm tra kiểm toán chỉ số kỷ nguyên AI

Mỗi chỉ số trên bảng điều khiển đã được thử với câu hỏi: “một đội dùng AI hỗ trợ nhiều nhưng không tạo thêm giá trị thật có cho thấy một chỉ số được cải thiện ở đây không” (chủ đề 7.1)
Tỷ lệ thay đổi thất bại và tỷ lệ lỗi được xem xét cùng với mọi mức tăng tần suất triển khai hay khối lượng commit có AI hỗ trợ (chủ đề 7.1)
Năng lực và độ sâu đánh giá được theo dõi khi khối lượng mã do AI tạo ra thay đổi (chủ đề 7.1)
Các lỗi lọt được gắn thẻ theo mức hỗ trợ của AI để kiểm tra, không giả định, rằng mối quan hệ tỷ lệ lỗi lịch sử còn đúng (chủ đề 7.1, 7.3)
Các phương pháp phát hiện chống lại lỗi “trông đúng” (kiểm thử đột biến, kiểm thử dựa trên thuộc tính) có mặt cho các đường đi mã dùng nhiều AI (chủ đề 7.3)
Hiến chương chỉ số đã được xem xét lại và cập nhật tường minh cho sự chuyển dịch này, không để trôi dạt không được xem xét (chủ đề 1.4, 7.1)

Danh sách kiểm tra kiểm toán chương trình chỉ số (hằng năm)

Mọi chỉ số vẫn còn một người chịu trách nhiệm có tên (chủ đề 1.4)
Ít nhất một chỉ số đã bị ngừng trong chu kỳ vừa qua nếu nó thôi xứng đáng chỗ đứng (chủ đề 1.1)
Đánh giá trưởng thành năm chiều đã được tiến hành trung thực, chấm điểm theo giá trị tối thiểu, không phải trung bình (chủ đề 8.4)
Không chỉ số nào trôi từ việc dùng chẩn đoán sang đánh giá mà không có một quyết định tường minh, được công bố (chủ đề 1.1)
Các định nghĩa đã được kiểm tra chọn mẫu so với đo đạc thực tế để tìm sự trôi dạt (chủ đề 1.2, 2.4, 5.1, 6.2, 6.4)
Tỷ lệ kết quả-so-với-đầu ra trên các bảng điều khiển chính đã được tính và xem xét (chủ đề 7.4)