9.3 चेकलिस्ट

तैयार-उपयोग त्वरित-संदर्भ चेकलिस्ट। एक को अपनी प्रक्रिया में कॉपी करें और इसे अनुकूलित करें; बिंदु कवरेज है, सटीक शब्दावली नहीं।

नई मेट्रिक समीक्षा चेकलिस्ट (किसी भी मेट्रिक को डैशबोर्ड में जोड़ने से पहले)

मेट्रिक के पास एक नामित निर्णय है जिसे यह सूचित करता है (विषय 1.1)
मेट्रिक को लिखित रूप में निदानात्मक या मूल्यांकनात्मक के रूप में वर्गीकृत किया गया है (विषय 1.1)
यदि प्रोत्साहित किया गया है, तो एक गार्डरेल मेट्रिक एक ही समय पर परिभाषित है (विषय 1.2)
चालाकी वेक्टर का नामकरण किया गया है: एक तर्कसंगत टीम वास्तविक परिणाम सुधारे बिना इस संख्या को कैसे अच्छा दिखाएगी (विषय 1.2)
मेट्रिक को इनपुट, आउटपुट, या परिणाम के रूप में वर्गीकृत किया गया है (विषय 1.3)
मेट्रिक के पास एक नामित स्वामी और एक दस्तावेज़ीकृत स्रोत प्रणाली और संग्रहण विधि है (विषय 1.4, 1.5)
यदि अंतर्निहित डेटा तिरछा है, तो मेट्रिक एक माध्यिका या प्रतिशतक का उपयोग करेगा, औसत का नहीं (विषय 1.6)
मेट्रिक का उपयोग कभी व्यक्तिगत मूल्यांकन के लिए नहीं किया जाता, या वह उपयोग अलग से और स्पष्ट रूप से प्रकट किया गया है (विषय 1.1)

डैशबोर्ड लॉन्च चेकलिस्ट

डैशबोर्ड के पास एक नामित, विशिष्ट दर्शक और निर्णय है (विषय 8.1)
हर प्रोत्साहित मेट्रिक इसके गार्डरेल के समान दृश्य पर दिखाई देता है (विषय 1.2, 8.1)
अक्ष शून्य से शुरू होते हैं जब तक कि एक बताया गया, दृश्यमान अपवाद दस्तावेज़ीकृत न हो (विषय 1.6)
समय के साथ रुझान दिखाया गया है, एक एकल स्नैपशॉट नहीं (विषय 1.6)
डैशबोर्ड के पास एक नामित स्वामी और एक समीक्षा आवृत्ति है (विषय 1.4)
यदि प्रासंगिक हो, तो एक दृश्यमान कथन बताता है कि डैशबोर्ड किसके लिए नहीं है (विषय 1.1)
डेटा स्रोतों के पास बुनियादी स्वास्थ्य जाँच है ताकि एक टूटी हुई पाइपलाइन चुपचाप वर्तमान के रूप में प्रस्तुत न हो (विषय 1.5)

मेट्रिक्स कार्यक्रम रोलआउट चेकलिस्ट

उद्देश्य और स्पष्ट गैर-लक्ष्य लॉन्च से पहले संप्रेषित किए गए हैं, प्रतिक्रियात्मक रूप से नहीं (विषय 8.3)
जिन लोगों को मापा जा रहा है वे मेट्रिक चयन में शामिल थे (विषय 8.3)
कार्यक्रम केवल-निदानात्मक मोड में शुरू होता है, एक प्रतिबद्ध न्यूनतम सिद्ध करने की अवधि के साथ (विषय 8.3)
किसी भी भविष्य की दुरुपयोग घटना के लिए एक तेज़, दृश्यमान प्रतिक्रिया प्रोटोकॉल मौजूद है (विषय 8.3)
एक पायलट टीम चुनी गई है जिसने वास्तव में स्वेच्छा से भाग लिया, एक ऐसी नहीं जिसे अनिवार्य किया गया था (विषय 8.5)
इंस्ट्रूमेंटेशन शुरू होने से पहले बुनियादी गवर्नेंस (चार्टर, स्वामित्व, निदानात्मक नीति) जगह पर है (विषय 1.4, 8.5)

घटना और पोस्टमार्टम चेकलिस्ट

पोस्टमार्टम प्रणाली की जाँच करता है, व्यक्ति की नहीं (विषय 6.2)
गंभीरता को दस्तावेज़ीकृत, मानकीकृत मानदंडों के विरुद्ध वर्गीकृत किया गया था (विषय 6.2)
पता लगाने, स्वीकृति, और समाधान समय अलग-अलग दर्ज किए गए हैं (विषय 6.2)
कार्य आइटम विशिष्ट, सौंपे गए, और पूर्णता तक ट्रैक किए गए हैं (विषय 6.2)
पोस्टमार्टम व्यक्तिगत परिणाम के डर के बिना साझा किया गया है (विषय 6.2, 8.3)

AI-युग मेट्रिक ऑडिट चेकलिस्ट

हर डैशबोर्ड मेट्रिक का इसके विरुद्ध परीक्षण किया गया है: “क्या भारी AI सहायता का उपयोग करने वाली लेकिन कोई अधिक वास्तविक मूल्य उत्पन्न न करने वाली टीम यहाँ एक सुधरी हुई रीडिंग दिखाएगी” (विषय 7.1)
AI-सहायता प्राप्त डिप्लॉयमेंट फ़्रीक्वेंसी या कमिट मात्रा में किसी भी वृद्धि के साथ चेंज फ़ेल्योर रेट और दोष दर की समीक्षा की जाती है (विषय 7.1)
जैसे-जैसे AI-जनित कोड मात्रा बदलती है, समीक्षा क्षमता और गहराई की निगरानी की जाती है (विषय 7.1)
एस्केप्ड दोषों को AI-सहायता स्तर द्वारा टैग किया जाता है यह परीक्षण करने के लिए, मान लेने के लिए नहीं, कि क्या ऐतिहासिक दोष-दर संबंध अभी भी क़ायम है (विषय 7.1, 7.3)
“सही दिखने वाले” दोषों के प्रति प्रतिरोधी पता लगाने की विधियाँ (म्यूटेशन परीक्षण, प्रॉपर्टी-आधारित परीक्षण) AI-भारी कोड पथों के लिए जगह पर हैं (विषय 7.3)
मेट्रिक्स चार्टर को इस बदलाव के लिए स्पष्ट रूप से पुनः देखा और अद्यतन किया गया है, बिना जाँचे भटकने नहीं दिया गया (विषय 1.4, 7.1)

मेट्रिक्स कार्यक्रम ऑडिट चेकलिस्ट (वार्षिक)

हर मेट्रिक के पास अभी भी एक नामित स्वामी है (विषय 1.4)
यदि एक मेट्रिक ने अपना महत्व अर्जित करना बंद कर दिया है, तो पिछले चक्र में कम-से-कम एक मेट्रिक को सेवामुक्त किया गया है (विषय 1.1)
पाँच-आयामी परिपक्वता मूल्यांकन ईमानदारी से आयोजित किया गया है, न्यूनतम द्वारा स्कोर किया गया, औसत द्वारा नहीं (विषय 8.4)
कोई मेट्रिक बिना किसी स्पष्ट, प्रकट किए गए निर्णय के निदानात्मक से मूल्यांकनात्मक उपयोग की ओर नहीं भटका है (विषय 1.1)
भटकाव के लिए परिभाषाओं की वास्तविक इंस्ट्रूमेंटेशन के विरुद्ध स्पॉट-जाँच की गई है (विषय 1.2, 2.4, 5.1, 6.2, 6.4)
प्राथमिक डैशबोर्डों पर परिणाम-से-आउटपुट अनुपात की गणना और समीक्षा की गई है (विषय 7.4)