8.4 Model aeddfedrwydd ar gyfer rhaglenni metrigau peirianneg

Trosolwg a chymhelliant

Mae pob pwnc yn Rhannau 1 i 7 y llyfr hwn yn gorffen gyda’i model aeddfedrwydd pum lefel ei hun, wedi’i gwmpasu i deulu metrig penodol y pwnc hwnnw. Mae’r pwnc hwn yn gwneud rhywbeth gwahanol: mae’n camu’n ôl ac yn gofyn sut olwg sydd ar aeddfedrwydd ar gyfer rhaglen metrigau yn ei chyfanrwydd, y gallu sefydliadol sy’n cynhyrchu, llywodraethu, a gweithredu ar sail yr holl fetrigau unigol hynny gyda’i gilydd. Gall sefydliad fod ar Lefel 4 ar aeddfedrwydd metrig DORA unigol tra’n dal i fod ar Lefel 1 ar aeddfedrwydd rhaglen gyffredinol, os, er enghraifft, mae ganddo offeryniad rhagorol ond dim llywodraethiant (pwnc 1.4), neu fetrigau unigol rhagorol ond cyflwyniad wedi’i yrru gan ofn (pwnc 8.3) sydd wedi llygru’r data sylfaenol ni waeth pa mor dda y cafodd pob metrig ei ddylunio.

Mae model y pwnc hwn wedi’i adeiladu o amgylch pum dimensiwn sy’n torri ar draws pob teulu metrig unigol y mae’r llyfr hwn yn ymdrin ag ef: llywodraethiant a pherchnogaeth (pwnc 1.4), ansawdd offeryniad (pwnc 1.5), cydbwysedd canlyniad-yn-erbyn-cynnyrch (pwnc 1.3, pwnc 7.4), ymddiriedaeth ddiwylliannol (pwnc 8.3), a gwelliant parhaus (y ddisgyblaeth ddiddymu ac adolygu a sefydlodd pwnc 1.1 ar ddechrau’r llyfr hwn). Yn realistig, y lleiafswm ar draws y pum dimensiwn hyn yw aeddfedrwydd cyffredinol rhaglen sefydliad, nid y cyfartaledd, gan y gall gwendid difrifol mewn unrhyw un, yn enwedig ymddiriedaeth ddiwylliannol, danseilio gwerth cryfder ym mhob un o’r lleill, yn union fel y dadleuodd pwnc 8.3 yn uniongyrchol.

I dimau mawr, mae’r model cyfunol hwn yn rhoi offeryn sengl, onest i arweinyddiaeth ar gyfer hunanasesiad sefydliadol, sy’n wahanol i ac yn ategu’r gwiriadau aeddfedrwydd pwnc-wrth-bwnc y mae’r llyfr hwn yn eu darparu drwyddo draw. Mae sefydliadau menter yn cymharu aeddfedrwydd metrigau ar draws unedau busnes, a sefydliadau llywodraeth yn adrodd aeddfedrwydd rhaglen i gyrff goruchwylio, ill dau’n elwa o’r asesiad sengl, croestoriadol hwn yn hytrach na’u bod angen crynhoi deugain a phump o ddarlleniadau aeddfedrwydd lefel pwnc ar wahân yn ddarlun cyffredinol cydlynol eu hunain.

Egwyddorion allweddol

Lleiafswm ar draws ei ddimensiynau yw aeddfedrwydd rhaglen, nid y cyfartaledd. Mae gwendid difrifol mewn ymddiriedaeth ddiwylliannol yn tanseilio cryfder ym mhobman arall.
Y pum dimensiwn croestoriadol yw llywodraethiant, offeryniad, cydbwysedd canlyniad, ymddiriedaeth ddiwylliannol, a gwelliant parhaus. Mae pob dimensiwn yn tynnu ynghyd edafedd o lawer o bynciau unigol.
Mae’r model hwn yn ategu, nid yn disodli, y modelau aeddfedrwydd lefel pwnc unigol. Defnyddiwch y ddau gyda’i gilydd ar gyfer darlun cyflawn.
Dylai hunanasesiad fod yn onest ac yn benodol, nid yn ymgeisiol. Sgoriwch lle rydych chi mewn gwirionedd, gan ddefnyddio tystiolaeth bendant, nid lle rydych chi’n bwriadu bod.
Mae symud rhwng lefelau angen buddsoddiad bwriadus, nid dim ond amser yn mynd heibio; nid yw aeddfedrwydd yn cronni’n awtomatig.

Argymhellion

Asesu pob un o’r pum dimensiwn yn annibynnol, gan ddefnyddio tystiolaeth bendant

Ar gyfer llywodraethiant, gwiriwch a oes gan bob metrig arwyddocaol berchennog enwedig a siarter wedi’i ddogfennu (pwnc 1.4). Ar gyfer offeryniad, gwiriwch a yw metrigau’n dod o ffynonellau awtomataidd yn hytrach nag hunanadrodd lle bynnag y bo modd (pwnc 1.5). Ar gyfer cydbwysedd canlyniad, cyfrifwch gymhareb wirioneddol metrigau wedi’u pwysoli tuag at ganlyniadau i’r rhai wedi’u pwysoli tuag at allbwn ar eich prif ddangosfyrddau (pwnc 7.4). Ar gyfer ymddiriedaeth ddiwylliannol, aseswch yn onest a yw eich hanes cyflwyno erioed wedi cynnwys defnydd cosbol, heb ei drin o fetrig a sut y cafodd ei drin (pwnc 8.3). Ar gyfer gwelliant parhaus, gwiriwch a oes gan eich sefydliad hanes wedi’i ddogfennu o ddiddymu metrigau a beidiodd â bod yn werth eu cadw (pwnc 1.1). Sgoriwch bob dimensiwn yn annibynnol cyn eu cyfuno.

Cymryd y lleiafswm ar draws dimensiynau fel eich sgôr cyffredinol onest

Gwrthsefwch y demtasiwn i gyfartaleddu eich pum sgôr dimensiwn i mewn i un cyfansawdd sengl, mwy dymunol. Nid yw rhaglen gydag offeryniad rhagorol (Lefel 4) ond ymddiriedaeth ddiwylliannol wan (Lefel 1), mewn unrhyw ystyr ystyrlon, yn rhaglen Lefel 2 na 3; mae’r dimensiwn gwan yn tanseilio gwerth y rhai cryfach yn weithredol, gan nad yw data na ellir ymddiried ynddo, wedi’i lygru gan chwarae wedi’i yrru gan ofn, yn cael ei achub gan gael ei gasglu ag offeryniad rhagorol. Adroddwch y lleiafswm yn onest, hyd yn oed os yw’n cynhyrchu darlun cyffredinol llai dymunol na’r hyn y byddai cyfartaledd yn ei gynhyrchu.

Defnyddio’r model hwn ochr yn ochr â, nid yn lle, y modelau lefel pwnc

Mae’r model cyfunol hwn yn ateb “pa mor aeddfed yw ein rhaglen gyffredinol”; mae’r modelau lefel pwnc unigol drwy Rannau 2 i 8 yn ateb “pa mor aeddfed yw ein hymarfer ar gyfer y metrig penodol hwn.” Defnyddiwch y ddau gyda’i gilydd: y model cyfunol i flaenoriaethu pa ddimensiwn croestoriadol sydd fwyaf angen buddsoddiad, a’r modelau lefel pwnc i nodi pa deuluoedd metrig penodol sydd fwyaf angen sylw o fewn y dimensiwn hwnnw.

Ail-ymweld â’r asesiad ar gadwyn benodol, nid dim ond pan gaiff ei annog gan argyfwng

Wrth ddilyn disgyblaeth llywodraethiant gyson y llyfr hwn (pwnc 1.4), ail-aseswch aeddfedrwydd rhaglen ar gadwyn reolaidd, blynyddol yn gyffredin, yn hytrach na dim ond ar ôl i argyfwng (digwyddiad chwarae a ddarganfyddir, adroddiad cyhoeddus sy’n niweidio hygrededd) orfodi’r cwestiwn. Mae rhaglen sy’n archwilio ei aeddfedrwydd ei hun yn adweithiol yn unig yn colli’r cyfle i ddal a mynd i’r afael â dimensiwn sy’n gwanhau cyn iddo gynhyrchu digwyddiad gwirioneddol, drud.

Trin sgôr isel yn onest fel man cychwyn ar gyfer buddsoddiad, nid gradd fethiant

Wrth ddilyn fframio diagnostig, nid gwerthusol, a sefydlodd pwnc 1.1 ar gyfer y llyfr cyfan hwn, defnyddiwch sgôr aeddfedrwydd isel, ar unrhyw ddimensiwn, fel man cychwyn ar gyfer cynllun buddsoddi bwriadus (map llwybr mabwysiadu pwnc 8.5 yw’r cam nesaf uniongyrchol), nid fel dyfarniad i deimlo’n wael amdano. Bydd y rhan fwyaf o sefydliadau, wedi’u hasesu’n onest, yn canfod gwendidau gwirioneddol yn rhywle yn y model hwn; y buddsoddiad wedi’i dargedu yw’r ymateb cynhyrchiol, nid amddiffynoldeb am y sgôr.

Cyfnewidiadau: manteision ac anfanteision

Dull	Manteision	Anfanteision
Cyfartaleddu’r pum sgôr dimensiwn	Yn cynhyrchu rhif sengl, syml, mwy dymunol	Yn cuddio gwendid critigol mewn un dimensiwn sy’n tanseilio’r gweddill
Cymryd y lleiafswm ar draws dimensiynau	Onest, gweithredadwy, yn nodi’r cyfyngiad gwirioneddol yn gywir	Gall deimlo’n ddigalon os yw un dimensiwn ymhell ar ei hôl hi o’i gymharu â’r lleill
Defnyddio dim ond modelau lefel pwnc	Arweiniad manwl, penodol i fetrig	Yn colli’r farn groestoriadol o iechyd rhaglen gyffredinol
Defnyddio dim ond y model cyfunol hwn	Syml, lefel uchel	Yn colli’r manylion penodol, gweithredadwy y mae’r modelau lefel pwnc yn eu darparu

Y prif densiwn yw symlrwydd yn erbyn gonestrwydd, gan adleisio rhybudd pwnc 5.5 yn erbyn rhif sengl, ffug fanwl gywir. Mae sgôr wedi’i chyfartaleddu’n symlach ac yn fwy cyfforddus i’w adrodd, ond mae’n cuddio’n weithredol y cyfyngiad gwirioneddol ar ddibynadwyedd a gwerth cyffredinol eich rhaglen. Datryswch y tensiwn o blaid gonestrwydd: adroddwch y lleiafswm, a defnyddiwch y model cyfunol hwn a’r modelau lefel pwnc unigol gyda’i gilydd ar gyfer darlun cyflawn, cywir, gweithredadwy.

Cwestiynau i’w trafod gyda’ch tîm

Wedi’u hasesu’n onest ac yn annibynnol, pa lefel y mae pob un o’n pum dimensiwn, llywodraethiant, offeryniad, cydbwysedd canlyniad, ymddiriedaeth ddiwylliannol, a gwelliant parhaus, yn ei sgorio mewn gwirionedd? Ewch drwy bob dimensiwn yn glir, gan ddefnyddio tystiolaeth bendant yn hytrach nag argraff, cyn eu cyfuno’n asesiad cyffredinol.
Beth yw ein dimensiwn gwannaf, ac a yw hynny’n cyd-fynd â’n greddf am iechyd cyffredinol ein rhaglen, neu a yw’n datgelu rhywbeth nad ydym wedi’i enwi’n uniongyrchol o’r blaen? Gallai sgôr isel mewn ymddiriedaeth ddiwylliannol yn benodol, er enghraifft, danseilio hyder mewn data sydd fel arall yn edrych yn rhagorol yn dechnegol.
A ydym wedi bod yn cyfartaleddu ein cryfderau a’n gwendidau i mewn i ddarlun cyffredinol mwy dymunol, yn hytrach nag adrodd ein dimensiwn gwannaf yn onest fel y cyfyngiad gwirioneddol? Byddwch yn onest ynghylch sut y mae eich sefydliad wedi trafod ei aeddfedrwydd metrigau ei hun o’r blaen.
Pryd wnaethom ni ail-asesu ein haeddfedrwydd rhaglen gyffredinol yn ffurfiol ddiwethaf, a gafodd ei annog gan argyfwng neu gan gadwyn reolaidd, fwriadus? Os mai dim ond wedi’i annog gan argyfwng, trafodwch sut olwg fyddai ar gadwyn asesu reolaidd wrth symud ymlaen.
Sut olwg fyddai ar fuddsoddiad wedi’i dargedu yn ein dimensiwn gwannaf, yn benodol, ar gyfer y chwarter nesaf? Symudwch yn uniongyrchol o asesiad i weithredu, gan gysylltu diagnosis y pwnc hwn â map llwybr mabwysiadu pwnc 8.5.
Sut byddai ein hunanasesiad yn cymharu ag adolygiad allanol onest gan rywun y tu allan i’n sefydliad? Mae’r cwestiwn hwn yn profi a all eich asesiad mewnol fod yn agored i rywfaint o’r un rhagfarn optimistaidd y mae’r llyfr hwn wedi rhybuddio yn ei erbyn drwyddo draw, yn werth ei wirio’n gyfnodol gyda safbwynt allanol gwirioneddol.

Lens sector

Cwmni newydd. Mae asesiad pum dimensiwn ffurfiol yn debygol o fod yn ddiangen ar raddfa fach iawn, lle mae ymwybyddiaeth anffurfiol fel arfer yn cwmpasu’r rhan fwyaf o’r hyn y byddai’r model hwn yn ei ddatgelu. Yr arferiad sy’n werth ei fabwysiadu’n gynnar yw bod yn onest ynghylch ymddiriedaeth ddiwylliannol yn benodol, gan fod diwylliant metrigau cynnar cwmni ifanc yn gosod sylfaen sy’n dod yn llawer anoddach ei newid unwaith y mae’r sefydliad wedi tyfu’n sylweddol.

Busnes bach. Mae taith syml, onest, anffurfiol drwy’r pum dimensiwn unwaith y flwyddyn, hyd yn oed heb sgorio ffurfiol, yn cipio’r rhan fwyaf o werth y pwnc hwn heb fod angen proses asesu strwythuredig ar y raddfa hon.

Menter. Mae’r model cyfunol hwn yn arbennig o werthfawr ar gyfer cymharu aeddfedrwydd metrigau ar draws llawer o unedau busnes yn deg, gan y byddai cymhariaeth pwnc-wrth-bwnc ar draws dwsinau o dimau’n afrosgo. Defnyddiwch ef i flaenoriaethu buddsoddiad ledled y sefydliad tuag at ba bynnag ddimensiwn sy’n dangos y gwendid mwyaf eang ar draws unedau.

Llywodraeth. Mae hunanasesiad aeddfedrwydd wedi’i ddogfennu, yn onest, gan ddefnyddio’r model cyfunol hwn, yn arteffact gwirioneddol ddefnyddiol ar gyfer dangos trylwyredd rhaglen i gorff goruchwylio, ar yr amod bod yr asesiad yn cael ei gynnal yn onest yn hytrach nag yn ymgeisiol. Ystyriwch adolygiad allanol cyfnodol o’r hunanasesiad ei hun, yn enwedig ar gyfer y dimensiwn ymddiriedaeth ddiwylliannol, sef yr anoddaf i’w asesu’n gywir o safbwynt mewnol pur.

Enghreifftiau

Menter. Sgoriodd hunanasesiad cychwynnol cwmni technoleg logisteg ei ddimensiwn offeryniad ar Lefel 4 (ffynonellu data awtomataidd, cynhwysfawr o bibellau a systemau) ond ei ddimensiwn ymddiriedaeth ddiwylliannol ar Lefel 1, yn dilyn digwyddiad camddefnyddio metrig heb ei drin o ddwy flynedd ynghynt na chafodd erioed ei gydnabod na’i drwsio’n uniongyrchol (gan adleisio enghraifft lywodraeth pwnc 8.3 yn uniongyrchol). Greddf gychwynnol yr arweinyddiaeth oedd cyfartaleddu’r rhain yn ddarlun cyffredinol Lefel 2 neu 3 parchus; nododd cymhwysiad mwy onest o sgorio seiliedig-ar-leiafswm y pwnc hwn ymddiriedaeth ddiwylliannol yn gywir fel y cyfyngiad gwirioneddol ar werth y rhaglen gyfan, gan fod hyd yn oed offeryniad rhagorol yn cynhyrchu data nad oedd peirianwyr, yn ymwybodol o’r digwyddiad blaenorol, yn dal i ymddiried ynddo neu’n ei adrodd yn onest. Cafodd buddsoddiad wedi’i dargedu’n benodol mewn trwsio ymddiriedaeth ddiwylliannol, wrth ddilyn arweiniad pwnc 8.3 yn uniongyrchol, ei flaenoriaethu dros fuddsoddiad offeryniad pellach fel canlyniad uniongyrchol o’r asesiad onest, seiliedig-ar-leiafswm hwn.

Llywodraeth. Canfu asiantaeth ystadegau genedlaethol, gan gynnal ei hunanasesiad aeddfedrwydd ffurfiol cyntaf, gan ddefnyddio’r model cyfunol hwn fel rhan o adolygiad llywodraethiant technoleg ehangach, fod ei dimensiwn llywodraethiant’n sgorio’n dda (perchnogaeth glir, siarteri wedi’u dogfennu) ond bod ei dimensiwn cydbwysedd canlyniad yn sgorio’n wael, gyda’r mwyafrif llethol o fetrigau a olrheiniwyd yn seiliedig ar allbwn a gweithgaredd er gwaethaf dadl Rhan 7 dros bwysoli canlyniadau wedi’i deall yn dda yn ddeallusol o fewn arweinyddiaeth dechnegol yr asiantaeth. Rhoddodd y canfyddiad onest, penodol hwn, yn hytrach na theimlad cyffredinol amwys “y dylem fesur canlyniadau’n fwy,” fan cychwyn pendant, seiliedig-ar-dystiolaeth i gynllun buddsoddi dilynol yr asiantaeth (pwnc 8.5), a dyfynnodd adroddiad dilynol i fwrdd goruchwylio’r asiantaeth yr asesiad aeddfedrwydd hwn yn benodol fel sail i strategaeth fuddsoddi metrigau wedi’i hail-gyfeirio.

Yr achos busnes: cymhellion, ROI, a TCO

Yr enillion ar hunanasesiad aeddfedrwydd onest, seiliedig-ar-leiafswm yw nodi’n gywir y cyfyngiad gwirioneddol ar werth rhaglen fetrigau, yn hytrach na buddsoddi ymhellach mewn dimensiwn sydd eisoes yn gryf tra bod un gwan yn parhau i danseilio dibynadwyedd y rhaglen gyfan, yn union y patrwm y mae’r ddwy enghraifft uchod yn ei ddarlunio. Yr effaith dargedu hon yw prif werth y model: mae’n cyfeirio buddsoddiad gwelliant cyfyngedig tuag at ble y bydd yn symud aeddfedrwydd y rhaglen gyffredinol mewn gwirionedd, yn hytrach nag i ble bynnag y digwydd buddsoddiad fod hawsaf neu fwyaf cyfarwydd.

Y gost berchnogaeth gyfan yw’r ymdrech asesu ei hun, cymedrol a chyfnodol, wedi’i phwyso yn erbyn risg parhau i fuddsoddi mewn dimensiwn sydd eisoes yn gryf tra bod un gwan, heb ei drin, yn enwedig ymddiriedaeth ddiwylliannol, yn parhau i lygru’n dawel werth popeth arall y mae’r rhaglen wedi’i adeiladu.

Gwrth-batrymau a risgiau

Cyfartaleddu sgorau dimensiwn i mewn i gyfansawdd mwy dymunol: yn cuddio’r cyfyngiad gwirioneddol ar werth cyffredinol y rhaglen.
Asesu’n ymgeisiol yn unig, yn seiliedig ar bolisi datganedig yn hytrach nag ymarfer gwirioneddol: yn cynhyrchu darlun anghywir, gorddisglair.
Defnyddio’r model cyfunol hwn fel disodliad ar gyfer, yn hytrach nag ategiad i, y modelau lefel pwnc: yn colli’r manylion penodol, gweithredadwy y mae’r modelau unigol hynny’n eu darparu.
Dim ond ail-asesu ar ôl i argyfwng orfodi’r cwestiwn: yn colli’r cyfle i ddal a mynd i’r afael â dimensiwn sy’n gwanhau’n rhagweithiol.
Trin sgôr isel fel gradd fethiant yn hytrach na man cychwyn buddsoddi: yn gwahodd amddiffynoldeb yn hytrach na’r ymateb diagnostig, cynhyrchiol y mae’r llyfr hwn yn ei argymell drwyddo draw.
Byth ceisio safbwynt allanol onest ar yr hunanasesiad: yn risgio’r un rhagfarn optimistaidd y mae’r llyfr hwn yn rhybuddio yn ei herbyn drwyddo draw yn effeithio ar yr asesiad ei hun.

Model aeddfedrwydd

Lefel 1, Cychwyn: Nid oes asesiad croestoriadol ffurfiol yn bodoli; gellir asesu teuluoedd metrig unigol yn annibynnol, ond mae iechyd rhaglen gyffredinol heb ei archwilio.
Lefel 2, Datblygu: Mae rhywfaint o ymwybyddiaeth anffurfiol o gryfderau a gwendidau rhaglen gyffredinol yn bodoli, ond ni chynhaliwyd asesiad strwythuredig, pum dimensiwn.
Lefel 3, Safoni: Cynhelir asesiad pum dimensiwn strwythuredig, onest, seiliedig-ar-leiafswm, gan ddefnyddio tystiolaeth bendant, ledled y sefydliad.
Lefel 4, Rheoli: Ailadroddir yr asesiad ar gadwyn reolaidd, ac mae ei ganfyddiadau’n gwybodaethu blaenoriaethau buddsoddi wedi’u targedu’n uniongyrchol ac yn gyson.
Lefel 5, Cyd-drefnu: Mae gan y sefydliad ymarfer hunanasesiad onest, parhaus, wedi’i ddangos, gan gynnwys adolygiad allanol cyfnodol, a gall nodi penderfyniadau buddsoddi penodol y gwnaeth canfyddiadau’r asesiad eu gyrru’n uniongyrchol.

Syniadau ar gyfer trafodaeth

Beth yw ein sgôr onest, seiliedig ar dystiolaeth ar bob un o’r pum dimensiwn ar hyn o bryd?
Pa ddimensiwn yw ein cyfyngiad gwirioneddol, ac a yw hynny’n cyd-fynd â’n greddf?
A ydym erioed wedi cyfartaleddu ein sgorau i mewn i ddarlun mwy dymunol na’r hyn y byddai’r lleiafswm yn ei ddangos?
Pryd wnaethom ni ail-asesu’n ffurfiol ddiwethaf, ac a oedd yn rhagweithiol neu wedi’i yrru gan argyfwng?
Beth fyddai adolygiad allanol onest o’n hunanasesiad yn debygol o’i ddatgelu?

Prif ganfyddiadau

Mae aeddfedrwydd rhaglen yn cwmpasu pum dimensiwn croestoriadol: llywodraethu, offeryniad, cydbwysedd canlyniad, ymddiriedaeth ddiwylliannol, a gwelliant parhaus.
Y lleiafswm ar draws dimensiynau, nid y cyfartaledd, yw aeddfedrwydd cyffredinol; mae gwendid mewn ymddiriedaeth ddiwylliannol yn tanseilio cryfder ym mhobman arall.
Defnyddiwch y model cyfunol hwn ochr yn ochr â, nid yn lle, y modelau aeddfedrwydd lefel pwnc unigol drwy’r llyfr hwn.
Ail-aseswch ar gadwyn reolaidd, yn hytrach na disgwyl nes bod argyfwng yn gorfodi’r cwestiwn.
Triniwch sgôr isel fel man cychwyn buddsoddi onest, nid gradd fethiant, wrth ddilyn fframio diagnostig y llyfr hwn drwyddo draw.

Cyfeiriadau a darllen pellach

Capability Maturity Model Integration (CMMI), Sefydliad Peirianneg Meddalwedd (y fethodoleg model aeddfedrwydd gyffredinol y mae dull y pwnc hwn yn tynnu ysbrydoliaeth strwythurol ohoni).
Accelerate: The Science of Lean Software and DevOps, gan Nicole Forsgren, Jez Humble, a Gene Kim (sail ymchwil y modelau aeddfedrwydd lefel pwnc unigol y mae’r model cyfunol hwn yn eu tynnu ynghyd).
Measuring and Managing Performance in Organizations, gan Robert D. Austin (asesiad sefydliadol o iechyd a chamweithrediad rhaglen fetrigau).
The Fifth Discipline: The Art and Practice of the Learning Organization, gan Peter M. Senge (hunanasesiad sefydliadol lefel systemau a gwelliant parhaus).