Cyfraith Goodhart a seicoleg metrigau
Bydd unrhyw rif y byddwch yn ei wobrwyo, ei raddio neu'n bygwth â'i ddefnyddio yn dechrau newid y gwaith yr oedd i fod i'w ddisgrifio, felly defnyddir pob metrig yn y llyfr hwn fel cwestiwn i dîm ei drafod ac fe'i paru â rheilen warchod sy'n dal ei chwarae.
Crynodeb a chymhelliant
Cyfraith Goodhart yw'r rhybudd hynaf mewn mesur. Sylwodd yr economegydd Charles Goodhart ym 1975, wrth ysgrifennu am bolisi ariannol Prydain, fod rheoleidd-dra ystadegol yn tueddu i ddymchwel unwaith y bydd awdurdodau'n rhoi pwysau arno at ddibenion rheoli. Daeth y geiriad poblogaidd yn nes ymlaen. Dywedodd yr anthropolegydd Marilyn Strathern ym 1997: "Pan fydd mesur yn dod yn nod, mae'n peidio â bod yn fesur da." Mae'r ddwy frawddeg yn dweud yr un peth: y funud y defnyddir rhif i lywio pobl, mae pobl yn llywio'r rhif.
Mae gan yr un syniad enwau eraill. Mae cyfraith Campbell, gan y gwyddonydd cymdeithasol Donald Campbell, yn dweud po fwyaf y defnyddir dangosydd meintiol ar gyfer penderfyniadau, y mwyaf y mae'n agored i bwysau llygredd a'r mwyaf y mae'n ystumio'r prosesau y mae i fod i'w monitro. Yr effaith cobra yw hanes gwobr a gynhyrchodd fwy o'r hyn yr oedd i fod i'w ddileu. Mae pob un yn enghraifft o gymhelliad gwrthnysig: gwobr sy'n gwthio ymddygiad oddi wrth yr hyn yr oedd y gwobrwywr ei eisiau.
Mae timau sy'n adeiladu ac yn rhedeg gwasanaethau TG yn anarferol o agored. Mae cyflawni parhaus a rheoli gwasanaethau TG (ITSM), fel y'i codeiddiwyd gan ITIL, ill dau yn cynhyrchu llif cyson o stampiau amser, cyfrifon a statysau. Mae system docynnau yn cofnodi pryd yr agorwyd tocyn, pryd y'i neilltuwyd, pryd yr oedodd y cloc, a phryd y caewyd ef. Mae offeryn cyflawni yn cofnodi pryd y dechreuodd gwaith a gorffen. Mae'r rhifau hyn yn rhad i'w casglu, yn hawdd eu siartio, ac yn hawdd eu troi'n dargedau. Maent hefyd yn hawdd eu symud heb helpu neb.
Mae tri thymor yn codi dro ar ôl tro yn y pwnc hwn a gweddill y llyfr. Mae mesur yn disgrifio rhywbeth. Mae nod (target) yn rhif y disgwylir i rywun ei gyrraedd. Mae rheilen warchod yn ail fesur neu arfer, wedi'i ddewis ymlaen llaw, a fyddai'n symud pe bai'r mesur cyntaf yn cael ei chwarae. Y cam o fesur i nod yw lle mae trafferth yn dechrau, a'r rheilen warchod yw'r ffordd i sylwi.
Mae'r pwnc hwn yn gosod y rheol sy'n llywodraethu pob pwnc arall. Mae pob teulu o fetrigau yn y llyfr yn cyrraedd gyda'i ffordd o chwarae'r system (sut y caiff ei chwarae fel arfer) a'i reilen warchod. Os yw pwnc diweddarach i'w weld yn hepgor hynny, trinwch y pwnc fel un anorffenedig.
Pam mae pobl yn chwarae rhifau
Fel arfer nid anonestrwydd yw chwarae'r system. Ymateb arferol pobl alluog i'r cymhellion o'u blaen ydyw. Mae pedwar grym ar waith.
- Pwysau. Mae bonws, adolygiad, adnewyddu contract neu enw da rhywun yn dibynnu ar y rhif. Hyd yn oed heb gyswllt ffurfiol, mae pobl yn casglu beth y mae'r arweinyddiaeth yn gofalu amdano o'r hyn y mae'r arweinyddiaeth yn ei siartio.
- Dirprwyo. Dirprwyo (surrogation) yw'r duedd i drin y mesur fel pe bai'n y peth y mae'n sefyll drosto. Canfu ymchwilwyr a'i hastudiodd mewn sefydliadau fod tâl cymhelliant sydd ynghlwm wrth fesur yn gwneud hyn yn fwy tebygol. Mae tîm sy'n olrhain "tocynnau wedi'u cau" yn dechrau credu mai'r nod yw tocynnau caeedig, nid problemau wedi'u datrys.
- Ofn. Pan fydd rhif gwael yn dod â bai, mae pobl yn cuddio newyddion drwg. Caiff digwyddiadau eu hisraddio, caiff toriadau eu hail-labelu fel "cynnal a chadw wedi'i gynllunio," a chaiff diffygion eu logio fel ceisiadau am nodweddion.
- Optimeiddio lleol. Mae tîm yn gwella'r rhan o'r system y caiff ei barnu arni ac yn gwthio cost i ran na chaiff ei barnu arni. Mae'r ddesg gwasanaeth yn cau'n gyflym ac mae'r ail linell yn etifeddu'r ailadroddiadau.
Mae deall y grymoedd hyn yn bwysig oherwydd nid plismona llymach yw'r feddyginiaeth. Newid yr amodau sy'n gwneud chwarae'r system yn rhesymegol ydyw.
Egwyddorion allweddol
- Mesurwch i ddysgu, nid i farnu. Dangoswch rifau i'r tîm sy'n gwneud y gwaith yn gyntaf, a'u defnyddio i ofyn cwestiynau.
- Paru pob metrig â rheilen warchod. Cyflymder gydag ansawdd, cyfaint gyda chanlyniad, cost gyda phrofiad.
- Disgrifiwch dimau a systemau, peidiwch byth â graddio pobl. Tablau cynghrair unigol yw'r ffordd gyflymaf o lygru ffynhonnell data.
- Ffafriwch ganlyniadau a thueddiadau yn hytrach na thargedau. Mae cyfeiriad a sgwrs yn well na throthwy.
- Ysgrifennwch y diffiniad, gan gynnwys y clociau. Mae diffiniadau amwys yn lle mae chwarae'r system yn cuddio.
- Disgwyliwch newid. Ymddeolwch neu ailgynlluniwch fetrig pan fydd yn peidio â hysbysu penderfyniadau.
- Gwnewch newyddion drwg yn ddiogel. Os cosbir adrodd gonest, bydd y data'n dweud celwydd.
Diffiniadau metrigau
Nid mesurau gwasanaeth na chyflawni yw'r metrigau isod. Maent yn fesurau o iechyd arfer metrigau ei hun, ac maent yn dangos y ffurf y mae pob tabl metrigau yn y llyfr hwn yn ei chymryd. Mae'r tri cyntaf yn enghreifftiau o reiliau gwarchod sy'n ymddangos drwy'r pynciau diweddarach.
| Metrig | Diffiniad | Fformiwla | Uned | Ffynhonnell data | Arfer ITIL | Cyfatebydd ystwyth | Amledd |
|---|---|---|---|---|---|---|---|
| Cwmpas rheiliau gwarchod | Cyfran y metrigau a adroddir sydd â rheilen warchod a enwir ac a olrheinir | metrigau â rheilen warchod / metrigau a adroddwyd | canran | Cofrestr metrigau (gweler pwnc 1.4, Llywodraethu a pherchnogaeth metrigau) | Mesur ac adrodd; gwelliant parhaus | Ôl-sylliad o gytundebau gweithio | Chwarterol |
| Cyfradd ailagor | Cyfran y tocynnau neu'r eitemau gwaith caeedig a ailagorwyd o fewn ffenestr a nodir | eitemau a ailagorwyd o fewn 14 diwrnod / eitemau a gaewyd yn y cyfnod | canran | Hanes statws offeryn ITSM neu olrheinydd materion | Rheoli digwyddiadau; rheoli problemau | Diffiniad o orffen; diffygion a ddihangodd | Misol |
| Nifer y newidiadau diffiniad | Nifer y newidiadau i ddiffiniadau metrigau neu lifoedd gwaith statws mewn cyfnod, gyda rhesymau | cyfrif cofnodion yn y log newidiadau diffiniad | cyfrif | Log newidiadau'r gofrestr metrigau | Mesur ac adrodd | Cytundebau gweithio | Chwarterol |
| Cyfradd defnyddio metrigau | Cyfran y metrigau a adroddir y cyfeiriwyd atynt mewn penderfyniad yn ystod y cyfnod | metrigau y cyfeiriwyd atynt mewn penderfyniad wedi'i gofnodi / metrigau a adroddwyd | canran | Log penderfyniadau neu nodiadau adolygu | Gwelliant parhaus | Camau gweithredu ôl-sylliad | Chwarterol |
| Bwlch canfyddiad | Y gwahaniaeth rhwng canlyniad arolwg bodlonrwydd a lefel gwasanaeth sy'n deillio o docynnau ar gyfer yr un gwasanaeth | cyfradd o'r arolwg llai cyfradd o'r olrheinydd | pwyntiau canran | Offeryn arolwg ac offeryn ITSM | Rheoli lefelau gwasanaeth | Adborth adolygiad rhanddeiliaid | Chwarterol |
Mae cyfradd ailagor yn cyfrif eitemau a ailagorwyd yn yr un cofnod yn unig. Nid yw eitem a gaewyd ac yna a godwyd eto fel tocyn newydd yn ymddangos. Rhan o bwynt yr adran nesaf yw bod angen ei reilen warchod ei hun ar y rheilen warchod, megis cysylltu tocynnau dyblyg â'u gwreiddiol.
Argymhellion
Dyluniwch y system fesur
1. Dechreuwch o gwestiwn, nid rhif. Cyn ychwanegu metrig, ysgrifennwch y cwestiwn y mae'n ei ateb a'r penderfyniad y mae'n ei hysbysu. Mae "A yw defnyddwyr yn cael eu problemau wedi'u datrys y tro cyntaf?" yn gwestiwn. Mae "Lleihau'r amser trin cyfartalog" yn nod yn esgus bod yn un. Mae metrig heb benderfyniad ynghlwm yn ymgeisydd ar gyfer ymddeol.
2. Dewiswch fetrigau mewn tensiwn. Mae un rhif yn gwahodd gor-optimeiddio, felly dewiswch barau sy'n tynnu yn erbyn ei gilydd: amser arweiniol gyda chyfradd methu newid, cyflymder cau tocynnau gyda chyfradd ailagor, argaeledd gyda phrofiad a adroddir gan ddefnyddwyr. Nid oes angen i'r pâr fod yn fformiwla. Mae angen ei ddangos gyda'i gilydd, ar yr un dudalen.
3. Diffiniwch y clociau a'r eithriadau. Ar gyfer pob mesur amser, ysgrifennwch ble mae'r cloc yn dechrau, ble mae'n stopio, a phryd y caiff oedi. Mae'r rhan fwyaf o chwarae'r system mewn data gwasanaeth yn byw yn y ffiniau hyn: mae tocyn a roddir yn "aros am y cwsmer" yn stopio cloc y lefel gwasanaeth, ac mae newid a gofnodir dim ond ar ôl ei gymhwyso yn dianc rhag amser arweiniol y newid. Os oes cyflwr oedi yn bodoli, adroddwch pa mor aml y caiff ei ddefnyddio.
4. Defnyddiwch ddosbarthiadau a chanraddau. Gall cyfartaledd amseroedd datrys tocynnau wella am fod ychydig o docynnau hawdd wedi'u cau'n gyflym tra bod y rhai caled yn heneiddio. Dangoswch y canolrif a chanradd uchel (er enghraifft yr 85fed neu'r 95fed), a dangoswch yr eitemau agored hynaf. Mae oedran eitem waith a'r tocyn agored hynaf yn anodd eu chwarae heb orffen y gwaith mewn gwirionedd (gweler pwnc 2.1, Mesurau llif).
5. Cadwch gofrestr metrigau. Mae cofrestr fer yn rhestru pob metrig, ei berchennog, ei ddiffiniad, ei ffynhonnell data, ei ffordd o chwarae'r system, ei reilen warchod, a'r dyddiad yr adolygwyd ef ddiwethaf. Mae'n ddiflas a dyma'r arfer mwyaf effeithiol yn y pwnc hwn (gweler pwnc 1.4, Llywodraethu a pherchnogaeth metrigau).
Cyflwynwch fetrigau'n ddiogel
6. Dangoswch i'r tîm yn gyntaf, a dangoswch ddata crai. Mae timau sy'n gweld y rhifau cyn yr arweinyddiaeth yn fwy parod i gwestiynu eu cywirdeb. Dechreuwch â'r eitemau sylfaenol, nid y siart. Os na all y data oroesi sgwrs â'r bobl a'i cynhyrchodd, ni all oroesi dangosfwrdd.
7. Gwahanwch olygon dysgu oddi wrth olygon atebolrwydd. Gall golwg gweithio tîm gynnwys llawer o fesurau, gan gynnwys rhai hyll. Dylai'r hyn sy'n mynd i'r arweinyddiaeth fod yn set fach, sefydlog. Os yw'r arweinyddiaeth yn gofyn am y golwg gweithio, disgwyliwch i'r golwg gweithio newid i edrych yn well.
8. Peidiwch â chlymu tâl unigol, disgyblaeth na graddio wrth fetrig. Gellir gofyn i dimau esbonio eu rhifau a'u gwella. Mae targedau unigol ar gyfrif tocynnau, pwyntiau stori neu gomisiynau yn dysgu pobl i uchafu'r cyfrif. Gall dull dangosydd perfformiad allweddol weithio pan ddewisir dangosyddion ar gyfer y system gyfan a'u hadolygu'n rheolaidd. Mae'n methu pan ddaw'n gerdyn sgorio fesul person.
9. Gwnewch adrodd gonest yn ddiogel. Diogelwch seicolegol yw'r gred na chewch eich cosbi am godi llais gyda chamgymeriad neu bryder. Mae adolygiad di-fai o ddigwyddiad yn enghraifft ohono ar waith. Hebddo, mae nifer y digwyddiadau'n disgyn am y rheswm anghywir: mae pobl yn rhoi'r gorau i adrodd.
Cadwch y system yn onest
10. Cynhaliwch adolygiad chwarae'r system. Unwaith y chwarter, gofynnwch un cwestiwn i'r tîm am bob metrig a adroddir: "Pe baem eisiau i'r rhif hwn edrych yn dda heb helpu neb, beth fyddem yn ei wneud?" Ysgrifennwch yr atebion, yna gwiriwch a fyddai'r rheilen warchod yn dal pob un. Mae'r ymarfer yn rhad, yn cynhyrchu syniadau defnyddiol, ac yn symud y sgwrs o amheuaeth i ddylunio.
11. Archwiliwch y diffiniadau yn erbyn realiti. Samplwch nifer fach o eitemau caeedig a'u darllen. A gawsant eu datrys mewn gwirionedd? A oedd y flaenoriaeth yn onest? A oedd y cyflwr "aros am y cwsmer" yn golygu bod aros am y cwsmer? Mae sampl pymtheg munud yn aml yn dweud mwy wrthych na mis o ddangosfyrddau.
12. Ymddeolwch fetrigau. Mae metrig na chyfeiriwyd ato mewn penderfyniad ers dau chwarter yn gost ychwanegol. Tynnwch ef, a dywedwch hynny. Mae llai o fetrigau, pob un wedi'i ymddiried ynddo, yn well na llawer.
Ffyrdd o chwarae'r system a rheiliau gwarchod
Mae'r tabl yn ymdrin â'r metrigau yn yr adran uchod. Mae pynciau diweddarach yn cymhwyso'r un ffurf i fesurau gwasanaeth a chyflawni.
| Metrig | Sut mae'n cael ei chwarae | Rheilen warchod (metrig neu arfer) pâr |
|---|---|---|
| Cwmpas rheiliau gwarchod | Enwi rheilen warchod ar bapur heb ei holrhain byth | Adolygu'r gofrestr: dim ond os yw ei gwerth diweddaraf yn ymddangos ar yr un dangosfwrdd y mae rheilen warchod yn cyfrif |
| Cyfradd ailagor | Cau'r tocyn a chodi un newydd yn lle ei ailagor; ymestyn y ffenestr nes bod ailagoriadau'n disgyn y tu allan iddi | Cyfradd tocynnau dyblyg a chysylltiedig; ailadrodd yr un achos ar draws tocynnau |
| Nifer y newidiadau diffiniad | Peidio â logio newidiadau fel bod y cyfrif yn aros yn isel; newid llif gwaith heb ddweud wrth neb | Cymharu'r model statws yn yr offeryn â'r gofrestr ym mhob adolygiad |
| Cyfradd defnyddio metrigau | Cyfeirio at bob metrig mewn log penderfyniadau fel ffurfioldeb | Gofyn beth a newidiodd oherwydd y cyfeiriad; samplo'r log |
| Bwlch canfyddiad | Arolygu defnyddwyr bodlon yn unig; llywio arolygon i adegau ar ôl rhyngweithio da | Cyfradd ymateb yr arolwg a chymysgedd yr ymatebwyr; darllen sylwadau agored yn uchel mewn adolygiad |
Darlleniad iach yw arfer metrigau sy'n newid: caiff diffiniadau eu haddasu am resymau a ysgrifennir, mae metrigau'n dod ac yn mynd, a gall y tîm adrodd stori am benderfyniad a newidiodd rhif.
Cyfaddawdau: manteision ac anfanteision
| Dull | Cryfder | Gwendid |
|---|---|---|
| Mesur heb dargedau | Lleihau chwarae'r system; gwahodd trafodaeth onest | Gall ddrifftio'n adrodd na weithredir arno gan neb |
| Targedau gyda rheiliau gwarchod | Rhoi cyfeiriad a brys; mae'r pâr yn cyfyngu ar chwarae'r system | Mwy o waith i'w gynnal; caiff y rheilen warchod ei chwarae hefyd dros amser |
| Metrigau unigol | Hawdd eu deall; yn ymddangos yn deg | Llygru data; niweidio cydweithio |
| Metrigau tîm a gwasanaeth | Cyd-fynd â sut mae gwaith yn digwydd mewn gwirionedd | Anoddach eu priodoli; cuddio anghenion cymorth unigol |
| Ychydig o fetrigau | Haws ymddiried ynddynt a'u cofio | Mannau dall; gall golli problem newydd |
| Llawer o fetrigau | Cwmpas eang | Gwanhau sylw; mae pob metrig yn cael ei lywodraethu'n wan |
Yr ateb mewn rhyddiaith yw defnyddio targedau'n gynnil, ar gyfer amodau a ddeellir yn dda ac sy'n anodd eu chwarae, megis amcan lefel gwasanaeth y mae defnyddwyr wedi gofyn amdano. Hyd yn oed wedyn, ffafriwch glymu'r targed wrth y gwasanaeth, nid adolygiad person. Nid y nod yw cael gwared â rhifau o wneud penderfyniadau. Y nod yw cadw'r rhifau'n gysylltiedig â realiti drwy gadw'r bobl sy'n eu cynhyrchu o'ch ochr.
Cwestiynau i'w trafod gyda'ch tîm
1. Pa rif ar ein dangosfwrdd presennol y byddem fwyaf tebygol o'i demtio i'w wella heb wella'r gwaith? Dechreuwch â'r metrig y mae pobl yn edrych arno gyntaf, yna symudwch at yr un y mae'r arweinyddiaeth yn gofyn amdano. Gofynnwch am symudiadau penodol: beth fyddem yn ei wneud i'r data pe baem dan bwysau? Dylai'r hwylusydd gofnodi pob ateb heb ei farnu, oherwydd daw'r rhestr yn ffyrdd o chwarae'r system ar gyfer y gofrestr. Gorffennwch drwy ofyn pa rai o'r symudiadau y byddai ein rheiliau gwarchod yn eu dal, a pha rai y byddent yn eu colli.
2. Ble mae cloc yn dechrau ac yn stopio yn ein mesur amser pwysicaf, a phwy a benderfynodd hynny? Gofynnwch i'r grŵp dynnu cylch oes y tocyn neu'r eitem waith ar fwrdd gwyn a nodi pob cyflwr. Chwiliwch am gyflyrau lle gall amser ddiflannu, megis aros am gwsmer neu ar ddal. Cyfrifwch pa mor aml y defnyddir pob cyflwr a chan bwy. Mae'r sgwrs yn aml yn datgelu bod dau dîm yn defnyddio'r un gair yn wahanol.
3. Pryd y gwnaeth rhif ein gorfodi ddiwethaf i wneud rhywbeth di-fudd? Gwahoddwch straeon, nid bai. Enghreifftiau cyffredin yw cau tocynnau cyn gwirio, hollti newidiadau i godi cyfrif defnyddiadau, neu ailddosbarthu digwyddiad i osgoi adroddiad torri. Dylai'r hwylusydd ofyn beth yr oedd y person yn ceisio ei amddiffyn. Mae'r ateb fel arfer yn dangos y cymhelliad y mae angen ei newid.
4. Pwy sy'n gweld ein metrigau, a beth sy'n digwydd iddynt yno? Olrheiniwch bob metrig o'r tîm i'w gynulleidfa. Gofynnwch a ddefnyddir unrhyw fersiwn ohono i gymharu timau neu bobl. Gofynnwch beth fyddai'r tîm yn ei ddangos pe bai'r gynulleidfa'n wahanol. Lle byddai'r tîm yn newid y rhifau y mae'n eu dangos, mae bwlch ymddiriedaeth i'w drafod gyda'r gynulleidfa.
5. Beth yw'r rheilen warchod ar gyfer pob un o'n pum metrig pwysicaf, ac a yw ar yr un dudalen? Gwnewch restr dwy golofn ar fwrdd. Os nad oes gan fetrig reilen warchod, cytunwch ar un ymgeisydd a pherchennog i'w threialu am chwarter. Os oes rheilen warchod ond anaml y caiff ei gweld, trafodwch pam. Osgowch ddewis rheilen warchod sydd ond yn wrthdro'r metrig, oherwydd nid yw hynny'n dweud dim newydd wrthych.
6. Pa fetrig y dylem ei ymddeol y chwarter hwn? Gofynnwch am dystiolaeth: pryd y'i defnyddiwyd ddiwethaf mewn penderfyniad? Os na all neb gofio, ymddeolwch ef am gyfnod treial a gweld a yw rhywun yn sylwi. Dylai'r hwylusydd drin ymddeol fel digwyddiad arferol. Mae timau na fyddant byth yn gollwng metrigau yn diweddu gydag adroddiadau nad oes neb yn ymddiried ynddynt nac yn eu darllen.
Pedwar persbectif
Timau cynnyrch a chyflawni
Mae timau cyflawni'n cwrdd â chwarae'r system drwy fuanedd, trwybwn a chyfrif defnyddiadau. Mae buanedd (velocity) yn arbennig yn offeryn cynllunio ar gyfer un tîm, nid mesur cynhyrchiant, ac mae cymharu timau ag ef yn arwain at amcangyfrifon chwyddedig. Dylai timau cyflawni gadw eu mesurau gweithio iddynt eu hunain, cyhoeddi set fach tuag allan, a pharu pob mesur cyflymder â mesur ansawdd (gweler pwnc 2.5, Metrigau rhagweld a chynllunio cyflawni).
Timau gwasanaeth a gweithrediadau
Mae timau gwasanaeth yn cwrdd â chwarae'r system drwy amser datrys, datrys y cyswllt cyntaf a chydymffurfio â lefel gwasanaeth. Y cyflyrau sy'n oedi'r cloc a'r meysydd blaenoriaeth yw'r pwyntiau drifft arferol. Dylai timau gweithrediadau archwilio trawsnewidiadau statws yn rheolaidd, adrodd y defnydd o gyflyrau oedi, a gwylio cysylltiadau dro ar ôl tro a chyfradd ailagor wrth ymyl cyflymder. Dylai timau ar alwad fod yn arbennig o ofalus gyda mesurau sy'n gwobrwyo peidio â chael eu galw, gan eu bod yn cosbi rhybuddio gonest (gweler pwnc 3.3, Amser ymateb a datrys digwyddiadau).
Arweinyddiaeth a llywodraethu
Mae arweinwyr yn gosod y cymhellion, yn aml heb fwriadu. Mae cwestiwn a ofynnir mewn adolygiad ("pam mae hwn yn goch?") yn dysgu'r tîm beth i'w guddio. Dylai arweinwyr ofyn beth ddysgodd y tîm o rif, cadw tablau cynghrair allan o'r ystafell, amddiffyn adrodd gonest, ac ariannu'r gwaith gwella y mae rhif gwael yn ei ddatgelu. Dylai cyrff llywodraethu ddisgwyl y gofrestr metrigau a'r adolygiad chwarae'r system fel rhan o adrodd, a thrin newid diffiniedig mewn metrig fel peth arferol.
Cwsmeriaid a defnyddwyr
Mae defnyddwyr yn profi effaith chwarae'r system fel gwasanaeth sy'n edrych yn dda ar bapur ond yn teimlo'n wael yn ymarferol: tocyn a gaewyd na chafodd ei drwsio, toriad a labelwyd yn un wedi'i gynllunio, arolwg na chyrhaeddodd hwy erioed. Defnyddwyr hefyd yw'r rheilen warchod orau. Dylai eu hadborth, ar ffurf arolygon, cwynion a sylwadau, eistedd wrth ymyl y rhifau gweithredol, a dylid ei ddarllen yn llawn, nid ei leihau i sgôr (gweler pwnc 6.1, Metrigau bodlonrwydd cwsmeriaid).
Yn ymarferol: enghraifft ITIL ystwyth
Mae adran TG ysbyty rhanbarthol yn rhedeg desg gwasanaeth a nifer o dimau cynnyrch sy'n adeiladu cymwysiadau clinigol. Mae'r rhifau yn yr enghraifft hon yn enghreifftiol.
Mae'r arweinyddiaeth yn gosod nod o gau 90 y cant o ddigwyddiadau o fewn yr amser y cytunwyd arno. O fewn deufis mae'r dangosfwrdd yn dangos 94 y cant. Mae pennaeth gweithrediadau gwasanaeth yn falch ond yn anesmwyth, oherwydd mae staff clinigol yn cwyno mwy, nid llai. Mae'n gofyn i'r tîm gynnal adolygiad chwarae'r system ar y metrig.
Mae'r tîm yn braslunio cylch oes y tocyn. Maent yn canfod bod tocynnau'n symud i "aros am y cwsmer" ddwywaith ar gyfartaledd, a bod yr amser yn y cyflwr hwnnw wedi tyfu. Mae sampl o 30 tocyn caeedig yn dangos bod 7 wedi'u cau gyda'r nodyn "dim ymateb gan y defnyddiwr" ar ôl un ymgais i ffonio. Maent hefyd yn canfod bod y gyfradd ailagor yn wastad dim ond oherwydd bod defnyddwyr wedi cael eu hysbysu i "godi tocyn newydd" pan ddychwelodd y broblem.
Mae'r tîm yn gwneud tri newid. Yn gyntaf, mae'r siart amser datrys bellach yn dangos y canolrif, y 90fed canradd a'r tocyn agored hynaf, ynghyd â chyfran yr amser a dreulir mewn cyflyrau oedi. Yn ail, mae'r dangosfwrdd yn ychwanegu cyfradd cysylltiadau dro ar ôl tro, wedi'i diffinio fel cyfran y tocynnau newydd gan yr un defnyddiwr am yr un gwasanaeth o fewn 14 diwrnod. Yn drydydd, mae arolwg byr yn mynd i sampl ar hap o docynnau caeedig, a darllenir ei sylwadau agored yn yr adolygiad misol.
Dri mis yn ddiweddarach mae'r rhif cydymffurfio pennawd yn disgyn i 88 y cant, sy'n teimlo fel newyddion drwg. Mae'r gyfradd cysylltiadau dro ar ôl tro wedi disgyn, fodd bynnag, ac mae sylwadau'r arolwg am broblemau heb eu datrys wedi dod yn llai cyffredin. Mae pennaeth gweithrediadau yn dweud wrth yr arweinyddiaeth fod yr hen rif wedi'i chwyddo a bod y darlun newydd yn fwy gonest, ac mae'n gofyn iddynt dderbyn nod lefel gwasanaeth yn seiliedig ar y diffiniad cywiredig. Y penderfyniad, a gofnodir yn y log penderfyniadau, yw gosod y nod ar ôl un chwarter arall o ddata yn hytrach nag ar unwaith.
Y golwg fesul sector
Busnes newydd. Ychydig o fetrigau ac ymddiriedaeth gref sydd gan dimau bach, sy'n helpu. Y perygl yw mewnforio dangosfwrdd menter mawr yn rhy fuan. Dechreuwch â dau neu dri mesur y mae'r sylfaenwyr yn eu defnyddio mewn gwirionedd, ysgrifennwch eu diffiniadau, a'u cadw draw o sgyrsiau perfformiad unigol.
Busnes bach. Mae adnoddau'n denau, ac mae'r person sy'n rhedeg TG yn aml yn adrodd yn uniongyrchol i'r perchennog. Gall un gŵyn gan gwsmer fod yn drymach nag unrhyw ddangosfwrdd. Cadwch y set yn fach, ffafriwch adborth uniongyrchol gan ddefnyddwyr, a thriniwch adroddiadau a gyflenwir gan werthwyr yn ofalus, gan fod gan y gwerthwr ei gymhellion ei hun.
Menter fawr. Mae graddfa'n lluosi'r galw am rifau cymharol a'r pwysau i'w chwarae. Defnyddiwch set safonol fach â diffiniadau ysgrifenedig, cadwch olwg gweithio timau ar wahân i grynodebau, ac osgowch gymharu timau sy'n gweithio ar wahanol fathau o wasanaethau. Daw cofrestr metrigau a rhythm adolygu yn hanfodol.
Llywodraeth a'r sector cyhoeddus. Gall rhwymedigaethau adrodd a lefelau gwasanaeth contract wneud rhai targedau yn anhrafodadwy. Triniwch hwy fel mewnbynnau dylunio: eu bodloni, dangos y rheilen warchod wrth eu hymyl, ac adrodd y diffiniadau a ddefnyddiwyd. Mae atebolrwydd cyhoeddus yn codi cost cuddio newyddion drwg, felly adeiladwch sianeli mewnol diogel a byddwch yn agored am ddiffiniadau cywiredig (gweler pwnc 8.5, Adrodd rheoleiddiedig a llywodraethol).
Yr achos busnes: cymhellion, ROI a TCO
Amser yw cost cymhwyso'r pwnc hwn yn bennaf: ychydig oriau i ysgrifennu diffiniadau a chofrestr, adolygiad chwarae'r system chwarterol byr, a samplo achlysurol o eitemau caeedig. Ychydig iawn o gost offer sydd. Cost fwy yw sylw'r arweinyddiaeth, oherwydd dim ond os yw'r bobl sy'n darllen y rhifau yn ymddwyn yn gyson y mae'r ddisgyblaeth yn gweithio.
Daw'r elw o osgoi gwastraff a gwell penderfyniadau. Gall penderfyniadau a wneir ar ddata llygredig gyfeirio buddsoddiad at y broblem anghywir, megis staffio desg gwasanaeth i gau tocynnau'n gyflymach pan mai'r broblem wirioneddol yw cysylltiadau dro ar ôl tro o ddiffyg. Mae chwarae'r system hefyd yn erydu ymddiriedaeth rhwng y tîm a'r bobl sy'n dibynnu arno, sy'n anodd ei hatgyweirio. Disgrifiwch y budd yn y patrwm, nid â chanran ffug: llai o wrthdroi penderfyniadau, llai o syrpreisys mewn archwiliadau, a gwell cytundeb rhwng rhifau gweithredol a phrofiad defnyddwyr. Os oes angen ffigurau arnoch ar gyfer achos busnes, mesurwch eich llinellau sylfaen eich hun, megis y bwlch canfyddiad a'r gyfradd cysylltiadau dro ar ôl tro, cyn ac ar ôl y newid.
Gwrthbatrymau a maglau
- Targedau heb reiliau gwarchod. Mae targed unig yn cael ei gyrraedd gan unrhyw lwybr sydd ar gael. Ychwanegwch fesur pâr cyn cyhoeddi'r targed.
- Tablau cynghrair o bobl neu dimau. Maent yn gwahodd chwarae'r system ac yn digalonni cymorth rhwng timau. Dangoswch i bob tîm ei duedd ei hun, gyda chyd-destun.
- Metrigau fel cosb. Bydd rhif coch sy'n dod â bai yn troi'n wyrdd drwy gelu. Gofynnwch beth sydd ei angen ar y tîm yn lle hynny.
- Cyfartaleddau data gwyrgam. Maent yn cuddio'r gynffon lle mae defnyddwyr yn dioddef. Defnyddiwch ganraddau ac oedran yr eitem hynaf.
- Newid diffiniadau'n dawel. Mae llinellau tuedd yn dod yn ddiystyr. Logiwch bob newid gyda'i reswm a'i nodi ar y siart.
- Trin y rheilen warchod fel y nod newydd. Mae'r rheilen warchod wedyn yn cael ei chwarae. Adolygwch y ddau gyda'i gilydd a chylchdrowch reiliau gwarchod pan fyddant yn colli grym.
- Metrigau gwagedd. Mae cyfrifon sydd ond yn codi, megis tocynnau a drinnir neu gomisiynau a wneir, yn dweud dim am ganlyniadau. Ffafriwch fesurau a all ddisgyn yn ogystal â chodi.
- Anwybyddu tystiolaeth ansoddol. Ni all rhifau yn unig ddangos bod tocyn caeedig yn teimlo'n anatebedig. Darllenwch y sylwadau.
Model aeddfedrwydd
| Dimensiwn | 1 Cychwyn | 2 Datblygu | 3 Safoni | 4 Rheoli | 5 Cydgysylltu |
|---|---|---|---|---|---|
| Diffiniadau a chlociau | Anffurfiol; mae pob person yn cyfrif yn wahanol | Wedi'u hysgrifennu ar gyfer rhai metrigau | Un diffiniad ysgrifenedig fesul metrig, gyda chlociau ac eithriadau | Diffiniadau wedi'u hadolygu a newidiadau wedi'u logio gyda rhesymau | Diffiniadau wedi'u halinio ar draws timau a chyflenwyr, wedi'u diwygio pan fyddant yn peidio â hysbysu penderfyniadau |
| Rheiliau gwarchod | Dim | Wedi'u henwi ar gyfer rhai metrigau | Mae gan bob metrig a adroddir reilen warchod ar yr un dudalen | Rheiliau gwarchod wedi'u hadolygu am chwarae'r system bob chwarter | Rheiliau gwarchod yn cylchdroi ac wedi'u cyd-ddylunio gyda'r bobl a fesurir |
| Defnydd a diogelwch | Rhifau'n cael eu defnyddio i briodoli bai | Mae'r tîm yn gweld ei rifau ei hun | Mae'r tîm yn gweld data yn gyntaf; dim graddio unigol | Mae'r arweinyddiaeth yn gofyn cwestiynau dysgu; mae adrodd yn ddiogel | Mae cwsmeriaid a chyflenwyr yn rhannu golwg onest o'r rhifau |
Rhestr wirio
- Mae gan bob metrig a adroddir gwestiwn ysgrifenedig a phenderfyniad y mae'n ei hysbysu.
- Mae gan bob mesur amser reol gychwyn, stopio ac oedi ysgrifenedig.
- Mae gan bob metrig a adroddir reilen warchod a enwir a ddangosir wrth ei ymyl.
- Mae mesurau amser yn dangos canraddau ac oedran yr eitem agored hynaf.
- Mae cofrestr metrigau yn bodoli gyda pherchennog, diffiniad, ffordd o chwarae'r system, rheilen warchod a dyddiad adolygu.
- Mae'r tîm yn gweld ei ddata cyn yr arweinyddiaeth.
- Nid oes unrhyw raddio unigol, tâl na disgyblaeth wedi'i gysylltu â metrig.
- Mae adolygiad chwarae'r system chwarterol yn y calendr.
- Darllenir sampl o eitemau caeedig am onestrwydd bob chwarter.
- Mae o leiaf un metrig wedi'i ymddeol neu ei ailgynllunio yn y flwyddyn ddiwethaf.
Anogwyr AI
Cynhaliwch adolygiad chwarae'r system ar fetrig.
Rwy'n arwain [enw'r tîm], sy'n rhedeg [math o wasanaeth neu waith cyflawni]. Rydym
yn adrodd y metrig hwn: [enw'r metrig], wedi'i ddiffinio fel [diffiniad gan gynnwys
ble mae'r cloc yn dechrau ac yn stopio]. Fe'i defnyddir gan [cynulleidfa] i
[penderfyniad neu nod]. Daw ein data o [offeryn].
Rhestrwch y ffyrdd realistig y gellid gwneud y metrig hwn i edrych yn well heb
wella'r gwasanaeth i ddefnyddwyr. Ar gyfer pob un, awgrymwch reilen warchod
neu arfer a fyddai'n ei ddatgelu a dywedwch beth fyddai ffordd y rheilen
warchod ei hun o gael ei chwarae. Peidiwch â dyfeisio gwerthoedd meincnod.
Rhestrwch eich rhagdybiaethau ac unrhyw beth na allech ei benderfynu o'r hyn
a roddais i chi.
Drafftiwch gofnod cofrestr metrigau.
Drafftiwch gofnod cofrestr metrigau ar gyfer [enw'r metrig] ar gyfer [enw'r
tîm]. Meysydd: y cwestiwn y mae'n ei ateb, y penderfyniad y mae'n ei hysbysu,
diffiniad, fformiwla, uned, ffynhonnell data, rôl y perchennog, rhythm adolygu,
ffordd o chwarae'r system, rheilen warchod, a sut y byddai defnyddwyr neu
gwsmeriaid yn sylwi pe bai'n anghywir. Seiliwch y cofnod ar y disgrifiad hwn
yn unig: [disgrifiwch y metrig a'r broses gyfredol]. Nodwch bob maes y bu'n
rhaid i chi ei ragdybio, a rhestrwch gwestiynau y dylwn eu hateb i gwblhau'r cofnod.
Archwiliwch sampl o docynnau caeedig.
Dyma [nifer] o docynnau caeedig o [gwasanaeth], gyda meysydd [rhestr meysydd]
a'r nodiadau datrys wedi'u gludo isod. Adolygwch bob un am arwyddion bod y
tocyn wedi'i gau heb ddatrys y broblem, bod cyflwr oedi wedi'i ddefnyddio i
atal y cloc, neu fod blaenoriaeth neu gategori yn edrych wedi'i addasu.
Adroddwch batrymau, nid unigolion. Peidiwch â dyfalu achosion nad yw'r testun
yn eu cefnogi. Dywedwch wrthyf beth na allech ei farnu o'r data a pha feysydd
ychwanegol a fyddai'n helpu.
[gludwch docynnau, gyda data personol wedi'i dynnu]
Cynlluniwch sut i gyflwyno metrig yn ddiogel.
Rydym yn bwriadu cyflwyno [metrig] i [cynulleidfa]. Cyd-destun cyfredol: [maint
y tîm, diwylliant, profiad blaenorol â metrigau]. Cynigiwch gynllun cyflwyno
sy'n ymdrin â phwy sy'n gweld y data yn gyntaf, sut y byddwn yn esbonio'r
diben, beth na fyddwn yn ei ddefnyddio ar ei gyfer, pa reilen warchod a
ddangoswn gydag ef, a phryd y byddwn yn adolygu a yw'n gweithio. Nodwch risgiau
chwarae'r system neu ofn ac awgrymwch sut i'w lleihau. Rhestrwch eich
rhagdybiaethau a pheidiwch â dyfeisio ystadegau.
Sgiliau AI
- Sgìl Metrigau ITIL Ystwyth: defnyddiwch i ddod o hyd i'r pwnc a'r rheilen warchod pâr ar gyfer metrig yr ydych ar fin ei gyflwyno.
- Sgìl cynhaliwr Metrigau ITIL Ystwyth: defnyddiwch i wirio bod pwnc metrig newydd yn cario ei ffordd o chwarae'r system a'i reilen warchod.
Pwyntiau allweddol
- Mae mesur sy'n dod yn nod yn peidio â disgrifio'r gwaith, felly defnyddiwch rifau i ofyn cwestiynau.
- Mae chwarae'r system yn ymateb arferol i bwysau ac ofn, a lleihau hynny yw newid amodau, nid plismona.
- Mae angen diffiniad ysgrifenedig â'i glociau a rheilen warchod a ddangosir wrth ei ymyl ar bob metrig.
- Ffafriwch ganraddau ac oedran yr eitem hynaf yn hytrach na chyfartaleddau.
- Disgrifiwch dimau a gwasanaethau, peidiwch byth â graddio unigolion, a gadewch i'r tîm weld ei ddata yn gyntaf.
- Adolygwch am chwarae'r system bob chwarter ac ymddeolwch fetrigau nad ydynt bellach yn hysbysu penderfyniadau.
Cyfeiriadau a darllen pellach
- Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
- Strathern, M., "'Improving ratings': audit in the British University system," European Review, 5(3), 1997.
- Campbell, D. T., "Assessing the impact of planned social change," Evaluation and Program Planning, 2(1), 1979.
- Kerr, S., "On the folly of rewarding A, while hoping for B," Academy of Management Journal, 18(4), 1975.
- Choi, J., Hecht, G. W., and Tayler, W. B., "Lost in translation: The effects of incentive compensation on strategy surrogation," The Accounting Review, 87(4), 2012.
- Muller, J. Z., The Tyranny of Metrics, Princeton University Press, 2018.
- Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
- Wikipedia, Goodhart's law.
- Wikipedia, Campbell's law.
- Wikipedia, Cobra effect.
- Wikipedia, Perverse incentive.
- Wikipedia, Surrogation.
- Wikipedia, ITIL.
- Wikipedia, Key performance indicator.
- Wikipedia, Psychological safety.
- Wikipedia, Velocity (software development).