11.5 Lykilárangursvísar (KPI)
Yfirlit og tilgangur
Lykilárangursvísir (KPI) er mælikvarði sem skipulagsheild þín velur viljandi að rekja því hann endurspeglar viðvarandi heilsu einhvers sem skiptir máli. Orðið lykil ber þungann hér: KPI er ekki hver tala sem þú getur safnað, heldur litla safnið sem þú hefur ákveðið að sé þess virði að stýra eftir. Þar sem markmið og lykilniðurstaða (OKR) lýsir breytingu sem þú knýrð áfram núna lýsir KPI stöðugu ástandi sem þú verndar. Þetta er hreinasta leiðin til að halda þessu tvennu aðskildu: OKR eru breytingin sem þú vilt. KPI eru heilsan sem þú viðheldur. Kafli 11.4 er förunautskaflinn um OKR, takt þeirra og einkunnagjöf. Þessi kafli fjallar um að velja KPI, skilgreina þá og verja þá gegn bjögun.
Fyrir stór teymi er agaginn sem góður KPI leggur á jafn mikils virði og mælikvarðinn sjálfur. Í fyrirtækjum sækja tugir teyma staðbundnar tölur sem hljóðlega víkja frá stefnu og einn vel valinn KPI getur samstillt hundruð manna um verðmætið sem viðskiptavinir fá í raun. Hjá hinu opinbera skuldbinda fjölára áætlunarverkefni almannafé gegn lögfestum umboðum og „við afhentum einingarnar í verklýsingunni“ er engin vörn ef biðtími eða svik batnaði aldrei. Illa valinn KPI spillir hljóðlega: símaver mælt á símtöl lokuð á klukkustund mun loka símtölum, ekki leysa vandamál.
Þessi kafli fjallar um að fá þessi val, og varnarteinana í kringum þau, rétt. Kafli 11.1 kynnir KPI stuttlega sem hluta af uppgötvunarleiðslunni. Hér færðu dýptina. Húfin eru há því KPI er skipun klædd sem mæling. Fólk fínstillir það sem þú telur, svo það sem þú telur væri betra að vera það sem þú vilt.
Meginreglur
- Lykil, ekki marga. KPI er einn af fáum mælikvörðum sem þú hefur valið að stýra eftir, ekki allt sem þú getur safnað.
- Mælanlegur, framkvæmanlegur og í eigu. Sérhver KPI hefur eina nákvæma skilgreiningu, sannleiksuppsprettu, eiganda og lyftistöng sem hreyfir hann.
- Heilsa, ekki breyting. KPI rekja stöðuga ástandið sem þú verndar. OKR (kafli 11.4) knýja breytinguna sem þú vilt.
- Leiddu þar sem þú getur, staðfestu þar sem þú verður. Kjóstu leiðandi vísa. Notaðu eftirlegandi til að staðfesta.
- Vegðu að niðurstöðum. Inntök og afurðir eru auðveld að telja. Verðmætið býr í niðurstöðum.
- Gerðu ráð fyrir að hver mælikvarði verði leikinn. Hannaðu gegn lögmáli Goodharts með hlutföllum, hópum og pöruðum varnarteinum.
- Hafnaðu hégóma. Ef enginn lestur myndi breyta ákvörðun er mælikvarðinn skraut.
- Sýndu heiðarlega. Mælaborð ætti að upplýsa á sekúndum án þess að villa um fyrir.
Ráðleggingar
Skilgreindu hvað gerir KPI „góðan“
Góður KPI stenst fjögur próf. Hann er samstilltur: hann rekst til yfirlýsts markmiðs, svo að hreyfa hann þýðir eitthvað. Hann er mælanlegur: ein nákvæm skilgreining, nefnd sannleiksuppspretta (yfirvaldskerfið), eining og söfnunaraðferð, svo tveir sem reikna hann sérstaklega komist að sömu tölu. Hann er framkvæmanlegur: eigandi teymið hefur lyftistangir sem í raun hreyfa hann. Hann er í eigu: ein ábyrg manneskja eða teymi á þróun hans, skilgreiningu og gagnagæði. Mælikvarði sem fellur á einhverju prófanna fjögurra er kandídat til eyðingar, ekki kandídat í mælaborð. Mestur mælikvarðaruslhaugur í stórum skipulagsheildum er tölur sem falla á að minnsta kosti tveimur þeirra og voru aldrei lagðar niður.
Flokkaðu mælikvarða eftir tímasetningu og verðmætakeðju
Tvær linsur halda KPI-safni í jafnvægi. Sú fyrri er tímasetning. Leiðandi vísir er forspár og hreyfanlegur núna (prufuskráningar, innleiðingarklárun). Eftirlegandi vísir er staðfestandi og hægur (árstekjur, fráhvarf). Leiðandi vísar leyfa þér að stýra áður en eftirlegandi skila dómi sem þú getur ekki lengur breytt. Seinni linsan er verðmætakeðjan. Inntaksmælikvarði mælir fyrirhöfn sem eytt er (unnar klukkustundir, dollarar útsettir). Afurðamælikvarði mælir það sem kerfið framleiddi (eiginleikar sendir, miðum lokað). Niðurstöðumælikvarði mælir breytinguna sem þú vildir í raun (tekjur varðveittar, biðtími styttur). Teymi hallast að inntökum og afurðum því þau eru auðveld að telja og alveg innan þeirra stjórnar, en verðmætið býr í niðurstöðum. Vegðu safn þitt að niðurstöðum og líttu á mælaborð sem er allt afurðir sem viðvörunarmerki.
Hannaðu mælikvarða sem standast leik
Gerðu ráð fyrir lögmáli Goodharts: þegar mælikvarði verður markmið hættir hann að vera góður mælikvarði. Hannaðu gegn því frá upphafi frekar en að bregðast við eftir að bjögunin birtist.
- Kjóstu hlutföll og hraða fram yfir hráar tölur. „Miðum lokað“ umbunar magni. „Hlutfall leyst við fyrstu snertingu“ umbunar úrlausn. Hrá tala er leikanleg með því að gera meira af einhverju einskis virði.
- Notaðu hópa. Hópur er safn skilgreint af sameiginlegu upphafi (allir notendur sem skráðu sig í mars). Að skýra frá eftir hópum kemur í veg fyrir að hnignandi þróun feli sig inni í smjaðrandi heildartölu sem sterkur nýlegur mánuður ber uppi.
- Paraðu hvern hvattan KPI við varnartein. Varnarteinamælikvarði er paraður móttölumælikvarði sem má ekki versna á meðan þú þrýstir á aðalmælikvarðann: afgreiðslutími símtals paraður við ánægju viðskiptavina, virkjun paruð við stuðningsálag. Varnarteinninn gerir svindl sýnilega dýrt.
Hafnaðu hégómamælikvörðum og krefstu framkvæmanleika
Hégómamælikvarði rís áreiðanlega, lítur áhrifamikill út og breytir engri ákvörðun: uppsafnaðir skráðir notendur, síðuskoðun, kóðalínur. Merkin eru samkvæm. Hann fer aðeins upp. Hann er algild tala frekar en hlutfall. Og hann hefur ekkert svar við spurningunni „hvað myndum við gera öðruvísi ef þessi tala tvöfaldaðist?“ Framkvæmanlegur mælikvarði tengist hins vegar tiltekinni hegðun sem þú getur haft áhrif á og ákvörðun sem hann myndi breyta. Áður en þú tekur upp nokkurn KPI skaltu spyrja hvaða aðgerð góður lestur og slæmur lestur myndu hvor um sig ræsa. Ef báðir lestrar leiða til sömu hegðunar skaltu henda mælikvarðanum. Þetta próf eitt og sér mun minnka flest fyrirhuguð mælaborð um helming.
Byggðu KPI-tré undir einum stefnumælikvarða (north-star)
Ekki rekja KPI sem flatan lista. Raðaðu þeim sem KPI-tré (eða mælikvarðatré): efsti mælikvarði brotinn í mælikvarðana sem stærðfræðilega eða orsakalega knýja hann, stig fyrir stig, niður í rekstrarmælingarnar sem einstök teymi eiga. Tréð segir þér hvaða lægri mælikvarða á að rannsaka þegar sá efsti hreyfist, sem breytir „talan er niðri“ í „biðtími þeirrar miðstöðvar er orsökin.“ Efst skaltu nefna einn stefnumælikvarða (north-star): mælinguna sem fangar best kjarnaverðmætið sem viðskiptavinir fá. Fyrir markað gæti það verið kláraðar færslur. Fyrir vöru, vikuleg virk notkun kjarnaeiginleikans. Stefnumælikvarði samstillir fyrirhöfn og kemur í veg fyrir að deildir fínstilli andstæðar staðbundnar tölur, en aðeins ef hann mælir verðmæti frekar en hégóma og aðeins ef varnarteinar jafna hann. Ef efsti mælikvarði þinn gæti haldið áfram að rísa á meðan viðskiptavinir fengu minna verðmæti er hann hégómi klæddur sem stefna.
Settu grunnlínur, markmið og þröskulda
KPI án viðmiðunarpunkts er bara tala á skjá. Gefðu hverjum þrjú viðmið. Grunnlína er núverandi eða sögulegt gildi, svo breyting sé marktæk frekar en dularfull. Markmið er gildið sem þú ætlar að ná, með dagsetningu. Þröskuldar ræsa aðgerð áður en markmið vinnst eða tapast: viðvörunarþröskuldur vekur athygli og krítískur þröskuldur vekur íhlutun. Grundaðu markmið í sönnunargögnum (fyrri þróun, ytri viðmiðun eða afkastagetulíkani) frekar en kringlóttri tölubjartsýni og skrifaðu rökin niður. Skráð rök eru það sem leyfir missi að kenna þér eitthvað í stað þess að valda þér bara vonbrigðum, því þú getur borið saman hvað gerðist við forsenduna sem setti markmiðið.
Sýndu heiðarlega á mælaborðum
KPI-mælaborð ætti að leyfa lesanda að átta sig á stöðu og þróun á sekúndum án þess að villa um fyrir. Sýndu þróun yfir tíma, ekki eina skyndimynd. Byrjaðu gildisása á núlli nema þú hafir yfirlýsta ástæðu til annars, því styttir ásar ýkja smáar breytingar í dramatískar. Sýndu breytileika og óvissu frekar en falska nákvæmni. Skýrðu samhengi svo lesandi geti greint raunverulega breytingu frá hávaða: útsetningar, atvik, árstíðabundni, stefnubreytingar. Forðastu myndbrellurnar sem smjaðra fyrir tölu: tvöfalda ása sem gefa í skyn fylgni, handvalin tímabil og þrívíddaráhrif sem brengla hlutföll. Þessar venjur tengjast beint greiningum og viðskiptagreind (kafli 7.3) og vörugreiningum og tilraunum (kafli 7.4), þar sem sömu heiðarleikastaðlar stýra hvernig þú lest það sem mælikvarði segir þér.
Taktu upp rekstrar-KPI orðaforðana
Rekstrarheilsa hefur rótgróna KPI-orðaforða sem þú ættir að endurnýta frekar en finna upp. Frá áreiðanleikaverkfræði (kafli 9.1): þjónustustigsvísir (SLI) er mælt merki um heilsu þjónustu (töf, árangurshlutfall). Þjónustustigsmarkmið (SLO) er markbilið fyrir SLI (99,9% beiðna heppnast). Og villufjárhagsáætlun er leyfður skortur (0,1% sem þú mátt eyða í áhættu áður en þú hættir að senda og stöðugar). Frá afhendingarleiðslunni (kafli 11.2): flæðismælikvarðar rekja vinnu gegnum kerfið (flæðistíma, afköst, vinnu í gangi, flæðishagkvæmni) og fjórir mælikvarðarnir úr DevOps Research and Assessment (DORA) áætluninni para hraða við stöðugleika: útsetningartíðni, leiðtíma breytinga, bilunarhlutfall breytinga og tíma til að endurheimta þjónustu. Báðir orðaforðar setja hraða við hlið stöðugleika af hönnun, svo ekkert teymi geti sett fram frábæra hraðatölu með því að fórna áreiðanleika hljóðlega. Þessir sömu rekstrar-KPI nærir verkfræðiskilvirkni og framleiðnivinnu forritara (kafli 1.10).
Mættu opinberum frammistöðuskýrsluskyldum
Hið opinbera bætir við sérstakri kröfu: KPI eru oft birtir frammistöðumælikvarðar skýrðir til löggjafa, eftirlitsaðila og almennings, stundum undir lögum. Meðhöndlaðu þá með auknum strangleika. Haltu skilgreiningunni stöðugri milli skýrslutímabila, svo þróun sé sannarlega samanburðarhæf ár frá ári. Skjalfestu aðferðafræðina og gagnauppsprettuna. Vertu heiðarleg(ur) um takmarkanir. Því birtur mælikvarði skapar sterka hvata er hann sérstaklega viðkvæmur fyrir Goodhart-bjögun: markmið um að stytta biðlista er náð með því að endurskilgreina hver telst bíða. Paraðu hvern birtan mælikvarða við varnarteina og úttektaðu skilgreininguna sjálfa, ekki bara töluna. Mikilvægasta spurningin um opinberan KPI er oft ekki „batnaði hann?“ heldur „mælir hann enn það sem hann sagðist mæla?“
Málamiðlanir: kostir og gallar
| Val | Kostir | Gallar |
|---|---|---|
| Niðurstöðumælikvarðar | Samstilla fyrirhöfn við raunveruleg áhrif. Erfitt að leika | Erfitt að skilgreina. Hægir, hávaðasamir. Rekning erfið |
| Inntaks-/afurðamælikvarðar | Auðvelt að mæla. Skýrt eignarhald. Hröð endurgjöf | Umbuna virkni fram yfir áhrif. Veikur tengill við verðmæti |
| Leiðandi vísar | Leyfa þér að stýra snemma | Forspár, svo hávaðasamari og óvissari |
| Eftirlegandi vísar | Yfirvaldsstaðfesting | Berast of seint til að breyta niðurstöðunni |
| Fáir KPI | Einbeiting, skýrleiki, auðvelt að miðla | Getur misst af víddum. Blindir blettir |
| Margir KPI | Víð þekja. Færri óvæntar uppákomur | Þynnt athygli. Mælaborðsþreyta. Andstæð merki |
| Opinber frammistöðuskýrslugjöf | Ábyrgð, gagnsæi, traust | Sterkur leikþrýstingur. Skilgreiningar verða pólitískar |
Meginspennan er einbeiting á móti þekju, skerpt af hvatningu á móti bjögun. Þú vilt nógu marga mælikvarða til að sjá alla myndina, nógu fáa til að teymi geti í raun brugðist við þeim og hvern varinn svo að hvatning hans spilli honum ekki. Leystu spennuna með því að halda litlu safni eigaðra, niðurstöðuvegins KPI raðað í tré undir einum stefnumælikvarða og með því að para hvern hvattan mælikvarða við varnartein. Þekja kemur þá úr byggingu trésins frekar en úr hreinum fjölda mælikvarða á skjánum.
Spurningar til að ræða með teyminu
Hafið þið einn stefnumælikvarða og mælir hann afhent verðmæti eða bara virkni? Flatur listi KPI leyfir deildum að fínstilla andstæðar staðbundnar tölur, á meðan stefnumælikvarði samstillir alla um verðmætið sem viðskiptavinir fá í raun: kláraðar færslur fyrir markað, virkjun fyrir vöru. Spyrðu hvort efsti mælikvarði ykkar myndi halda áfram að rísa ef viðskiptavinir fengju minna verðmæti, því ef hann getur það er hann hégómi klæddur sem stefna. Í stórri skipulagsheild er stefnumælikvarðinn það sem kemur í veg fyrir að sigur eins teymis sé tap annars, svo hann verður að sitja ofan á KPI-tré rekstrarmælinga sem teymi stýra. Komdu með núverandi efsta mælikvarða ykkar og reyndu að rekja hann niður í það sem hvert teymi á. Ef tréð tengist ekki er stefnumælikvarðinn skraut frekar en stýrikerfi.
Fyrir hvern hvattan KPI, hver er ódýrasta leiðin til að leika hann og hvaða varnartein myndi afhjúpa það svindl? Sérhver mælikvarði sem þú festir umbun eða orðspor við býður upp á að fínstilla töluna frekar en niðurstöðuna og ódýrasta leiðin er sjaldan sú sem þú ætlaðir. Sestu niður og, fyrir hvern KPI, hannaðu viljandi svindlið: hvernig myndi skynsamt teymi láta þessa tölu líta vel út á meðan það gerir minna af því sem þú vilt í raun? Nefndu síðan móttölumælikvarðann sem myndi grípa það (afgreiðslutími paraður við ánægju, virkjun paruð við stuðningsmiða, hraði paraður við villuhlutfall). Þessi æfing skiptir mestu fyrir mælikvarðana sem þú skýrir upp á við eða birtir, því þeir bera sterkustu hvatana og því sterkasta bjögunarþrýstinginn. Ef þú getur ekki nefnt varnartein fyrir KPI ertu ekki tilbúin(n) að hvetja hann enn.
Eru markmið ykkar grundað í sönnunargögnum og skrifuðuð þið niður rökin á bak við hvert? KPI án grunnlínu er bara tala og markmið sett á kringlótta tölu því hún hljómaði metnaðarfull verður ekki túlkað þegar þú missir af því. Athugaðu fyrir hvern KPI að hann beri grunnlínu, markmið með dagsetningu, viðvörunar- og krítíska þröskulda og skráð rök dregin úr fyrri þróun, viðmiðun eða afkastagetulíkani. Þetta skiptir mestu fyrir mælikvarða sem bera lögbundið eða samningsbundið vægi, þar sem „greiða 90% gildra krafna innan 21 dags“ þarf að vera verjanlegt frekar en vonglaðar ágiskanir. Komdu með núverandi markmið ykkar og spyrðu, fyrir hvert, „af hverju þessi tala og ekki hærri eða lægri?“ Ef svarið er þögn var markmiðið bjartsýni og missir mun kenna þér ekkert.
Ef þú þyrftir að verja hvern mælikvarða á aðalmælaborði þínu, hverjir lifðu af og hvað kostar hver ónotaður þig? Sérhver KPI ber endurtekinn kostnað: mælitæki, leiðslur, mælaborðsflís og sneið af athygli í hverri rýni, svo safn sem óx með uppsöfnun skattleggur skipulagsheildina hljóðlega án þess að nokkur ákvæði að það ætti að gera. Spennan er einbeiting á móti þekju: of fáir mælikvarðar og þú þróar blinda bletti, of margir og ekkert teymi getur brugðist við neinum þeirra. Komdu með fullu skrána og svaraðu, fyrir hvern mælikvarða, hvaða ákvörðun góður eða slæmur lestur myndi ræsa. Þeir án svars eru skraut sem þú borgar fyrir að viðhalda. Fyrir fyrirtæki með tugi teymismælaborða, eða opinberan aðila sem skýrir gegn lögbundnum ramma, skiptir agi þess að leggja niður mælikvarða jafn miklu máli og að bæta við, því ónotaður birtur mælikvarði býður enn upp á leik og þarf enn að vera varinn í úttekt.
Hvaða hlutfall mælaborðs ykkar mælir niðurstöðuna sem þið vilduð í raun, frekar en fyrirhöfnina sem þið eydduð eða afurðina sem þið framleidduð? Teymi reka að inntökum og afurðum því þau eru auðveld að telja og sitja alveg innan stjórnar teymis, en verðmætið býr í niðurstöðum, sem eru hægari, hávaðasamari og erfiðari að rekja. Teldu flísarnar: ef mælaborð er nánast allt eiginleikar sendir og miðum lokað og klukkustundir skráðar mælir það virkni og kallar það frammistöðu. Komdu með hvern mælikvarða flokkaðan sem inntak, afurð eða niðurstöðu og vertu heiðarleg(ur) um hvaða ákvarðanir myndu breytast ef aðeins niðurstaðan hreyfðist. Í stórri skipulagsheild er þetta jafnvægi þar sem staðbundin fínstilling felur sig, því deild getur sett fram framúrskarandi afurðatölur árum saman á meðan niðurstaðan sem fjármagnsaðilinn hugsar um, varðveittar tekjur eða styttur biðtími, rýrnar hljóðlega. Hjá hinu opinbera er afurða-eingöngu skýrsla („einingar afhentar“) nákvæmlega svarið sem eftirlitsaðilar hafa lært að vantreysta.
Fyrir hvern KPI, hver á skilgreiningu hans og sannleiksuppsprettu og myndu tvö teymi sem reikna hann óháð komast að sömu tölu? Mælikvarði án eins ábyrgs eiganda og eins yfirvaldskerfis verður viðvarandi rifrildi, þegar tveir hópar skýra frá „virkum notendum“ úr ólíkum fyrirspurnum og eyða fundinum í að sætta tölur frekar en að stýra þróuninni. Samkeppnistogið er sjálfræði á móti samræmi, því teymi vilja mæla á eigin hátt, en KPI sem merkir ólíkt í ólíkum herbergjum getur ekki rúllað upp í sameiginlegan stefnumælikvarða. Komdu með skilgreiningu, einingu, sannleiksuppsprettu og nefndan eiganda fyrir hvern mælikvarða og prófaðu nokkra með því að láta tvo reikna þá köld. Fyrir fyrirtæki sem rúlla mælikvörðum upp yfir viðskiptaeiningar, og fyrir opinberar mælingar haldnar stöðugum milli skýrslutímabila með lögum, er rekandi eða umdeild skilgreining ekki ónæði, hún er bilunin sem gerir heila frammistöðuskýrslu óverjanlega.
Sjónarhorn eftir geirum
Sprotafyrirtæki. Með handfylli fólks og litla fjárhagslega þrautseigju ætti allt fyrirtækjamælaborðið að rúmast á einum skjá: einn stefnumælikvarði sem mælir hvort viðskiptavinir halda áfram að fá verðmæti, tveir eða þrír drifkraftar hans og einn varnartein. Leggðu niður hégómatölur eins og uppsafnaðar skráningar snemma, áður en þær móta ákvarðanir, og skiptu stefnumælikvarðanum í hópa eftir skráningarviku svo sterk opnun geti ekki falið fráhvarfið undir. Hraði skiptir meira máli en ríkt mælikvarðasafn, svo mældu aðeins fáu tölurnar sem þú munt í raun bregðast við og slepptu hinum.
Lítið fyrirtæki. Þú hefur líklega engan greinanda og engan tíma til að smíða leiðslur, svo hallaðu þér að KPI-orðaforðunum sem þegar eru bakaðir inn í verkfærin sem þú átt: mælaborðin í sölustaðar-, stuðnings- eða bókhaldshugbúnaði þínum. Veldu tvo eða þrjá mælikvarða sem varpast á lifun (endurkaupahlutfall, sjóðsdaga við hendi, afhending á réttum tíma) og gefðu hverjum grunnlínu og markmið frekar en að horfa á hráar tölur reka. Kjóstu hlutföll sem þú getur lesið í fljótu bragði fram yfir skýrslur sem þú þarft að setja saman í höndunum.
Stórfyrirtæki. Vandinn eru tugir teyma sem fínstilla andstæðar staðbundnar tölur, svo verkið er KPI-tré undir einum stefnumælikvarða, nákvæmar skilgreiningar með nefndri sannleiksuppsprettu og varnartein á hverjum hvöttum mælikvarða. Staðlaðu skilgreiningar svo mælikvarði rúlli hreint upp yfir viðskiptaeiningar, samþættu rekstrar-SLI, -SLO og DORA mælikvarða við viðskipta-KPI og stýrðu safninu sem safni sem er snyrt, ekki bara aukið. Úttektaðu skilgreiningar, ekki bara tölur, því í stærð villir hljóðlega endurskilgreindur mælikvarði þúsundir manna í einu.
Hið opinbera. KPI eru oft birtir frammistöðumælikvarðar skýrðir til löggjafa undir lögum, svo haltu hverri skilgreiningu stöðugri milli tímabila, skjalfestu aðferðafræðina og gagnauppsprettuna og vertu heiðarleg(ur) um takmarkanir. Birt markmið bera sterkasta leikþrýstinginn, svo paraðu hvert við varnarteina og láttu óháða úttekt á skilgreiningunni sjálfri staðfesta (til dæmis) að kröfuhafar sem enn bíða séu ekki endurflokkaðir út úr talningunni. Skilgreindu árangur sem borgaraniðurstöður frekar en afhentar einingar, því „við sendum verklýsinguna“ er ekkert svar við löggjafa sem spyr hvort biðtími eða svik bötnuðu í raun.
Dæmi
Sprotafyrirtæki. Sex manna sprotafyrirtæki með framleiðniforrit fagnar hækkandi „heildarfjölda skráðra notenda“ ritinu þar til stjórnarmeðlimur spyr hvort nokkur haldi í raun áfram að nota vöruna. Þau leggja niður þann hégómamælikvarða og taka upp 7 daga virkjun sem stefnumælikvarða, skipta honum í hópa eftir skráningarviku svo sterk opnun geti ekki falið fráhvarfið undir. Þau gefa honum grunnlínu (25%), markmið (45%) og viðvörunar- og krítíska þröskulda og para hann við varnartein (stuðningsmiðar á virkan notanda) svo þau geti ekki blásið upp virkjun með ágengu innleiðingarflæði. Allt fyrirtækjamælaborðið rúmast á einum skjá: stefnumælikvarðinn, tveir drifkraftar hans og varnarteinninn. Þegar KPI stefnir í átt að viðvörunarþröskuldinum vita þau úr trénu hvaða drifkraft á að rannsaka fyrst.
Stórfyrirtæki. Alþjóðlegt flutningafyrirtæki tekur upp afhendingarhlutfall á réttum tíma sem stefnumælikvarða og byggir KPI-tré undir honum: stundvísi sókna, bið í miðstöð og síðasta-mílu árangur, hvert í eigu nefnds svæðisleiðtoga með grunnlínu, markmið og viðvörunar- og krítíska þröskulda. Hver hraða-KPI er paraður við varnartein, svo hlutfall á réttum tíma ferðast með skemmdahlutfalli og ekkert svæði geti náð tölu sinni með því að flýta pökkum í brot. Vettvangs-SLO (99,95% aðgengi rekningar-API, kafli 9.1) og DORA mælikvarðar (kafli 11.2) sitja á verkfræðimælaborðinu við hlið viðskipta-KPI. Þegar hlutfall á réttum tíma fellur í átt að viðvörunarþröskuldi sínum á einu svæði bendir tréð á bið þeirrar miðstöðvar sem orsök og lagfæringin er markviss frekar en fyrirtækjaflýti. Mælikvarðarnir sem teymið ákveður að hreyfa þennan ársfjórðung verða lykilniðurstöður í OKR þess teymis (kafli 11.4). Hinir haldast sem viðvarandi varnarteinar.
Hið opinbera. Atvinnuleysistryggingastofnun ríkis skýrir frá miðgildisdögum frá kröfu til fyrstu greiðslu sem birtum frammistöðumælikvarða sínum, skiptum í hópa eftir kröfumánuði svo góður ársfjórðungur geti ekki falið versnandi biðlista, frekar en hégómatalningunni „kröfur afgreiddar.“ Hún parar þann mælikvarða við varnarteina (greiðslunákvæmni og hlutfall áfrýjana sem eru felldar) svo hraði verði ekki keyptur með villum. Skilgreiningin á „miðgildisdögum“ er fryst milli ára og skjalfest opinberlega og óháð úttekt athugar skilgreininguna sjálfa og staðfestir að kröfuhafar sem enn bíða séu ekki hljóðlega endurflokkaðir út úr talningunni. Framlínu-SLI (uppitími gáttar, símsvörunarhlutfall) næra rekstrarmælaborðið undir birtu mælikvörðunum. Því árangur er skilgreindur sem niðurstöður kröfuhafa frekar en afhentar einingar getur stofnunin sýnt löggjafa sínum mælanlegt opinbert verðmæti sem stenst rýni.
Viðskiptarök: hvatar, ávöxtun fjárfestingar og heildarkostnaður
Ávöxtun góðs KPI kemur af einbeitingu og samstillingu, sem forðast stærsta falda kostnaðinn í stórum skipulagsheildum: mörg teymi vinna hart, á réttum tíma, að hlutum sem fela ekki í sér framgang stefnu. Þegar litla safnið mælikvarða sem skipta máli er skýrt og sýnilegt kemur tvítekin fyrirhöfn í ljós, andstæð staðbundin markmið eru sætt áður en þau rekast og lágverðmæt vinna missir skjólið. Dýrasta auðlind stórrar skipulagsheildar er samstillt athygli fólks hennar og ríkjandi ávöxtun KPI er endurbeint afkastageta.
Kostnaðurinn við rangan KPI er ekki mælaborðið. Það eru ársfjórðungar af fyrirhöfn sem fínstilla tölu á meðan raunverulega niðurstaðan rýrnar, auk kostnaðar við að vinda ofan af leiknu hegðuninni eftir á. Símaver sem eyddi ári í að lágmarka afgreiðslutíma á meðan það hámarkaði endurtekin samskipti framleiddi neikvæða ávöxtun alfarið gegnum einn velviljaðan mælikvarða og þurfti síðan að endurbyggja bæði ferlið og traust starfsfólks.
Heildareignarkostnaður (TCO) KPI er hóflegur en raunverulegur og endurtekinn. Hver mælikvarði ber viðvarandi kostnað: mælitæki og leiðslur til að safna honum, mælaborð til að sýna hann, rýnifundi til að ræða hann og andlega byrði einnar enn hlutar að fylgjast með. Sá endurtekni kostnaður er sterkustu rökin fyrir litlu safni þar sem hver KPI vinnur fyrir sér, því ónotaður mælikvarði kostar enn peninga að viðhalda. Haltu safninu litlu, skilgreiningum nákvæmum og varnarteinum á sínum stað og KPI þínir endurgreiða aukakostnað sinn margfalt í forðaðri misvísun.
Andmynstur og gildrur
- Hégómamælikvarðar: uppsafnaðar tölur sem aðeins rísa og breyta engri ákvörðun.
- Mælikvarðaþráhyggja: hegðun fínstillir töluna, ekki niðurstöðuna, því enginn varnarteinn afhjúpar bilið.
- Óeigðir eða illa skilgreindir KPI: enginn ábyrgur aðili, eða tvö teymi reikna „virkan notanda“ ólíkt og rífast í stað þess að stýra.
- Afurða-eingöngu mælaborð: allt sem er mælt er það sem teymið framleiddi. Ekkert mælir breytinguna sem það olli.
- Flatur listi án trés: tugir mæla og enginn stefnumælikvarði, svo hreyfing tölu gefur enga vísbendingu um hvar á að leita.
- Kringlótt markmið án raka: markmið valið því það hljómaði djarft, ómögulegt að túlka þegar misst.
- Óheiðarleg rit: styttir eða tvöfaldir ásar, handvalin tímabil og þrívíddaráhrif sem framleiða sögu.
- Birtir mælikvarðar leiknir með endurskilgreiningu: biðlistamarkmið náð með því að breyta hver telst bíða.
- Að rugla KPI saman við OKR: að líta á viðvarandi heilsumælikvarða sem ársfjórðungsbreytingarmarkmið, eða öfugt (kafli 11.4).
Þroskalíkan
- Stig 1, Upphaf: Mælikvarðar eru að mestu hégómatölur án grunnlína, markmiða, eigenda eða sameiginlegra skilgreininga. Mælaborð sýna skyndimyndir án þróunar, skýrslugjöf er viðbragðsdrifin og ad hoc og enginn getur sagt hvaða tala skiptir mestu.
- Stig 2, Þróun: KPI eru til hjá sumum teymum með grunnlínum og markmiðum, en þeir eru mestmegnis afurðir, skilgreiningar eru ólíkar milli teyma og varnarteina vantar. Venja er ósamræmd um skipulagsheildina og leikur birtist og er ekki þekktur sem leikur.
- Stig 3, Stöðlun: Samfellt, eigið KPI-safn hefur nákvæmar skilgreiningar og nefnda sannleiksuppsprettu, skjalfest og framfylgd um skipulagsheildina. Mælikvarðar eru flokkaðir sem leiðandi eða eftirlegandi og inntak, afurð eða niðurstaða, hvattir mælikvarðar eru paraðir við varnarteina og rit fylgja heiðarlegum sýnistöðlum á hverju teymi.
- Stig 4, Stjórnun: KPI-safnið sjálft er mælt og stýrt gegn grunnlínum. Skilgreiningarnákvæmni, gagnagæðavilluhlutföll og hve oft hver mælikvarði er leikinn eru rakin yfir tíma, markmið eru rýnd gegn sönnunargögnum hverja lotu, viðvörunar- og krítískir þröskuldar ræsa skjalfestar íhlutanir og skilgreiningar eru úttektaðar svo birtur mælikvarði mæli enn það sem hann sagðist mæla. Goodhart-áhrif eru vöktuð yfirvegað frekar en uppgötvuð eftir tjónið.
- Stig 5, Samhæfing: KPI-tré tengir framlínumælingar við einn stefnumælikvarða. Niðurstöðumælikvarðar ráða ríkjum í safninu og rekstrar-SLI, -SLO og DORA og flæðismælikvarðar samþættast viðskipta-KPI. Mælikvarðarnir sem teymi velur að hreyfa nærast hreint inn í OKR þess (kafli 11.4) og skipulagsheildin leggur stöðugt niður, skiptir út og endurskilgreinir KPI þegar stefna og áhættumynd breytast.
Hugmyndir til umræðu
- Hverjir KPI ykkar myndu halda áfram að rísa þótt varan eða þjónustan væri að versna?
- Fyrir hvern hvattan KPI, hver er ódýrasta leiðin til að leika hann og hvaða varnarteinn myndi afhjúpa það svindl?
- Hve margir mælikvarðar mælaborðs ykkar eru niðurstöður og hve margir eru inntök eða afurðir sem þið teljið því þær eru auðveldar?
- Hvaða mælikvörðum ykkar vantar eiganda eða eina samþykkta skilgreiningu og hvað hefur sú tvíræðni kostað ykkur í rifrildum?
- Fyrir mælikvarða sem þið skýrið frá eða birtið, gæti markmiðinu verið náð með því að endurskilgreina mælikvarðann frekar en bæta niðurstöðuna?
- Ef þið þyrftuð að skera mælaborðið ykkar niður í fimm mælikvarða, hverjir lifðu af og situr stefnumælikvarði efst á þeim fimm?
Helstu atriði
- KPI er mælikvarði valinn því hann endurspeglar markmið sem þú vilt vernda. Góður er samstilltur, mælanlegur, framkvæmanlegur og í eigu.
- OKR eru breytingin sem þú vilt. KPI eru heilsan sem þú viðheldur. Fyrir OKR, takt og einkunnagjöf, sjá kafla 11.4.
- Flokkaðu mælikvarða sem leiðandi eða eftirlegandi og inntak, afurð eða niðurstöðu og vegðu safn þitt að niðurstöðum.
- Gerðu ráð fyrir lögmáli Goodharts: paraðu hvern hvattan KPI við varnartein og kjóstu hlutföll og hópa fram yfir hráar tölur.
- Hafnaðu hégómamælikvörðum, raðaðu KPI í tré undir einum stefnumælikvarða og gefðu hverjum grunnlínu, markmið og þröskulda.
- Sýndu heiðarlega (kaflar 7.3 og 7.4) og endurnýttu rekstrarorðaforða: SLI, SLO og villufjárhagsáætlanir (kafli 9.1) og DORA og flæðismælikvarða (kafli 11.2).
- Hjá hinu opinbera skaltu meðhöndla birta mælikvarða með auknum skilgreiningarstrangleika og úttektaðu skilgreininguna, ekki bara töluna.
Heimildir og frekari lestur
- Key Performance Indicators: Developing, Implementing, and Using Winning KPIs, by David Parmenter (a practical framework for selecting and structuring KPIs).
- Lean Analytics, by Alistair Croll and Benjamin Yoskovitz (vanity versus actionable metrics, and the One Metric That Matters).
- The Lean Startup, by Eric Ries (actionable versus vanity metrics, and cohort analysis).
- How to Measure Anything, by Douglas W. Hubbard (defining and quantifying the seemingly unmeasurable).
- The Visual Display of Quantitative Information, by Edward R. Tufte (honest, high-integrity data graphics).
- Site Reliability Engineering, by Betsy Beyer, Chris Jones, Jennifer Petoff, and Niall Richard Murphy, eds. (SLIs, SLOs, and error budgets).
- Accelerate, by Nicole Forsgren, Jez Humble, and Gene Kim (the DORA delivery and stability metrics).
- Goodhart, C. A. E., “Problems of Monetary Management: The UK Experience” (1975): the origin of Goodhart’s law; see also Marilyn Strathern’s widely quoted formulation.
- U.S. Government Accountability Office (GAO) guidance on performance measurement and the GPRA Modernisation Act: public-sector performance-reporting practice.