Viðfangsefni 10.1 — Kjarnaárangursvísar (KPI)

Kjarnaárangursvísir (KPI) er lítil, vandlega valin tala sem segir þér hvort þjónusta er örugg, sanngjörn, árangursrík og treyst — og í heilbrigðis- og velferðarþjónustu er að velja og lesa þessar tölur vel sjálft klínískt öryggis- og almenn ábyrgðarmál, ekki stjórnsýsluhreinlæti.

Hvers vegna þetta skiptir máli í heilbrigðis- og velferðarþjónustu#

Í heilbrigðis- og velferðarþjónustu móta tölurnar sem þú fylgist með umönnunina sem fólk fær. Biðlistakjarnavísir sem telur „sjúklinga bókaða“ en ekki „sjúklinga séða“ getur falið hóp sem hljóðlega versnar heima. Stafrænt þjónustumælaborð sem er grænt á verutíma en þegir um hvort fatlaðir notendur geti klárað bókun lætur aðgangsvanda vaxa í heilsuójöfnuð. Það sem þú mælir gefur til kynna hvað þú metur, og starfsfólk, birgjar og reiknirit fínstilla öll í átt að mælda markmiðinu — stundum á kostnað ómælda hlutarins sem skipti í raun máli.

Hagsmunirnir eru hærri hér en í flestum geirum því bilunarhættirnir eru mannlegir. Mid Staffordshire og aðrar rannsóknir fundu ítrekað skipulagsheildir sem náðu fyrirsagnarfjárhags- og virknimarkmiðum meðan umönnunargæði hrundu undir. Mælikvarðar voru skýrðir upp á við sem grænir meðan sjúklingar urðu fyrir skaða — mynstrið sem nú er víða kallað „vatnsmelónuskýrslugjöf“ (grænt að utan, rautt að innan), sem Viðfangsefni 10.4 — Sýnileiki fyrir forstjóra og æðri leiðtoga skoðar ítarlega. Góðir KPI eru ein varna þinna gegn því bili milli skýrðrar myndar og raunverulegrar.

KPI eyða líka opinberu fé og almannatrausti. Sérhver vísir sem þú birtir verður hluti af því hvernig borgarar, eftirlitsaðilar og pantendur dæma kerfið. Að ofmeta, velja kirsuber eða leika markmið er ekki bara slök stjórnun; það rýrir traustið sem stafræn heilbrigðisþjónusta veltur á til að fá fólk til að deila gögnum og taka upp nýjar þjónustur. Þetta viðfangsefni er mælingarfélagi Viðfangsefnis 10.0 — Markmið og lykilárangur (OKR): þar sem OKR knýja markvissa breytingu vakta KPI áframhaldandi heilsu þjónustanna og kerfanna sem þú rekur.

Lykilhugtök#

Árangursvísir (performance indicator), eða KPI, er mælikvarði valinn því hann endurspeglar framvindu gegn markmiði sem skiptir máli. Frammistöðumælikvarði er hver mæling á virkni eða ástandi; KPI er undirmengið sem þú hefur vísvitandi hafið upp í „fylgstu með þessum“. Orðið kjarna ber þunga — ef allt er KPI er ekkert KPI. Gagnlegur agi er að halda handfylli KPI á þjónustu, hver með nafngreindum eiganda, skilgreiningu, gagnauppsprettu og ástæðu fyrir að hann vinni sér sæti á borðinu.

Góður KPI hefur fjóra eiginleika. Hann er samstilltur niðurstöðu sem ósvik skiptir sjúklinga, borgara eða klíníska starfsmenn máli, ekki bara innri virkni. Hann er framkvæmanlegur — þegar hann hreyfist getur einhver gert eitthvað í því. Hann er tímabær — hann berst nógu fljótt til að bregðast við, ekki sex vikum eftir að ársfjórðungnum lauk. Og hann er erfiður að leika — ekki er hægt að bæta hann á pappír án þess að bæta raunverulega hlutinn. Mælikvarðar sem falla á síðasta prófið bjóða lögmáli Goodharts: „þegar mælikvarði verður markmið hættir hann að vera góður mælikvarði.“

Vísum er venjulega skipt í leiðandi og eftirliggjandi. Eftirliggjandi vísir staðfestir niðurstöðu eftir á (30 daga dánartíðni, árleg ánægja sjúklinga). Leiðandi vísir hreyfist fyrr og spáir fyrir um þann eftirliggjandi (heilleiki lyfjasamræmingar, útgáfutíðni, hlutfall tilvísana flokkaðra innan 24 klukkustunda). Þú þarft hvort tveggja: eftirliggjandi vísar segja þér hvort þú ert að vinna, leiðandi vísar segja þér það í tæka tíð til að breyta niðurstöðunni. Mörg hagfræði- og rekstrarrammi lýsa þessum leiðandi/eftirliggjandi greinarmun.

Samhliða og jafn mikilvæg skipting er ferla-, afurða- og niðurstöðumælikvarðar. Ferlamælikvarði telur hvort þú gerðir hlutinn (tímar í boði, skrár fluttar). Afurðamælikvarði telur hvað var framleitt (bréf send, próf með niðurstöðu). Niðurstöðumælikvarði fangar hvað breyttist í raun fyrir manneskjuna — niðurstöðumælikvarði (outcome measure) eins og einkennabati, forðuð innlögn eða sjúklingaskýrð lífsgæðaeinkunn. Heilbrigðis- og velferðarkerfi hafa langvinna hlutdrægni í átt að virkni því virkni er auðvelt að telja og oft hvernig fé flæðir. Stenstu hana: kjóstu niðurstöður og reynslu, og notaðu ferlamælikvarða sem leiðandi vísa sem útskýra þær.

Þar sem engin ein tala er örugg ein og sér, notaðu jafnvægismælingu. Jafnvægisstigataflan (balanced scorecard) frá Kaplan og Norton parar hvern frammistöðumælikvarða við aðra svo að bæta einn á kostnað annars verði sýnilegt. Institute for Healthcare Improvement formgerir þetta sem niðurstöðu-, ferla- og jafnvægismælikvarða — jafnvægismælikvarðinn vaktar skaðann sem umbót þín gæti valdið annars staðar (hraðari útskrift jafnvægisstillt gegn endurinnlögn, til dæmis).

Ekki sérhver tala sem hækkar er framvinda. Hégómamælikvarði (vanity metric) lítur áhrifamikill út og hækkar áreiðanlega en upplýsir enga ákvörðun — heildarfjöldi skráðra notenda, uppsafnaðar innskráningar, síðuflettingar. Lean startup hreyfingin gerði andstæðuna milli hégóma- og framkvæmanlegra mælikvarða vinsæla: framkvæmanlegur mælikvarði tengir breytingu sem þú gerðir við breytingu á hegðun eða niðurstöðu sem þú getur brugðist við. Uppsafnaðar tölur eru klassíska vísbendingin — þær hækka aðeins, svo þær geta aldrei gefið til kynna að eitthvað sé að.

Að lokum, aðgreindu mælingu til umbóta frá mælingu til dóms. Dómur spyr „náðir þú markmiðinu þennan mánuð?“ og minnkar lifandi ferli í tveggja punkta, rautt-eða-grænt samanburð við síðasta tímabil — samanburð sem er næstum alltaf tölfræðilega merkingarlaus því hann getur ekki aðgreint merki frá hávaða. Umbætur spyrja „er þetta ferli að breytast, og getum við treyst breytingunni?“ og svara með tölfræðilegri ferlisstýringu (SPC): að teikna mælikvarða yfir tíma á keyrslu- eða stýririti (control chart) með stýrimörkum, svo þú getir séð hvort frávik er venjulegur (sameiginlegur-orsakar) hávaði eða ósvik (sérstök-orsök) merki sem vert er að bregðast við. Making Data Count áætlun NHS England hefur gert þetta að ráðlagðri leið til að setja fram rekstrargögn yfir NHS, einmitt til að drepa „upp frá síðasta mánuði, niður frá markmiði“ viðbragðið sem knýr slæmar ákvarðanir.

Bestu starfsvenjur#

1. Byrjaðu á niðurstöðunni, vinndu síðan aftur til vísisins. Nefndu hlutinn sem þarf að vera sannur fyrir sjúkling, borgara eða klínískan starfsmann — færri forðanlegar innlagnir, hraðara aðgengi, örugg lyfjagjöf — og spyrðu fyrst þá hvað myndi segja þér að það gerist. Þetta heldur þér frá sjálfgefnu gildrunni að mæla það sem kerfi þín skrá tilviljanakennt. Ef þú getur ekki tengt frambjóðenda-KPI við niðurstöðu sem einhvern varðar er hann líklega hégómamælikvarði.

2. Haltu safninu litlu og gefðu hverjum KPI eiganda og skilgreiningu. Stjórn eða þjónusta ætti að fylgjast með handfylli KPI, ekki fimmtíu. Hver þarfnast nákvæmrar skilgreiningar (hvað telur, hvað er útilokað, yfir hvaða tímabil), nafngreinds eiganda sem ber ábyrgð á honum og skjalfestrar gagnauppsprettu. Óljósar skilgreiningar eru hvernig tvö teymi þræta í mánuð um tölu sem þau mældu ólíkt.

3. Jafnvægisstilltu hvern KPI svo ekki sé hægt að leika hann einan. Fyrir hvern mælikvarða, spyrðu „hvernig gæti skynsamur einstaklingur bætt þessa tölu án þess að bæta raunverulega hlutinn, og hvaða jafnvægismælikvarði myndi grípa hann?“ Paraðu aðgengi við öryggi, afköst við endurinnlögn, kostnað við reynslu, afhendingarhraða við breytingabilunarhlutfall. Jafnvægissöfn gera leik sýnilegan og virða raunveruleikann að heilbrigðis- og velferðarniðurstöður eru fjölvíddar.

4. Kjóstu niðurstöðu- og reynslumælikvarða fram yfir virkni. Virknitölur eru tælandi því þær eru gnóttarríkar og oft bundnar fjármögnun, en þær svara „hve uppteknir vorum við?“ ekki „hjálpaði það?“. Hvar sem þú getur, hefðu upp niðurstöðumælikvarða og sjúklingaskýrða reynslu- og niðurstöðumælikvarða (PREM og PROM) í KPI-safnið, og færðu hráa virkni niður í stuðningslagið. Þar sem niðurstaða er hæg eða erfið að mæla, veldu sannprófaðan leiðandi ferlamælikvarða sem spáir áreiðanlega fyrir um hana.

5. Settu KPI fram sem tímaraðir með SPC, ekki tveggja punkta samanburð. Taktu upp Making Data Count nálgunina: teiknaðu mælikvarðann í keyrslu- eða stýririts stíl svo sameiginlegt-orsakar frávik og sérstök-orsök merki séu aðgreinanleg í fljótu bragði. Þetta stöðvar teymi frá að bregðast við hávaða, fagna heppnum mánuði eða vera refsað fyrir óheppinn. Það breytir líka stjórnarherbergisumræðunni úr „hvers vegna misstum við?“ í „hefur ferlið í raun breyst?“ — sem er umbótaspurningin (sjá Viðfangsefni 10.2 — Gæðaumbætur og umbótafræði).

6. Skiptu KPI eftir þýði til að afhjúpa ójöfnuð. Samanlögð tala felur dreifingu. „Góður“ meðalbiðtími getur falið að sjúklingar úr fátækustu hverfunum, eða þeir sem þurfa túlk, bíða langtum lengur. Brjóttu sérhvern jafnræðistengdan KPI niður eftir fátækt, þjóðerni, aldri, fötlun og stafrænum aðgangi, í samræmi við heilsujafnræðis skyldur og ramma eins og NHS Core20PLUS5. Í stafrænum þjónustum, skiptu líka upptöku- og klárunarhlutföllum — fyrirsagnarupptökutala getur falið að þjónusta þín útilokar einmitt fólkið sem þarfnast hennar mest (sjá Viðfangsefni 4.5 — Gögn, greining og stýring íbúaheilsu).

7. Meðhöndlaðu gagnagæði sem forsendu, og mældu þau. KPI er aðeins jafn áreiðanlegur og gögnin undir. Raktu gagnagæði reitanna sem KPI þínir velta á — heilleika, réttmæti, tímanleika, þekju — með tólum eins og NHS Data Quality Maturity Index, og sýndu gagnagæðafyrirvara samhliða tölunni. Ef 30% skráa vantar reitinn, segðu það á mælaborðinu; sjálfsöruggur KPI byggður á slökum gögnum er verri en enginn KPI.

8. Notaðu afhendingarmælikvarða fyrir stafrænu þjónustuna sjálfa, valda með sömu nákvæmni. Fyrir hugbúnaðinn sem þú smíðar og rekur gefa DevOps Research and Assessment (DORA) fjórir lyklar — útgáfutíðni, leiðartími breytinga, breytingabilunarhlutfall og tími til endurheimtar þjónustu — jafnvægða sýn á hraða og stöðugleika. Þeir standast leik sem safn: þú getur ekki afhent hraðar með því að brjóta hluti, því breytingabilunarhlutfall og endurheimtartími grípa það. Bættu við áreiðanleika- og öryggis-KPI sem skipta klínískt máli, svo sem atvikatíðni og framboði öryggismikilvægra aðgerða (sjá Viðfangsefni 3.6 og Viðfangsefni 3.8).

9. Lagskiptu skýrslugjöf svo hver áhorfandi fái rétta hæð. Framlínuteymi þarf nákvæma, rauntíma ferlamælikvarða; þjónustustjórn þarf jafnvægða handfylli með SPC; kerfisforysta þarf valda fáa niðurstöðu- og jafnræðismælikvarða. Hannaðu lögin vísvitandi svo efsta sýnin sé heiðarlegt safn þeirra fyrir neðan, ekki handvalið flatterandi undirmengi. Þetta er byggingarleg vörn þín gegn vatnsmelónuskýrslugjöf (Viðfangsefni 10.4).

10. Yfirfarðu og leggðu niður KPI á áætlun. Vísar rýrna: mælikvarði sem knúði raunverulega umbót getur orðið leikinn helgisiður þegar hegðunin sem hann beindist að er innfelld, og ný áhætta kemur upp sem ekkert vaktar. Settu KPI á reglulega yfirferð þar sem þú spyrð um hvern „er þetta enn að segja okkur eitthvað sem við bregðumst við?“ og leggðu niður dauðviðinn. Úrelt KPI-safn er ekki hlutlaust — það beinir athygli virkt á rangan stað.

Spurningar til að ræða með teyminu#

1. Fyrir hvern fyrirsagnar-KPI okkar, hvernig gæti einhver bætt töluna án þess að bæta raunveruleikann — og myndum við taka eftir því? Þetta er Goodhart-álagsprófið, og best gert sem vísvitandi andstæð æfing. Takið hvern KPI og látið teymið leika hlutverk teygðrar þjónustu sem reynir að ná honum: útskrifa fyrir miðnætti til að núllstilla klukkuna, endurþrepa biðandi sjúkling, loka og opna miða aftur til að núllstilla úrlausnartíma, magnskrá notendur sem koma aldrei aftur. Málið er ekki tortryggni gagnvart samstarfsmönnum heldur viðurkenning þess að þrýstingur auk eins-tölu markmiðs framleiðir fyrirsjáanlega röskun, einkum þegar laun, orðspor eða samningsviðurlög hvíla á tölunni. Gott svar nefnir tiltekna leikleið fyrir hvern KPI og greinir jafnvægismælikvarðann eða gagnaathugunina sem myndi afhjúpa hana — og flaggar heiðarlega hvern KPI þar sem þið hafið enga slíka vörn núna. Ef mælikvarði verður ekki varinn á þennan hátt ætti umræðan að enda með ákvörðun að para hann, endurskilgreina eða sleppa honum.

2. Hverjar talna okkar skýrum við fyrir umbætur, og hverjar fyrir dóm — og setjum við hverja fram á hátt sem passar? Teymi taka reglulega mælikvarða smíðaðan til að hjálpa þjónustu að læra og afhenda hann, óbreyttan, til nefndar sem notar hann til að láta einhvern svara til ábyrgðar, eða öfugt. Spennan er raunveruleg: leiðtogar þurfa tryggingu, og umbætur þurfa öryggi til að sjá vandamál heiðarlega, og sama línuritið getur ekki alltaf þjónað báðum án röskunar. Gangið gegnum raunverulega stjórnar- og rekstrarpakka ykkar og merkið raunverulegan tilgang hvers mælikvarða, spyrjið síðan hvort framsetningin passar — eruð þið að sýna tveggja punkta rautt/grænt samanburð þar sem SPC-rit myndi koma í veg fyrir skyndiviðbrögð við hávaða? Gott, heiðarlegt svar mun viðurkenna hvar dómsmenning hefur læðst inn í umbótavettvanga (sem lætur starfsfólk fela vandamál) og hvar óljós umbótafrásagnir eru notaðar til að víkja sér undan lögmætri ábyrgð. Markmiðið er meðvitað val á mælikvarða, með SPC sem sjálfgefna framsetningu, frekar en tilviljunarkennda blöndu.

3. Afhjúpa eða fela KPI okkar ójöfnuð, og hvers reynsla vantar alveg í þá? Samanlagðir KPI eru þægilegir einmitt því þeir meðaltala burt fólkið á jaðrinum, og í heilbrigðis- og velferðarþjónustu eru þessir jaðrar þar sem forðanlegur skaði þéttist. Ræðið hverjir vísa ykkar eru skiptir eftir fátækt, þjóðerni, fötlun, aldri og stafrænum aðgangi — og hverjir eru enn skýrðir aðeins sem ein kerfisbreið tala sem gæti litið heilbrigð út meðan undirhópur er brugðist. Þrýstið lengra að fólkinu sem aldrei kemst inn í gögn ykkar yfirleitt: sjúklingum sem komust ekki framhjá innskráningunni, sem yfirgáfu stafræna eyðublaðið, sem voru aldrei vísað, sem neituðu að deila lýðfræðireitnum sem þið skiptið eftir. Sterkt svar greinir að minnsta kosti einn KPI þar sem skipting breytti eða myndi breyta sögunni, viðurkennir gagnagæða- og samþykkistakmarkanir á skiptingu heiðarlega og skuldbindur sig til tiltekins skrefs — jafnvel staðgengils eða lítillar eigindlegrar rannsóknar — til að sjá það sem nú er ósýnilegt. Eitthvað minna áhættir mælaborð sem er tæknilega nákvæmt og siðferðilega blint.

4. Hve marga KPI erum við í raun að fylgjast með, og hverja gætum við lagt niður án þess að tapa neinu? Orðið kjarna þýðir aðeins eitthvað ef safnið er lítið, samt safnast vísar hraðar en nokkur fjarlægir þá — landsskil hér, samningsmælikvarði þar, tala sem fyrrum forstöðumaður bað einu sinni um og enginn hefur þorað að sleppa síðan. Spennan er að hver KPI finnst verjanlegur í einangrun, svo safnið vex þar til stjórnarpakkar eru hundrað síður sem enginn les og raunverulega mikilvægu merkin eru grafin meðal uppvakningamælikvarða framleiddra af vana. Gangið gegnum raunverulega skýrslugjöf ykkar og teljið vísana heiðarlega, spyrjið síðan um hvern hvort nokkur brást við honum á síðasta ári og hvaða ákvörðun hann upplýsir; mælikvarðarnir sem standast hvorugt prófið eru dauðviður sem enn eyðir greinandatíma og þynnir athygli. Gott svar nefnir tiltekna tölu sem þið munuð halda á þjónustu, greinir að minnsta kosti einn KPI til að leggja niður alveg og kemur á tímasettri yfirferð svo safnið haldist valið frekar en að bólgna hljóðlega upp aftur. Gætið að viðbragðinu að það að leggja niður mælikvarða sé viðurkenning á bilun — agaður frádráttur er merki um þroska, ekki vanrækslu.

5. Hve mikið treystum við gögnunum undir hverjum fyrirsagnar-KPI, og segir mælaborðið það? Sjálfsörugg tala byggð á reit sem er 30% ófullkominn er hættulegri en engin tala, því hún býður ákvarðanir sem gögnin geta ekki stutt meðan hún ber vald hreinnar tölu. Í heilbrigðis- og velferðarþjónustu er þetta bráð: lýðfræðireitir sem þarf fyrir jafnræðisskiptingu eru oft fáir, kóðunarvenjur eru breytilegar milli staða og athöfnin að stafrænavæða pappírsferli getur breytt hvað er skráð og hvenær. Ræðið, fyrir hvern KPI, hvort þið vitið heilleika hans, réttmæti, tímanleika og þekju, og hvort þessir fyrirvarar ferðast með tölunni inn í stjórnarpakkann eða eru hljóðlega fjarlægðir þegar hún færist upp. Sterkt svar bendir á áþreifanlegt tól — gagnagæðaathugun, DQMI, heilleikaþröskuld sem mælikvarði er merktur undir — og sýnir að minnsta kosti einn stað þar sem gagnagæðafyrirvari er sýndur samhliða KPI frekar en falinn. Heiðarlega útgáfan viðurkennir hvar þið skýrið núna frá tölu sem þið getið ekki staðið fullkomlega á bak við, og meðhöndlar að laga gögnin sem hluta KPI-sins, ekki aðskilið bakskrárverk.

6. Rúllast lög skýrslugjafar okkar upp heiðarlega, og hvar gæti rautt orðið grænt á leið til stjórnar? Ólíkir áhorfendur þurfa lögmætt ólíka hæð — framlínuteymi vill nákvæma rauntíma ferlamælikvarða, stjórn vill jafnvægða handfylli með SPC, kerfi vill valda fáa niðurstöður — en hver söfnun er tækifæri til að undirliggjandi mynd sé jöfnuð, meðaltöluð eða handvalin í eitthvað þægilegra en sannleikurinn. Þetta er byggingarleg rót vatnsmelónuskýrslugjafar: því fleiri lög milli deildar og stjórnar, því fleiri staðir þar sem dreifing getur verið flött í fullvissandi meðaltal, eða berjandi stað jafnaður á móti sterkum. Rekið einn KPI frá framlínuuppsprettu hans alla leið upp á efstu sýn og spyrjið hvort framkvæmdatalan er trúverðugt safn eða flatterandi undirmengi, og hver — ef nokkur — endurskoðar þá upprúllun. Gott svar sýnir að skýrslulög voru hönnuð vísvitandi með samþykktum skilgreiningum og eigendum, greinir að minnsta kosti einn punkt þar sem söfnun gæti falið vandamál og nefnir jafnvægismælikvarðann eða niðurboranir sem halda efstu sýn sannri. Heiðarleiki hér þýðir að viðurkenna hvar upprúllun er núna tekin á trú frekar en athuguð (sjá Viðfangsefni 10.4).

Í reynd: dæmi úr heilbrigðis- og velferðarþjónustu#

Samþætt umönnunarkerfi (ICS) setur af stað stafræna tilvísunarþjónustu sem leyfir heimilislæknum að vísa beint í samfélagssjúkraþjálfun fyrir stoðkerfi (MSK), í stað pappírs- og faxferlis. Eðlishvöt áætlunarstjórnarinnar er að skýra frá tveimur KPI: fjölda stafrænna tilvísana mótteknum og verutíma kerfis. Innan þriggja mánaða eru báðir sterkt grænir — þúsundir tilvísana, 99,9% verutími — og stjórnin er tilbúin að lýsa yfir árangri.

Klíníski forstjórinn er órólegur og biður greiningarteymið (vinnandi með mynstrinu í Viðfangsefni 4.5) að endurbyggja KPI-safnið kringum niðurstöður. Þau lenda á jafnvægðri handfylli: tími frá tilvísun til fyrstu snertingar (aðgengi, sýnt sem SPC-rit), hlutfall tilvísana skilað eða hafnað sem ófullkomnum (leiðandi gæðamerki), sjúklingaskýrð niðurstöðueinkunn við útskrift (niðurstaða), stutt reynslumæling (fannst þér þú taka þátt í ákvörðunum?) og breytingabilunarhlutfall útgáfa þjónustunnar (afhendingarstöðugleiki). Sérhver aðgengis- og niðurstöðumælikvarði er skiptur eftir fátæktartugum og eftir því hvort sjúklingur þurfti stafrænan stuðning.

Endurbyggða sýnin segir mjög aðra sögu. Verutími er ósvik fínn, en skilahlutfall til tilvísandans er 22% — ein af hverjum fimm tilvísunum skoppar því stafræna eyðublaðið gerir frjálsan textasögu skyldubundna, svo heimilislæknar leika það með því að skrifa „sjá viðhengi“ og flokkunarteymið hafnar þeim. SPC-ritið sýnir að aðgengistími er stöðugur en situr vel yfir markmiði án batnandi þróun. Og skipting afhjúpar að sjúklingar í tveimur fátækustu tugunum eru helmingi ólíklegri til að klára sjálfs-tilvísunarleiðina sem þjónustan ýtti hljóðlega fólki í átt að, sem víkkar bil sem áætlunin hafði gert ráð fyrir að hún væri að loka. Ekkert af þessu var sýnilegt í upprunalegu tveimur grænu tölunum. Stjórnin endurhannar eyðublaðið, bætir við aðstoðaðri tilvísunarleið og heldur jafnvægða, skipta, SPC-byggða KPI-safninu sem sinni föstu sýn — með hráu tilvísunarfjöldanum færðum niður í stuðningsmælikvarða þar sem hann á heima.

Geirasjónarhorn#

Sprotafyrirtæki#

Stafrænt heilbrigðissprotafyrirtæki lifir eða deyr á fáum framkvæmanlegum mælikvörðum, svo agin er miskunnarlaus einbeiting og heiðarleiki. Stofnendur freistast til að sýna fjárfestum hégómamælikvarða — uppsafnað niðurhal, heildarfjölda skráðra notenda — því þeir hækka aðeins; stenstu, og leiddu með virkjun, varðveislu og, þar sem þú getur mælt það, klíníska niðurstöðu eða sannprófaðan staðgengil. Með smáar tölur eru SPC og skipting erfiðari en enn mikilvægari: handfylli slæmra upplifana getur verið allt öryggismerki þitt. Tækjavæddu vöruna frá degi eitt svo hver KPI tengi breytingu sem þú afhentir við breytingu á raunverulegri hegðun, og vertu hreinskilinn við klínísk og eftirlitsleg samstarfsaðila um gagnagæðatakmörk frekar en að fægja þunnt gagnasafn.

Lítil fyrirtæki#

Rótgróinn lítill veitandi — heimilislæknastofa, samfélagsapótek, hjúkrunarheimili, heimaþjónustustofnun, stakstaða stofa eða lítill heilbrigðistæknibirgir umfram stig fyrir tekjur — ber sömu mælingar- og jafnræðisskyldur og stór samsteypa en án sérstaks greinanda og lítinn aukatíma. Gildran er að drukkna í KPI sem landsskil, CQC og pantendur krefjast þegar meðan ekkert er mælt sem hjálpar þér að reka staðinn; mótefnið er að velja ósvik litla handfylli niðurstöðu- og reynslumælikvarða sem þú getur brugðist við, og styðjast við það sem klíníska eða stofustjórnunarkerfið þitt fangar þegar frekar en að byggja nýja tækjavæðingu. SPC er enn þess virði jafnvel í höndunum eða í töflureikni — einfalt keyrslurit af, segjum, vikulegum tíma-til-tíma mun stöðva þig frá að elta hávaða einnar slæmrar viku. Skipting skiptir jafn miklu máli í þessum mælikvarða, en með smáar tölur geta nokkrir einstakir sjúklingar sveiflað prósentu, svo lestu niðurbrot sem hvatningu til að líta nánar en ekki dóm. Vertu heiðarlegur við pantendur um gagnagæðatakmörk hnitmiðaðs rekstrar, og stenstu að taka upp fimmtíu-mælikvarða mælaborð stórrar skipulagsheildar þegar fimm vel valdar tölur munu þjóna sjúklingum þínum betur.

Stórfyrirtæki#

Stór NHS-samsteypa eða heilbrigðistæknibirgir drukknar þegar í vísum — landsskilum, samnings-KPI, stjórnarmælikvörðum, rekstrarmælaborðum — svo áskorunin er val og samhengi, ekki söfnun. Taktu upp SPC yfir stjórnar- og rekstrarskýrslugjöf (eins og Making Data Count ætlar) til að stöðva mánaðarlega hávaðaeltingu, og byggðu skýr skýrslulög svo framkvæmdasýnin sé heiðarleg upprúllun framlínusýnarinnar. Vatnsmelónuskýrslugjöf er stórfyrirtækisáhættan: því fleiri lög milli deildar og stjórnar, því auðveldara fyrir rautt að verða grænt á leið upp, svo fjárfestu í jafnvægismælikvörðum og gagnagæðafyrirvörum sem halda efstu sýn sannri. Leggðu niður arfleifðar-KPI vísvitandi; stórar skipulagsheildir safna uppvakningamælikvörðum sem enginn bregst við en allir framleiða samt.

Hið opinbera#

Landsstofnun eða staðbundin opinber stofnun setur KPI sem bylgja yfir heilt kerfi og verða pólitísk markmið, sem gerir lögmál Goodharts að kerfisbundinni hættu frekar en staðbundinni — landsbiðtímamarkmið endurmótar klínískar forgangsraðanir alls staðar á einni nóttu. Hannaðu birta vísa vitandi að þeir verða fínstilltir í átt að, paraðu þá við jafnvægismælikvarða og jafnræðisskiptingu og vertu gagnsær um skilgreiningar og gagnagæði því almannatraust veltur á því. Rammar eins og NHS Outcomes Framework og Core20PLUS5 eru til einmitt til að halda landsathygli á niðurstöðum og ójöfnuði frekar en hráu virkni. Hið opinbera ber líka skyldu sem aðrir bera ekki: að mæla fólkið sem þjónustur þess útiloka, ekki bara fólkið sem þær þjóna, því hinir útilokuðu birtast sjaldan í stjórnsýslugögnum.

Algeng mistök#

• Að telja virkni og kalla það árangur. Tilvísanir mótteknar, innskráningar, tímar í boði — upptekinn er ekki það sama og árangursríkur. Hefðu upp niðurstöður og reynslu; færðu virkni niður í stuðningslagið.
• Einstök talan án jafnvægismælikvarða. Hver stakur KPI undir þrýstingi verður leikinn. Paraðu alltaf mælikvarða svo að bæta einn á kostnað annars sé sýnilegt.
• Tveggja punkta, rautt/grænt skýrslugjöf. „Niður frá síðasta mánuði, undir markmiði“ segir þér næstum ekkert um hvort ferlið breyttist. Notaðu SPC keyrslu- og stýririt í staðinn.
• Vatnsmelónumælaborð. Söfnun sem breytir undirliggjandi rauðu í yfirborðsgrænt. Byggðu heiðarleg skýrslulög og endurskoðaðu upprúllunina (Viðfangsefni 10.4).
• Hégómamælikvarðar. Uppsafnaðar, sífellt hækkandi tölur sem geta ekki gefið til kynna vandamál. Kjóstu framkvæmanlega mælikvarða bundna ákvörðun.
• Óskipt jafnræðisblinda. Meðaltöl sem fela fólkið sem er brugðist. Skiptu eftir þýði og leitaðu að því hver vantar alveg.
• KPI byggðir á órannsökuðum gögnum. Sjálfsörugg tala á slökum gögnum villir. Mældu og birtu gagnagæði samhliða KPI.
• Uppvakninga-KPI. Mælikvarðar enn framleiddir af vana sem enginn bregst við. Yfirfarðu og leggðu niður á áætlun.

Þroskalíkan#

Gátlisti#

• Sérhver KPI er rekjanlegur til niðurstöðu sem skiptir sjúkling, borgara eða klínískan starfsmann máli.
• KPI-safnið á þjónustu er lítið, og hver hefur eiganda, skriflega skilgreiningu og nafngreinda gagnauppsprettu.
• Hver KPI hefur að minnsta kosti einn jafnvægismælikvarða svo ekki sé hægt að leika hann einan.
• Niðurstöðu- og reynslumælikvarðar eru forgangsraðaðir; hrá virkni situr í stuðningslaginu.
• Rekstrar-KPI eru sett fram sem SPC keyrslu-/stýririt, ekki tveggja punkta rautt/grænt samanburður.
• Jafnræðistengdir KPI eru skiptir eftir fátækt, þjóðerni, fötlun, aldri og stafrænum aðgangi.
• Gagnagæði reitanna að baki hverjum KPI eru rakin og með fyrirvara á mælaborðinu.
• Afhending stafrænu þjónustunnar er mæld með jafnvægðu safni (t.d. DORA fjórum lyklum auk öryggis/áreiðanleika).
• Skýrslulög eru hönnuð svo efsta sýn sé heiðarleg upprúllun framlínusýnarinnar.
• KPI eru yfirfarnir á áætlun, með dauða eða leikna mælikvarða lagða niður.
• Þú hefur spurt, um hvern KPI, „hver vantar alveg í þessa tölu?“

Helstu heimildir#

• NHS England — Making Data Count (tölfræðileg ferlisstýring fyrir NHS rekstrargögn)
• Institute for Healthcare Improvement — Science of Improvement: niðurstöðu-, ferla- og jafnvægismælikvarðar
• NHS England — NHS Outcomes Framework; Core20PLUS5 nálgunin til að draga úr heilbrigðisójöfnuði
• NHS England — Data Quality Maturity Index (DQMI)
• Robert S. Kaplan og David P. Norton — The Balanced Scorecard: Translating Strategy into Action
• Nicole Forsgren, Jez Humble og Gene Kim — Accelerate (DORA mælikvarðar); Google Cloud DORA State of DevOps skýrslur
• Jerry Z. Muller — The Tyranny of Metrics
• Donald J. Wheeler — Understanding Variation: The Key to Managing Chaos
• GOV.UK Service Manual — Measuring success / mæling á frammistöðu þjónustu þinnar
• The Health Foundation — leiðbeiningar um mælingu fyrir umbætur

Tilvísanir#

1. Performance indicator — Wikipedia — https://en.wikipedia.org/wiki/Performance_indicator
2. Goodhart's law — Wikipedia — https://en.wikipedia.org/wiki/Goodhart%27s_law
3. Statistical process control — Wikipedia — https://en.wikipedia.org/wiki/Statistical_process_control
4. Control chart — Wikipedia — https://en.wikipedia.org/wiki/Control_chart
5. Balanced scorecard — Wikipedia — https://en.wikipedia.org/wiki/Balanced_scorecard
6. Outcome measure — Wikipedia — https://en.wikipedia.org/wiki/Outcome_measure
7. Health equity — Wikipedia — https://en.wikipedia.org/wiki/Health_equity
8. Data quality — Wikipedia — https://en.wikipedia.org/wiki/Data_quality
9. DevOps Research and Assessment — Wikipedia — https://en.wikipedia.org/wiki/DevOps_Research_and_Assessment
10. Lean startup (vanity vs actionable metrics) — Wikipedia — https://en.wikipedia.org/wiki/Lean_startup
11. Making Data Count — NHS England — https://www.england.nhs.uk/publication/making-data-count/
12. Science of Improvement: Establishing Measures — Institute for Healthcare Improvement — https://www.ihi.org/resources/how-to-improve/science-improvement-establishing-measures
13. NHS Outcomes Framework — NHS England / Department of Health and Social Care — https://digital.nhs.uk/data-and-information/publications/statistical/nhs-outcomes-framework
14. Core20PLUS5 – reducing healthcare inequalities — NHS England — https://www.england.nhs.uk/about/equality/equality-hub/national-healthcare-inequalities-improvement-programme/core20plus5/
15. Data Quality Maturity Index (DQMI) — NHS England — https://digital.nhs.uk/data-and-information/data-tools-and-services/data-services/data-quality
16. The Balanced Scorecard: Translating Strategy into Action — Robert S. Kaplan & David P. Norton (Harvard Business Review Press) — https://en.wikipedia.org/wiki/Balanced_scorecard
17. Accelerate: The Science of Lean Software and DevOps — Nicole Forsgren, Jez Humble & Gene Kim (IT Revolution) — https://itrevolution.com/product/accelerate/
18. DORA / State of DevOps research — Google Cloud DORA — https://dora.dev/
19. The Tyranny of Metrics — Jerry Z. Muller (Princeton University Press) — https://press.princeton.edu/books/hardcover/9780691174952/the-tyranny-of-metrics
20. Measuring the performance of your service — GOV.UK Service Manual — https://www.gov.uk/service-manual/measuring-success
21. Understanding Variation: The Key to Managing Chaos — Donald J. Wheeler (SPC Press) — https://www.spcpress.com/book_understanding_variation.php