METHODOLOGIE VAN DE KNIPPERLICHTEN VOOR DE EXTERNE AUDIT VAN DE MVG

Transcriptie

1 MTHOOLOGI VAN KNIPPRLIHTN VOOR XTRN AUIT VAN MVG IR. ANN. LVAUX (STATISTIUS-ANALIST) MINISTRI VAN SOIAL ZAKN, VOLKSGZONHI N LFMILIU. BSTUUR GZONHISZORG, BSTUURSIRTI GZONHISZORGBLI Inleiding e Minimale Verpleegkundige Gegevens (MVG) zijn een verpleegkundige-zorgindicator die niet alleen voor de ziekenhuisfinanciering maar ook voor onderzoek en intern beheer van de instellingen kan gebruikt worden. Het is derhalve van belang dat de geregistreerde gegevens een getrouwe weerspiegeling zijn van de verpleegkundige-zorgrealiteit. Voor het evalueren van de betrouwbaarheid van de geregistreerde MVG kunnen er twee soorten controles uitgevoerd worden : een interne controle door de instellingen zelf en een externe door de administratie. e algemene principes van een interne audit werden bij een andere gelegenheid reeds uiteengezet (zie Nieuwsbrieven 9 en ). e methodologie van de knipperlichten van de externe MVG-audit wordt uiteengezet in wat volgt. e feedback van een externe MVG-audittest werd in de Nieuwsbrief nr.7 gepubliceerd. Knipperlichtenmethode. Principe Ter ontwikkeling van de methodologie van de externe audit werd er beslist om het principe van de knipperlichten te gebruiken, met name indicatoren waarmee de instellingen met de extreme profielen gedetecteerd kunnen worden. e knipperlichten worden berekend op het niveau van de verpleegeenheden en vervolgens op dat van het ziekenhuis samengebracht. Ze worden op de items en op de personeelsgegevens (aantal en kwalificatie) toegepast. e knipperlichten betreffende de items zijn op de ridit-waarden gebaseerd. e manier waarop de ridits worden berekend wordt uitgelegd in bijlage. Voor het personeel worden de voltijds equivalenten per observatie en de kwalificatie-ridit gebruikt. e "extreme" verpleegeenheden worden opgespoord door de verschillende kenletters te scheiden, aangezien de vergelijking van de verpleegeenheden van alle kenletters samen niet aangewezen is. Bepaalde kenletters (b.v. intensieve zorg) vertonen immers een specifiek profiel. e knipperlichten worden voor een welbepaald MVG-registratiejaar berekend, met name het meest recente op het Ministerie beschikbare en volledig gearchiveerde en gecontroleerde jaar.. Methode toegepast op de items Het berekenen van de knipperlichten geschiedt in twee fasen : eerst wordt de verdeling van de ridit-waarden van alle verpleegeenheden (op nationaal niveau) bepaald. Vervolgens worden de verpleegeenheden met de meest extreme waarden ten opzichte van die verdeling opgespoord. Verdeling van de ridit-waarden van alle verpleegeenheden samen.

2 Voor elk item worden voor elke kenletter afzonderlijk de percentielen 0,, 0, 7 en 90 van de distributie van de ridit-waarden van alle verpleegeenheden van de betrokken kenletter berekend. Met die percentielen kunnen er zones gedefinieerd worden : zone <= P0 zone P0 - P zone P - P0 zone 4 P0 - P7 zone P7 - P 90 zone >= P90 e 0 percentiel (P0) is de riditwaarde van de verdeling waarbij 0 % van de verpleegeenheden een riditwaarde behalen die lager ligt of gelijk is aan P0. e percentiel (P) is de riditwaarde van de verdeling waarbij % van de verpleegeenheden een riditwaarde behalen die lager ligt of gelijk is aan P. e 0 percentiel (P0), of mediaan, is de riditwaarde van de verdeling waarbij 0 % van de verpleegeenheden een riditwaarde behalen die lager ligt of gelijk is aan P0. Men kan zo verder gaan voor de percentielen 7 (P7) en 90 (P90). e zones en bevatten dus elk 0 % van de verpleegeenheden (de uitersten). e zones en bevatten elk % van de verpleegeenheden. Tenslotte, bevatten de zones en 4 elk % van de verpleegeenheden. Vergelijking van de ridit-waarden van de verpleegeenheden met de nationale verdeling. Voor elk item : wordt elke verpleegeenheid overeenkomstig zijn ridit-waarde in een van de zes zones geplaatst; werkt het knipperlicht als : de verpleegeenheid zich in zone of bevindt voor de items,,, 4,, 7, 8, 0,,,, 8 tot 4; de verpleegeenheid zich in zone voor de items (sondevoeding), 9 (tracheotomiepatiënten), (zelfstandigheidstraining), (gedesoriënteerde patiënten), 4 (afzondering contaminatie) en 7 (toezicht tractie) bevindt. Het betreft immers nominale items (absolute scores gelijk aan 0, of ) waarvoor de verhouding 0 zeer hoog ligt. e verdeling van de ridits van die items wordt door een zeer sterke linker asymmetrie gekenmerkt, waarbij de percentielen 0 en (soms ook 0) onderling gelijk zijn. Het lagere knipperlicht is derhalve onbruikbaar, terwijl het hogere zijn belang behoudt. Voorbeeld :

3 Tabel. Percentielen van de verdeling van de ridits voor de zorg i.v.m. hygiëne per kenletter (Belgiê 998). Kenletter P0 P P0 P7 P90 I M 0,4 0, 0,9 0,7 0, 0,40 0,9 0, 0, 0,0 0,4 0,4 0, 0,9 0,9 0, 0, 0,9 0,7 0,47 0, 0,8 0,74 0,79 0,0 Tabel. Ridits van de zorg i.v.m. hygiëne in de verpleegeenheden van ziekenhuis X. Kenletter Ridit Zone Knipperlicht I M 0, 0,7 0,78 0,74 0, 4 Ja Neen Ja Neen Neen. Methode toegepast op de personeelsgegevens Net zoals voor de items worden de knipperlichten betreffende het personeel in twee fasen berekend. erst worden de twee verdelingen (op nationaal niveau) vastgesteld : de eerste voor de voltijds equivalent per observatie (VT/obs.) in de wetenschap dat een observatie overeenkomt met een dag opname en de tweede voor de kwalificatieridit. Vervolgens worden de verpleegeenheden met de uiterste waarden ten opzichte van die verdelingen opgespoord. Verdeling van de waarden van alle verpleegeenheden samen. Voor de VT/obs. alsmede voor de kwalificatie worden voor elke kenletter afzonderlijk de percentielen 0,, 0, 7 en 90 van de verdeling van de waarden van alle verpleegeenheden van de beschouwde kenletter berekend. Met die percentielen kunnen er zones gedefinieerd worden : zone <= P0 zone P0 - P zone P - P0 zone 4 P0 - P7 zone P7 - P 90 zone >= P90 Vergelijking van de waarden van de verpleegeenheden met de nationale verdeling. Voor de beide variabelen (VT/obs. en kwalificatie) afzonderlijk : wordt elke verpleegeenheid in een van de zones geplaatst in functie van zijn VT/obs. of riditkwalificatiewaarde; werkt het knipperlicht als de verpleegeenheid tot zone of behoort.

4 Voorbeeld 4 Tabel. Percentielen van de verdeling van de voltijdse equivalenten per observatie, per kenletter (Belgiê 998). Kenletter P0 P P0 P7 P90 I M 0,8 0, 0,8 0,9 0,40 0, 0,9 0,44, 0,4 0,4 0, 0,,9 0, 0,9 0,8 0,9, 0, 0,47 0,47 0,70,98 0,79 Tabel 4. Percentielen van de distributie van de kwalificatieridits per kenletter (Belgiê 998). Kenletter P0 P P0 P7 P90 I M 0,8 0,7 0,4 0,8 0, 0,4 0,4 0,48 0, 0, 0,47 0,47 0,4 0, 0, 0, 0, 0,8 0,9 0, 0,8 0,9 0,4 0,7 0,70 Tabel. VT/obs. en kwalificatieridits van de verpleegeenheden van ziekenhuis X. Kenletter VT VT- Zone I M 0, 0,0 0,4,9 0,48 4 Knipperlicht Kwalificatieridit 0,4 0, 0,49 0,74 0,9 Zone van de kwalificatieridit Knipperlicht ja ja Opmerking : de berekening van de percentielen (voor de ridits van de verschillende items en het personeel) is enkel van belang voor de kenletters waarvan het aantal verpleegeenheden voldoende hoog ligt. Voor bepaalde verpleegeenheden zijn de zones en knipperlichten dus louter indicatief. 4. Synthese van de knipperlichten op niveau van de verpleegeenheid Voor elke verpleegeenheid : wordt de zone voor elk item, voor het kwalificatieniveau en de VT/obs. bepaald; wordt er een (actief of niet-actief) knipperlicht gekoppeld aan elk item, aan het niveau van de kwalificatie en aan de VT/obs.;

5 worden de knipperlichten van de items in algemene indicatoren samengevat : het totaal aantal knipperlichten (P0 of P90 zonder onderscheid); het totaal aantal knipperlichten zone (P0); het totaal aantal knipperlichten zone (P90).. Synthese van de knipperlichten op niveau van het ziekenhuis Op het niveau van het ziekenhuis, kunnen de knipperlichten van de items geresumeerd worden door het gemiddelde aantal knipperlichten per verpleegeenheid of het percentage knipperlichten van het ziekenhuis ten opzichte van het totale aantal knipperlichten te berekenen. ie twee parameters geven ons een algemene indicatie over het aantal knipperlichten in de instelling. Vergeten we niet dat die beide parameters door een constante aan elkaar gekoppeld zijn. r kan ook een onderscheid gemaakt worden tussen de knipperlichten P0 en P90. Tabel. Overzicht van de knipperlichten van ziekenhuis Y (9 verpleegeenheden). Verpleegeenheden Kenletter I M Totaal aantal knipperlichten Aantal knipperlichten P0 4 Aantal knipperlichten P Totalen Totaal aantal knipperlichten van het ziekenhuis = Gemiddeld aantal knipperlichten per verpleegeenheid = /9=, Gemiddeld aantal knipperlichten P0 per verpleegeenheid = 8/9=, Gemiddeld aantal knipperlichten P90 per verpleegeenheid = 7/9=,0 Maximum aantal mogelijke knipperlichten = 4 (9 verpleegeenheden en 7 items) Percentage knipperlichten ten opzichte van het maximumaantal knipperlichten =00 X /4 =,%.. Boordtabel van de externe audit e boordtabel van de externe audit geeft op één bladzijde een overzicht van de positie (zonenummer) van alle verpleegeenheden van het ziekenhuis voor alle items en voor het personeel. Hij geeft ook een synthese van de knipperlichten op het niveau van de verpleegeenheid en van het ziekenhuis.

6 e eerste audits startten in 997 en de auditors beschikten over boordtabellen die opgesteld waren op basis van de MVG-gegevens 994. e boordtabellen werden vervolgens gebaseerd op de MVG-jaren 99, 997 en ten slotte 998, het laatste op het Ministerie beschikbare jaar. Inhoud van de boordtabel van de externe audit. Voor elke verpleegeenheid : algemene gegevens (kenletter, nummer, aantal bedden, aantal geregistreerde perioden, aantal dagen); zone en knipperlicht voor de VT/obs. en voor de kwalificatieridit; zone voor elk item, totaal aantal knipperlichten, totaal aantal knipperlichten P 0, totaal aantal knipperlichten P90. Voor het ziekenhuis : Aantal verpleegeenheden, gemiddelde aantallen knipperlichten (items) per verpleegeenheid (totalen, P0 en P90), percentage knipperlichten (items) ten opzichte van het maximumaantal knipperlichten. Voorbeeld van een boordtabel e boordtabel van een fictief ziekenhuis en de bijbehorende legende werden als bijlage en opgenomen. Interpretatie van de boordtabel van de externe audit. Met de boordtabel kunnen er bijzondere verpleegeenheden op basis van de knipperlichten opgespoord worden. Het kan gaan om eenheden met een groot aantal knipperlichten of eenheden met enkele knipperlichten voor precieze items. e auditor wil hier te weten komen of die knipperlichten verklaard kunnen worden (bepaalde verpleegeenheden kunnen immers terecht een extreem profiel hebben). Met die boordtabel kunnen er ook problemen op niveau van het coderen van bepaalde items opgespoord worden, bijvoorbeeld wanneer vrijwel alle verpleegeenheden zich stelselmatig in dezelfde zone bevinden (onafhankelijk van de aanwezigheid van knipperlichten). e boordtabel is vooral nuttig omdat elke instelling hiermee snel al haar verpleegeenheden ten opzichte van de andere verpleegeenheden met dezelfde kenletter kan situeren. 7. Knipperlichten en boxplots e definitie van de gebruikte zones in de methodologie van de knipperlichten houdt verband met de weergave van de verdelingen in de vorm van boxplots. Vergeten we niet dat een boxplot een grafische weergave is in de vorm van een met horizontale lijnen verlengde rechthoek. Via een boxplot kan men bv. snel de percentielen P0, P, P0, P7 en P90 van de verdeling van de ridit-waarden van de verpleegeenheden visualiseren voor een item binnen een kenletter. e fijne lijn links begint bij percentiel 0. e dikke lijn links begint bij percentiel en eindigt bij percentiel 7. e fijne lijn rechts eindigt bij percentiel 90. e verticale lijn komt overeen met percentiel 0 (mediaan).

7 7 e figuur hieronder toont twee van die boxplots die uit de federale feedback financiering gehaald werden. Bloedpuncties Medicatie IM/S/I oor het vergelijken van de ridit-waarden van de verschillende items voor elke verpleegeenheid (afgedrukt in de individuele feedback financiering) met de nationale boxplots van de overeenstemmende kenletter, kan een ziekenhuis zelf zijn knipperlichten bepalen. eze enigszins omslachtige bewerking wordt automatisch uitgevoerd door het programma feedback III (X, 000). Met dit programma kan men inderdaad de grafische weergave van de positie van een verpleegeenheid van een ziekenhuis ten opzichte van de nationale boxplot van de overeenstemmende kenletter verkrijgen. e verpleegeenheid wordt door een ster weergegeven. Wanneer die zich buiten de boxplot bevindt, functioneert het knipperlicht, ofwel het knipperlicht P0 (links van de boxplot), ofwel het knipperlicht P90 (rechts van de boxplot). Het programma feedback III laat dus eves toe de knipperlichten van de items en die van het personeel op te sporen. Voorbeelden van boxplots met feedback III gerealiseerd vindt u in bijlage 4. Praktische uitvoering van de externe audit e praktische uitvoering van de externe MVG-audit en enkele resultaten van de door het Ministerie verrichte audits worden in een ander artikel beschreven. e selectieprocedure voor de ziekenhuizen en voor de dossiers wordt hier beschreven. Voor het eerste auditbezoek worden de ziekenhuizen op toevallige basis uitgekozen. In de toekomst zou de methodologie van de knipperlichten gebruikt kunnen worden om een deel van de ziekenhuizen te selecteren. e ziekenhuizen met het grootste aantal knipperlichten zouden op die manier het eerst aan een audit onderworpen kunnen worden. e door de auditors onderzochte dossiers worden op toevallige basis geselecteerd, het eerst de verpleegeenheden met het grootste aantal knipperlichten en vervolgens de andere verpleegeenheden. Alle verpleegeenheden en ziekenhuisdiensten moeten in de mate van het mogelijke vertegenwoordigd zijn. onclusies en belangrijke fase werd ingeluid met het opstarten van de externe MVG-audit en met een eerste bezoek aan alle ziekenhuizen. Om de verpleegeenheden en de ziekenhuizen met extreem profiel op te sporen, werd de knipperlichtenmethode uitgewerkt. ie methode is niet alleen een nuttig instrument voor de MVG-auditoren maar ook voor de ziekenhuizen zelf, welke die in het kader van de interne audit kunnen gebruiken. Met de externe audit wordt een beter begrip van de interne organisatie van de ziekenhuizen in zake verzameling en controle van de MVG-gegevens mogelijk (bijhouden van de verpleegkundige dossiers, coderen van de items, nazicht). at moet uitmonden in raadgevingen om beter te coderen en de interne audits zo goed mogelijk uit te

8 8 voeren. Voorts wordt het hierdoor mogelijk om gegevensmanipulatie te detecteren. Uiteindelijk is het doel te komen tot een betrouwbare MVG-registratie, zodat men meer vertrouwen in dat instrument gaat krijgen, wat dan weer het ontwikkelen van nieuwe toepassingen mogelijk maakt. Bibliografie Ministerieel besluit van 0 december 99. Belgisch Staatsblad van januari 994, bijlage, -4. BROSS I..J. (98). How to use ridit analysis. Biometrics, 4, 8-8. LVAUX en JANSSNS (00). e Minimale Verpleegkundige Gegevens en hun integratie in de financiering van de ziekenhuizen. Ministerie van Sociale Zaken, Volksgezondheid en Leefmilieu (Bestuur van de gezondheidszorg, Bestuursdirectie gezondheidzorgbeleid), Brussel, 0 p. SRMUS W., LSI L., VAN LANUYT J., WUYTS Y., VANN BOR G., MANNA M. (994). Minimale Verpleegkundige Gegevens in België : basis voor het gezondheidszorgbeleid van morgen. (Bestuur der Verzorgingsinstellingen), Katholieke Universiteit Leuven (entrum voor Ziekenhuiswetenschap), Brussel-Leuven, 79 p. X (000). R.I.M. feedback III. Ministerie van Sociale Zaken, Volksgezondheid en Leefmilieu (Bestuur van de gezondheidszorg, Bestuursdirectie gezondheidzorgbeleid), Brussel, 8 p.

9 Bijlage. Berekeningsprincipe voor de riditscores 9 e ridit transformation werd door BROSS gedefinieerd in 98 en maakt het mogelijk ordinale of binaire variabelen om te zetten in riditscores tussen 0 en. Ze wordt gebruikt om de MVG-gegevens om te zetten (Ministerieel besluit van 0 december 99, SRMUS et al., 994 ; LVAUX en JANSSNS, 00). e riditscores worden berekend voor elk MVG-item, voor elke verpleegeenheid die de MVG gedurende een jaar heeft geregistreerd. Voor de riditscores moet er steeds een referentie worden berekend. Bij de MVG gaat het over het algemeen om een jaarlijkse referentie (alle MVG-dagen in alle diensten van alle Belgische ziekenhuizen gedurende één jaar). Voorbeeld van berekening van de riditscore.. Berekening van de riditscores van de referentiepopulatie. Het item hulp bij hygiënische zorg is een ordinale variabele met 4 klassen of stijgende niveaus (niveau = zonder hulp, niveau = ondersteunende hulp, niveau = gedeeltelijke hulp en niveau 4 = volledige hulp). In de tabel 7 is de referentiepopulatie samengesteld uit 00 verpleegdagen (een verpleegdag = 4 uren van het verblijf van een patiënt) die als volgt worden verdeeld voor de hygiënische zorg :40 % zonder hulp, 0 % met ondersteunende hulp, % met gedeeltelijke hulp en % met volledige hulp. e riditscore van elke klasse wordt berekend door het percentage dagen van de klassen die lager zijn dan de beschouwde klasse op te tellen bij de helft van het percentage dagen van de beschouwde klasse. Tabel 7. Voorbeeld van berekening van de riditscore voor de referentiepopulatie. Hygiëne Aantal dagen Berekening Riditreferentie Zonder hulp Ondersteunende hulp Gedeeltelijke hulp Volledige hulp 40 0 (0+0)/00 (40+0)/00 (0+7,)/00 (7+,)/00 0,0 0,0 0,7 0, Berekening van de riditscore voor een verpleegeenheid. en verpleegeenheid met 0 verpleegdagen die als volgt worden verdeeld voor de hygiënische zorg : 0 % zonder hulp, % met ondersteunende hulp, % met gedeeltelijke hulp en 0 % met volledige hulp. Om de ridit van een verpleegeenheid te krijgen, dient men het percentage dagen van elke klasse te vermenigvuldigen met de riditscore van de referentiepopulatie voor de beschouwde klasse en daarna de verschillende waarden op te tellen (tabel 8).

10 Tabel 8. Voorbeeld van berekening van de riditscore voor een verpleegeenheid. 0 Hygiëne Zonder hulp Ondersteunende hulp Gedeeltelijke hulp Volledige hulp Aantal dagen Percentage dagen Riditreferentie Ridit verpleegeenheid 4 0,0 0,0 0, , 0,0 0,7 0, 0,7 0,9 4 0,0 0,88 0,7 0,00 0,0 e riditscore van de verpleegeenheid voor hygiënische zorg is gelijk aan 0,.

11 Bijlage. Voorbeeld van een boordtabel

12 Bijlage. Legende van de boordtabel Kenl Ve Bed Nbper Nbjour bip_nbus som_bip bip_0 bip_90 bip_etp bip_qua cl_etp cl_qua cl_v cl_v4 aant. ver. gemiddelde knipperlichten gemiddelde knipperlichten P0 gemiddelde knipperlichten P90 percentage knipperlichten ienst, kenletter Nummer verpleegeenheid Aantal bedden Aantal geregistreerde MVG-perioden (van tot 4) Aantal verpleegdagen knipperlicht over het aantal verpleegeenheden per kenletter: indien 0 OK, kunnen de knipperlichten personeel en items worden gebruikt indien niet OK (te weinig verpleegeenheden in die kenletter op landelijk niveau), kunnen de knipperlichten personeel en items niet worden gebruikt totaal aantal knipperlichten items totaal aantal knipperlichten P0 items totaal aantal knipperlichten P90 items knipperlicht VT knipperlicht kwalificatieridit zone VT ( tot ) zone kwalificatieridit ( tot ) zone item ( tot voor V tot V4) aantal verpleegeenheden van het ziekenhuis gemiddeld aantal knipperlichten voor de items (gemiddeld per verpleegeenheid) gemiddeld aantal P0 knipperlichten voor de items (gemiddeld per verpleegeenheid) gemiddeld aantal P90 knipperlichten voor de items (gemiddeld per verpleegeenheid) percentage knipperlichten voor de items van het ziekenhuis, berekend ten opzichte van het maximum aantal mogelijke knipperlichten

13 Bijlage 4. Voorbeelden van boxplots gerealiseerd door het feedback III programma e items: Het personeel: