Computer Adaptief Testen in de GGZ 20 april 2016 Gerard Flens Edwin de Beurs Philip Spinhoven Niels Smits Caroline Terwee
Meetinstrumenten worden steeds vaker gebruikt binnen de behandeling - Routine Outcome Monitoring - Benchmarken - Onderzoek Aanleiding Probleem - De patient wordt teveel belast - Meetinstrumenten worden minder (goed) ingevuld - Minder (betrouwbare) informatie voor verbetering van de zorg Oplossing - Meetinstrumenten intelligent afnemen - Computer Adaptief Testen (CAT) 2
CAT = Computer Adaptief Testen Een test die wordt toegepast via de computer Vragen worden gekozen uit een grote itembank Vragen worden gekozen op basis van voorgaande antwoorden van de respondent Vragen worden gesteld tot een bepaald betrouwbaarheidsniveau is behaald of een maximaal aantal vragen is gesteld 3
CAT - Voorbeeld Helemaal niet Depressief : De afgelopen 7 dagen had ik een dipje Gemiddeld Depressief : De afgelopen dagen voelde ik me somber Helemaal wel Depressief : De afgelopen dagen had ik het gevoel dat ik geen reden had om te leven Depressie 20 30 40 50 60 70 80 Helemaal niet Depressief Gemiddeld Depressief Helemaal wel Depressief 4
CAT bouwstenen 1. Gekalibreerde itembank 2. Startpunt 3. Score procedure 4. Stoppunt 5. Item selectie algoritme 5
Item Informatie: 2 voorbeelden Ik had het gevoel dat ik geen reden had om te leven Ik had geen eetlust 6
Item Informatie: gehele schaal 7
Voordelen CAT Korte testafname Betrouwbare uitkomsten Verschillende vragen worden gekozen over meerdere afnames Uitkomsten over tijd en tussen respondenten blijven vergelijkbaar ondanks verschillende vragen per afname Item banken zijn uit te breiden met nieuwe vragen Informatie vooraf kan de afname nog efficienter maken. Flexibel in te richten: - Minimimum en maximum aantal vragen - Vaste vragen per afname - Aanpassen betrouwbaarheidsniveau 8
CAT Onderzoek: doel Een generiek meetinstrument dat klachten en symptomen kan meten binnen het zorgdomein Volwassenen cure, met subschalen angst en depressie. 9
CAT Onderzoek: 4 fases Fase 1 = gereed PROMIS Itembanken vertalen: Angst en Depressie Uitgevoerd door de Dutch-Flemish PROMIS Group Fase 2 = gereed Dataverzameling bij 1000 patienten en 1000 mensen uit de Nederlandse bevolking Psychometrische evaluatie en kalibratie van de itembanken Fase 3 = in uitvoering CAT software ontwikkelen samen met Vital Health Meetinvariantie onderzoeken Responsiviteit onderzoeken Fase 4 CAT uitrollen in het veld Ambitie: eind 2017 10
Voorbeeldvragen depressie itembank Vragen met een hoge informatie waarde Ik voelde me zonder hoop Ik voelde me ongelukkig Ik voelde me emotioneel uitgeput Ik voelde me depressief Ik had het gevoel dat niets mij kon opvrolijken Vragen met een lage informatie waarde Ik had moeite om een hechte band met mensen te voelen Ik wilde alleen zijn Ik had nare dromen waar ik van slag van raakte Ik had geen belangstelling voor mijn uiterlijk Ik had geen eetlust 11
Voorbeeldvragen angst itembank Vragen met een hoge informatie waarde Ik voelde me gespannen Ik vond het moeilijk om me op iets anders dan mijn angst en bezorgdheid te concentreren Ik had moeite om te kalmeren Ik voelde me slecht op mijn gemak Ik voelde me plotseling angstig zonder reden Vragen met een lage informatie waarde Ik had moeite met slapen Ik voelde me verlegen Ik zweette gauw Ik had hoofdpijn Ik had spierpijn 12
CAT onderzoek: resultaten Twee item banken - Depressie : 28 vragen - Angst : 29 vragen CAT simulaties bij SE(θ)<0.22 Item bank Gemiddeld aantal vragen CAT Correlatie CAT en hele itembank Effectgrootte CAT en hele itembank Angst 8.64.98 0.07 Depressie 7.58.98 0.06 13
CAT in de praktijk Meetinstrument Aantal vragen CAT 9 21 Gemiddeld 16 BSI 53 OQ45-sd 25 SQ48 48 14
CAT in de praktijk Meetinstrument Aantal vragen CAT 9 21 Gemiddeld 16 Aantal schalen 2 BSI 53 9 OQ45-sd 25 1 (3) SQ48 48 7 (9) 15
CAT in de praktijk Meetinstrument Aantal vragen CAT 9 21 Gemiddeld 16 Aantal schalen Inhoud vragen 2 Variabel BSI 53 9 Constant OQ45-sd 25 1 (3) Constant SQ48 48 7 (9) Constant 16
CAT in de praktijk Meetinstrument Aantal vragen CAT 9 21 Gemiddeld 16 Aantal schalen Inhoud vragen Betrouwbaarheid 2 Variabel Constant BSI 53 9 Constant Variabel OQ45-sd 25 1 (3) Constant Variabel SQ48 48 7 (9) Constant Variabel 17
Vragen? 18
Vragen van mij Angst en Depressie zijn voldoende om algemene psychopathologie te meten? De eerste CAT wordt een generiek uitkomst meetinstrument. Motiveert dit om meer stoornis specifieke en/of onderzoek meetinstrumenten te gebruiken? In hoeverre zijn vaste vragen gewenst in de CAT afname? Welke resultaten koppelt de CAT terug? - Losse meting / routine matige meting - Normscores (patienten / NL bevolking) - Grafieken / tabellen Wat is er nodig om dit meetinstrument breed in gebruik te laten nemen? 19
Contactgegevens Gerard Flens gerard.flens@sbggz.nl 20