HKT-R en behandelevaluatie: N=1

HKT-R en behandelevaluatie: N=1

Opdracht directie Mesdag Maak een proactief behandelevaluatie systeem waar zowel patiënt als team direct wat aan heeft en dat ook inzichten oplevert op institutioneel niveau (ROM gedachte)

Voorwaarden proactief systeem koppel evaluatie van individuele behandeling vast aan klinisch beslismoment gebruik (eerst) alleen vragenlijsten die daadwerkelijk gebruikt worden ter ondersteuning behandelbeleid

geef behandelteam meer formele handvatten ter ondersteuning voor het besluit of behandeldoel bereikt is invullen vragenlijst in kader behandeling ipv onderzoek

Vastkoppeling aan MDB cyclus Rapportage netwerk Rapportage netwerk Rapportage patiënt Rapportage patiënt Rapportage patiënt Team observatie Team observatie Team observatie MDB januari MDB juli MDB januari

Keuze vragenlijst K-indicatoren van HKT-R plus aantal relevante behandelindicatoren (IFBE) Team observatie Zelfrapportage door patient Netwerk rapportage (via FSNAprocedure) per zorgprogramma of patient eventueel toevoeging andere lijsten

De IFBE HKT-R Klinisch K01 Probleeminzicht K02 Psychotische symptomen K03 Verslaving K04 Impulsiviteit K05 Antisociaal gedrag K06 Vijandigheid K07 Sociale vaardigheden K08 Zelfredzaamheid K09 Meewerken behandeling K10 Verantwoordelijkheid delict K11 Copingvaardigheden K12 Schending van voorwaarden K13 Arbeidsvaardigheden K14 Beïnvloeding netwerkleden Toegevoegd 15 Manipulatief gedrag 16 Evenwichtige dagbesteding 17 Financiële vaardigheden 18 Seksueel deviant gedrag 19 Medicatie gebruik ASP items Vaardigheden: 20 voor preventie drugs en alcohol 21 voor preventie agressief gedrag 22 voor preventie seksueel grensoverschrijdend gedrag

IFBE : 17 puntsschaal 1 Does the patient show problem insight? Someone with problem insight has insight in his own mental processes and their influence on his behavior. A patient with problem awareness is troubled with the problems his behavior causes (he realizes he has a problem), but he has no insight in what causes his behavior or how he could N.E.I. influence his behavior. 0 1 2 3 4 None Rarely Sometimes Often Always 0 No problem insight and no problem awareness, does not accept external control. 1 No problem insight and minor problem awareness. 2 No problem insight. He has problem awareness, but does not behave accordingly. 3 Some problem insight. He does no always behave accordingly. 4 He has sufficient problem insight en behaves accordingly. februari 2010 Forensisch Psychiatrisch Centrum Dr. S. van Mesdag 8

IFBE -procedure 1 patiënt Voor elke Behandelbespreking (MDB) Meerdere beoordelaars: Sociotherapie (2) Behandelcoördinator Maatschappelijk werker Arbeidstherapeuten Psychomotore therapeuten Non-verbale therapeuten Psychotherapeuten Periodieke delict gerelateerde behandeldoelen formulier februari 2010 Forensisch Psychiatrisch Centrum Dr. S. van Mesdag 9

Alleen voor de BEHANDELCOÖRDINATOR / HOOFD BEHANDELAAR Zou je op dit formulier willen aankruisen welke indicatoren van de IFBE delict gerelateerd zijn en welke indicatoren behandeldoelen zijn voor de komende periode. Aan de hand van deze gegevens zullen in het rapport de delict factoren duidelijker aangeven kunnen worden evenals de behandeldoelen. Het is dan sneller te zien of de patiënt op de relevante indicatoren verbetert of niet. Delict Behandel gerelateerd doel Probleeminzicht Meewerken aan de behandeling Erkennen van het delict Vaardigheden ter voorkoming van fysiek agressief gedrag Copingvaardigheden Medicatiegebruik... Algemene sociale vaardigheden Forensisch Psychiatrisch Centrum Dr. S. van Mesdag 10

Onderzoekspopulatie 259 mannelijke patiënten Gemiddeld 40 jaar (SD 9.5) Gemiddelde opname duur 53 maanden (SD 37) Gemiddeld 3.2 (SD 1.2) diagnoses per patiënt februari 2010 Forensisch Psychiatrisch Centrum Dr. S. van Mesdag 11

Onderzoekspopulatie 71% verslaving 15% pedoseksueel 47% psychotisch kwetsbaar 35% cluster B 33% PS NAO februari 2010 Forensisch Psychiatrisch Centrum Dr. S. van Mesdag 12

Psychometrische kenmerken IFBE: interbeoordelaarsbetrouwbaarheid Paren sociotherapeuten Range 34-176 paren beoordelaars Alle indicatoren hebben ICC >.60 (substantial, Landis & Koch, 1977) 18 indicatoren hebben ICC >=.70 8 indicatoren hebben ICC >=.80 februari 2010 Forensisch Psychiatrisch Centrum Dr. S. van Mesdag 13

Psychometrische kenmerken IFBE: factoren 3 practice-based factoren Problematisch gedrag Protectief gedrag Resocialisatie vaardigheden Grotendeels bevestigd door confirmatieve analyse (principal axis factoring/oblimin rotation) 67% verklaarde variantie februari 2010 Forensisch Psychiatrisch Centrum Dr. S. van Mesdag 14

Factor 1 Problematisch gedrag F1 F2 F3 Impulsivity.76 -.39 -.31 Antisocial behavior.93 -.47 -.61 Hostility.92 -.46 -.53 Sexual deviant behavior.62 -.18 -.46 Manipulative behavior.78 -.31 -.46 Compliance to rules -.81.55.69 Drug use.57.01 -.22 Orientation on bad persons.49 -.31 -.22 Psychotic symptoms.46 -.43 -.67 Forensisch Psychiatrisch Centrum Dr. S. van Mesdag 15

Factor 2 Protectieve gedragingen F1 F2 F3 Problem Insight -.47.89.62 Cooperation with treatment -.46.65.85 Responsibility for the crime -.36.94.53 Skills to prevent drug use -.62.60.54 Skills to prevent PAB -.51.48.54 Skills to prevent SDB -.36.75.42 Medication use -.40.43.57 Coping Skills -.68.66.82 Forensisch Psychiatrisch Centrum Dr. S. van Mesdag 16

Factor 3 Resocialisatie vaardigheden F1 F2 F3 Balanced daytime activities -.44.35.96 Labor skills -.45.40.94 Skills to take care of oneself -.28.28.64 Financial skills -.38.40.67 Social skills -.60.55.71 Forensisch Psychiatrisch Centrum Dr. S. van Mesdag 17

Interne consistentie factoren Cronbach s alpha Factor 1 0.86 Factor 2 0.90 Factor 3 0.88 18

Concurrente validiteit 6 maanden voor MDB Uitkomst maten Percentage Arbeid opkomst Percentage psychotherapie opkomst Positieve uc s Aantal incidenten

Correlaties F1 probleemgedrag F2 protectief gedrag F3 resocialisatie vaardigheden arbeid therapie drugsgebruik incidenten.34** (142).30** (121).24** (145) -.16* (113) * p<0.05; ** p<0.01

Predictieve validiteit HKT-R onderzoek: K-indicatoren van IFBE geassocieerd met gewelddadige en algemene recidive

Predictieve validiteit IFBE: Predictieve validiteit op korte termijn weinig belangrijk, want het is behandelevaluatie instrument

IFBE geschikt voor behandelevaluatie bij MDB

Beslisregel voor MDB team Wanneer is er op patiënt niveau sprake van behandelvooruitgang?

Stel 3 beoordelaren voor 1 IFBE indicator MDB_T0: {3, 3, 4} MDB_T1: {2, 4, 5}

Uitleg N=1 methode T1 T0 verschil teken 2 3-1 - 4 3 +1 + 5 3 +2 + 2 3-1 - 4 3 +1 + 5 3 +2 + 2 4-2 - 4 4 0 = 5 4 +1 +

P i = aantal positieve verschillen / totaal aantal dyades = 5/9 =.56 Bij welke waarde c is sprake van betekenisvolle verandering? P i c

N=1 simulatie studie Twee groepen van 50 personen, controle en interventie groep Twee meetmomenten Schaal is 17-punts Per persoon zijn 5 observatoren die hun score uit een normaalverdeling trekken

Simulatie opzet Tijdstip 0 Tijdstip 1 Controle groep N=50 μ = 8 σ = 4 μ = 8 σ = 4 Interventie groep N=50 μ = 8 σ = 4 μ = 12 σ = 4

persoon Tijdstip2 tijdstip 1 groep 1 4 interventie. 4 interventie. 4 interventie 50 2 interventie 51 1 controle. 1 controle. 0 controle. 0 controle 100 0 Forensisch Psychiatrisch controle Centrum Dr. S. van Mesdag 30

Simulatie opzet Verschil < 1 Controle groep Percentage correct controle groep Interventie groep Percentage incorrect interventie groep verschil 1 Percentage incorrect controle groep Percentage correct interventiegroep

Simulatie opzet Tijdstip 0 Tijdstip 1 Controle groep N=50 M=250 Interventie groep N=50 M=250 μ = 8 σ = 4 μ = 8 σ = 4 μ = 8 σ = 4 μ = 12 σ = 4

persoon Tijdstip2 tijdstip 1 groep P i 1 4 interventie 0,70. 4 interventie 0,69. 4 interventie 0.68 50 2 interventie 0.89 51 1 controle 0.40. 1 controle 0.39. 0 controle 0.38. 0 controle 0.37 100 0 controle 0.37 Forensisch Psychiatrisch Centrum Dr. S. van Mesdag 33

N=1 Maten ter bestudering Persoon i 0 indien Pi 1indien P i.55.55 T=waarde

Simulatie opzet Verschil < 1 P.55. 55 i Percentage correct P i Percentage incorrect verschil 1 Percentage incorrect Percentage correct

30 steekproeven van N=100

Verschil >1 Geen verschil correct Wel verschil correct Fout geen verschil Fout wel verschil Totaal fout RCT.85 (.03).71(.04) 0.06(.01).18 (.03).23 (.03) T-toets 1.00 (.00).79(.03) 0 (0).13 (.02).13 (.02) P55.94 (.04).93(.03).02(.02).04 (.02).07 (.02) P60.98 (.02).85(.03).01(.007).09 (.02).10 (.02) P65.99 (.01).67(.05).0007(.0001).20 (.03).21 (.03) p70 1.00 (.00).57(.05) 0 (0).27 (.03).27 (.03)

Verschil >2 Geen verschil correct Wel verschil correct Fout geen verschil Fout wel verschil Totaal fout RCT.80 (.02).82 (.05).10(.02).09 (.03).19 (.03) T-toets.95 (.03).96 (.02).02 (.01).02 (.01).05 (.02) P55.76 (.03).99(.01).12(.02).003(.005).13 (.02) P60.87 (.04).97(.01).06(.02).01 (.01).08 (.02) P65.97 (.02).83(.05).01(.001).09 (.02).10 (.02) p70.98 (.01).71(.05).001(.001).14 (.03).15 (.03)

Verschil >3 Geen verschil correct Wel verschil correct Fout geen verschil Fout wel verschil Totaal fout RCT.71 (.03).86 (.05).19(.03).05 (.02).24 (.04) T-toets.80 (.04) 1.0 (.00).13 (.03).00 (.00).13 (.03) P55.62 (.03) 1.0(.00).25(.02).00(.00).25 (.02) P60.72 (.04).99(.007).18(.03).001(.002).18 (.03) P65.89 (.05).96(.04).07(.03).02 (.001).09 (.03) p70.94 (.03).88 (.05).04(.02).04 (.02).08 (.03)

P i 0.55 voor halfjaarlijkse verandering 0.70 voor langere termijn P i

Werkt het systeem? 100% 90% 80% 70% Totaal 60% 50% 40% 30% 20% 10% 0% 1e kwart 2011 2e kwart 2011 3e kwart 2011 4e kwart 2011 1e kwart 2012 2e kwart 2012 3e kwart 2012 4e kwart 2012 1e kwart 2013 Totaal Instroom 68% 57% 71% 87% 93% 82% 82% 79% 73% Totaal Doorstroom 1 70% 62% 70% 64% 73% 79% 73% 67% 73% Totaal Doorstroom 2 46% 74% 81% 91% 100% 75% 86% 79% 64% Totaal Uitstroom 45% 45% 40% 58% 57% 84% 33% 91% 71% Totaal 59% 62% 69% 77% 81% 79% 74% 75% 70% Forensisch Psychiatrisch Centrum Dr. S. van Mesdag 41

Toekomst Promotie Erwin Schuringa Promotie Paul Ter Horst Eind 2013 is handleiding IFBE- HKT-R behandelevaluatie klaar Forensisch Psychiatrisch Centrum Dr. S. van Mesdag 42

m.spreen@fpcvanmesdag.nl