Klinimetrie versus / naast psychometrie!?! Riekie de Vet EMGO Instituut, Amsterdam
Meet-eigenschappen Test-hertest Reliability (betrouwbaarheid) Meetfout
Definities Reliability (betrouwbaarheid): kunnen personen van elkaar onderscheiden worden ondanks de meetfouten Meetfout Hoe groot is het verschil tussen beide metingen?
Reliability ICC = 2 patat 2 patat + 2 errorrror ( 2 error) = Standard error of measurement = meetfout
Voorbeeld COOP/WONCA vertaald voor Turkse en Marokkaanse kankerpatiënten in Nederland Patiënten en proxies vulden de vragenlijst in. Meetfout en reliability (ICC) bepaald Alle items worden op dezelfde 1-5 schaal gemeten
Meetfouten patient mean proxy mean Phys fitness 0.34 Daily act. 0.00* Pain 0.67 Social activities -0.34 Feelings -0.08* Overall health -0.06* Quality of life -0.04* Conclusie kleinste meetfout: groepsniveau*
Meetfouten patient mean proxy mean (SD) Phys fitness 0.34 (1.6) Daily act. 0.00* (1.3) Pain 0.67 (1.2)* Social activities -0.34 (1.4) Feelings -0.08* (1.5) Overall health -0.06* (1.0)* Quality of life -0.04* (1.3) Conclusie kleinste meetfout: groepsniveau* individueel niveau*
Meetfouten en reliability patient mean proxy mean ICC Phys fitness 0.34 (1.6) 0.25 Daily act. 0.00* (1.3) 0.49* Pain 0.67 (1.2)* 0.47* Social activities -0.34 (1.4) 0.50* Feelings -0.08* (1.5) 0.31 Overall health -0.06* (1.0)* 0.44* Quality of life -0.04* (1.3) 0.19 Conclusie kleinste meetfout: groepsniveau* individueel niveau* Conclusie ICC: hoogste betrouwbaarheid *
Meetfouten en reliability patient mean proxy mean ICC (SD) Daily act. 0.00* (1.3) 0.49* Pain 0.67 (1.2)* 0.47*
ICC variantie componenten var Pat var pat-proxy var error ICC Daily act. 0.78-0.02 0.83 0.49* Pain 0.82 0.23 0.68 0.47* ICC = var pat var pat + var pat at-proxy proxy + var error
Meetfouten en reliability patient mean proxy mean ICC (SD) Phys fitness 0.34 (1.6) 0.25 Daily act. 0.00* (1.3) 0.49* Pain 0.67 (1.2)* 0.47* Social activities -0.34 (1.4) 0.50* Feelings -0.08* (1.5) 0.31 Overall health -0.06* (1.0)* 0.44* Quality of life -0.04* (1.3) 0.19 Conclusie kleinste meetfout: groepsniveau* individueel niveau* Conclusie ICC: beste overeenkomst*
Meetfouten en reliability patient mean proxy mean ICC (SD) Daily act. 0.00* (1.3) 0.49* Quality of life -0.04* (1.3) 0.19
ICC variantie componenten var Pat var pat-proxy var error ICC Daily act. 0.78-0.02 0.83 0.49* Quality of life 0.18-0.01 0.78 0.19
Meetfouten en reliability patient mean proxy mean ICC Phys fitness 0.34 (1.6) 0.25 Daily act. 0.00* (1.3) 0.49* Pain 0.67 (1.2)* 0.47* Social activities -0.34 (1.4) 0.50* Feelings -0.08* (1.5) 0.31 Overall health -0.06* (1.0)* 0.44* Quality of life -0.04* (1.3) 0.19 Conclusie kleinste meetfout: groepsniveau* individueel niveau* Conclusie ICC: beste overeenkomst *
Meetfouten en reliability patient mean proxy mean ICC Phys fitness 0.34 (1.6) 0.25 Pain 0.67 (1.2)* 0.47* Conclusie kleinste meetfout: groepsniveau* individueel niveau* Conclusie ICC: hoogste betrouwbaarheid*
ICC variantie componenten var Pat var pat-proxy var error ICC Phys fitness 0.41 0.03 1.20 0.25 Pain 0.82 0.23 0.68 0.47*
Welke maat te gebruiken? Wat willen we meten/weten? Binnen personen? Relateren aan tussenpersoonsvariatie? psychometrie Relateren aan verschil dat je wilt aantonen? klinimetrie
Vraagstellingen verschillen Reliability (betrouwbaarheid): kunnen personen van elkaar onderscheiden worden ondanks de meetfouten Meetfout Hoe groot is de meetfout. Is deze acceptabel gezien de intra individuele verschillen die we willen aantonen.
Vraagstelling van dit onderzoek Kunnen proxies gebruikt worden in plaats van patiënten om behandelingen te evalueren? Stel dat 1 punt voor- of achteruitgang op de COOP- WONCA relevant wordt gevonden
Conclusie Proxies kunnen wel gebruikt worden in onderzoek waar het gaat om groepseffecten. Er is weinig bias; maar wees voorzichtig met beoordeling van pijn door proxies. Om het effect in één patiënt te evalueren is de meetfout (patientproxy variatie) te groot. In dit onderzoek zijn we alleen geinteresseerd in veranderingen binnen personen, en hebben we niets te maken met de variatie tussen personen.
Meet-eigenschappen Klinimetrie : belangrijke meeteigenschappen Meetfout Responsiviteit Minder belangrijk: Cronbach s alfa Reliability
Discussie
Lessons of Cronbach Onderscheid twee stromingen in de psychologie Correlationale psychologen Zijn geïnteresseerd in verschillen tussen mensen en proberen deze te verklaren Experimentele psychologen Proberen de kenmerken van mensen te beïnvloeden, interveniëren en kijken wat het effect is. Cronbach LJ. The two disciplines of scientific psychology. The American Psychologist. 1957; 12: 671-84.
Twee stromingen Wat error variantie (ruis) is voor de experimenteel psychologen is het signaal voor de correlationele psychologen Experimenteel psychologen zijn het meest te vergelijken met clinici, die proberen te interveniëren (behandelen), om de gezondheidstoestand te beïnvloeden.