Kwaliteit van meetinstrumenten EMGO + retraite 2010 Programma bijeenkomst Quality of Care Caroline Terwee 1 Ruth van Nispen 2 1 Kenniscentrum Meetinstrumenten VUmc, afdeling Epidemiologie en Biostatistiek 2 Afdeling Oogheelkunde VU medisch centrum
www.cosmin.nl www.kmin-vumc.nl Internal Consistency Reliability Measurement error (test retest, Inter rater, Intra rater) Reliability (test retest, Inter rater, Intra rater) Quality of a measurement instrument Content validity face validity Criterion validity (concurrent validity, predictive validity) Validity Structural validity Construct validity Hypotheses testing Responsiveness Cross cultural validity Responsiveness Interpretability
Onderzoek naar de kwaliteit van meetinstrumenten: voor een dubbeltje op de eerste rang Caroline Terwee 1 Ruth van Nispen 2 1 Kenniscentrum Meetinstrumenten VUmc, afdeling Epidemiologie en Biostatistiek 2 Afdeling Oogheelkunde VU medisch centrum
Ideeën voor klinimetrische artikelen voorbeelden wat kun je onderzoeken? wat heb je er voor nodig?
Reliability www.kmin-vumc.nl Measurement error (test retest, Inter rater, Intra rater) Reliability (test retest, Inter rater, Intra rater) Wat heb je nodig? herhaalde metingen door meerdere (2-5) observers 20-100 mensen
Reliability www.kmin-vumc.nl Measurement error (test retest, Inter rater, Intra rater) Reliability (test retest, Inter rater, Intra rater) Wat heb je nodig? Twee metingen bij stabiele groep in ongeveer 2 weken 50-100 mensen
Reliability www.kmin-vumc.nl Measurement error (test retest, Inter rater, Intra rater) Smallest detectable change = kleinste verschil in score op het meetinstrument dat je kunt meten boven de meetfout Wat heb je nodig? Twee metingen bij stabiele groep in ongeveer 2 weken 50-100 mensen
Validity Structural validity www.kmin-vumc.nl Reliability Internal Consistency Wat heb je nodig? één meting (interne consistentie) statisticus
A content validity study of the Patient Dignity Inventory in the Netherlands Authors: Gwenda Albers1,2, H Roeline W Pasman1,2; Mette L Rurup1,2, Henrica CW de Vet3, Bregje D Onwuteaka-Philipsen1,2 Author affiliations: 1 Department of Public and Occupational Health, EMGO Institute for Health and Care Research, VU University Medical Center, Amsterdam, The Netherlands; 2 Expertise Center for Palliative Care, VU University Medical Center, Amsterdam, The Netherlands; 3 Department of Epidemiology and Biostatistics, EMGO Institute for Health and Care Research, VU University Medical Center, Amsterdam, The Netherlands Validity Wat heb je nodig? Content validity face validity Beoordeling van relevantie en volledigheid van de vragenlijst door experts en patiënten 20-50 mensen
Validity Hypotheses testing Wat heb je nodig? Eén or meer andere instrumenten om mee te vergelijken Hypotheses over verwachtte relaties tussen instrumenten of verwachtte verschillen tussen groepen
Validity Validity Cross cultural validity Wat heb je nodig? 2 datasets (uit 2 verschillende landen) Eén meting per dataset
Validity Wat heb je nodig? vertalers minimaal één meting en instrument om mee te vergelijken dataset van NL referentie populatie Cross cultural validity Hypotheses testing
Responsiveness Responsiveness www.kmin-vumc.nl Validity Wat heb je nodig? Hypotheses testing 2 metingen (longitudinaal) Eén or meer andere instrumenten om mee te vergelijken Hypotheses over verwachtte relaties tussen veranderingen in instrumenten of verwachtte verschillen in veranderingen tussen groepen
Interpretability www.kmin-vumc.nl Minimal Important Change = kleinste verandering in score die patiënten relevant vinden Wat heb je nodig? 2 metingen (longitudinaal) Een globale maat voor ervaring verandering (bv een 5-puntsschaal) om mee te vergelijken
Interpretability www.kmin-vumc.nl Wat heb je nodig? 3 metingen (2 binnen 2 weken en 1 follow-up) Een globale maat voor ervaring verandering (bv een 5-puntsschaal) om mee te vergelijken
Vergelijking van meerdere meetinstrumenten
Systematische review van meetinstrumenten
Systematische review van één meetinstrument
Vergelijken van de inhoud van vragenlijsten op basis van ICF
Onderzoek naar de kwaliteit van meetinstrumenten: Voor een kwartje? Ruth.