INHOUD. Woord vooraf. P.F. Sanders en T.J.H.M. Eggen 1 Inleiding 1. N.H. Veldhuijzen en F.G.M. Kleintjes 2 Dataverzameling 17

Transcriptie

1 INHOUD Woord vooraf P.F. Sanders en T.J.H.M. Eggen 1 Inleiding Testindelingen Toetsconstructie Het valideren van meetinstrumenten Psychometrie in de praktijk 12 N.H. Veldhuijzen en F.G.M. Kleintjes 2 Dataverzameling Van waarnemingen tot data Schaalniveaus Meten per fiat Procedures voor dataverzameling Betrouwbaarheid en validiteit Steekproeven Representativiteit van steekproeven Nauwkeurigheid Aselecte steekproeven Gestratificeerde steekproeven Getrapte steekproeven Intraklassecorrelatie Proefopzetten Stimuli Meetmodellen 31 N.H. Veldhuijzen, P. Goldebeld en P.F. Sanders

2 3 Klassieke testtheorie en generaliseerbaarheidstheorie Ware score De centrale formule van de klassieke testtheorie Betrouwbaarheid Standaardmeetfout Schattingen van de ware score Het schatten van de betrouwbaarheid en de standaardmeetfout Parallelle metingen Test-hertestmethode Toetsverlenging Coëfficiënt alpha Toets- en itemanalyse Toets- en itemindices bij toetsen met meerkeuzevragen Itemindices bij toetsen met meerkeuzevragen Toetsindices bij toetsen met meerkeuzevragen Toets- en itemindices bij toetsen met open vragen Itemindices bij toetsen met open vragen Toetsindices bij toetsen met open vragen Betrouwbaarheid en standaardmeetfout Coëfficiënt alpha en de KR Verschilscores Nauwkeurigheid van toets- en itemindices Standaardfout van een p-waarde Standaardfout van een gemiddelde toetsscore en van een p -waarde Standaardfout van een r it -waarde Standaardfout van coëfficiënt alpha Normen voor toets- en itemindices Normen voor p- en p -waarden Normen voor r it -waarden Normen voor de betrouwbaarheid Generaliseerbaarheidstheorie Design met een facet Generaliseerbaarheidsstudie Decisiestudie Design met twee facetten 73

3 Generaliseerbaarheidsstudie Decisiestudie Andere aspecten van de generaliseerbaarheidstheorie 81 N.D. Verhelst 4 Itemresponstheorie Begrippen en algemene theorie Het Raschmodel Lokale stochastische onafhankelijkheid Het schatten van de parameters in het Raschmodel Grootste-aannemelijkheidsschatters: een voorbeeld JML-schatting in het Raschmodel CML-schatting in het Raschmodel MML-schatting in het Raschmodel Een voorbeeld Het toetsen van het Raschmodel De veronderstellingen van het Raschmodel Relaties tussen het Raschmodel en het multinomiale model Likelihood-ratio-toetsen Wald-toetsen Veralgemeende Pearson -toetsen Een voorbeeld Het Raschmodel en onvolledige designs Het schatten van de persoonsparameters Drie methoden om de persoonsparameter θ te schatten Een voorbeeld Passingsindices voor individuele antwoordpatronen 176 C.A.W. Glas en N.D. Verhelst 5 Een overzicht van itemresponsmodellen Het lineair-logistische testmodel Parameterschatting in het LLTM Het toetsen van het LLTM Een toepassing van het LLTM Indelingsprincipes van IRT-modellen 190

4 5.3 Unidimensionale modellen voor dichotome items Het twee- en drieparameter logistisch model Het éénparameter logistisch model (OPLM) Modellen zonder de assumptie van lokale stochastische onafhankelijkheid Unidimensionale modellen voor polytome items Het partial credit model (PCM) Generalisaties van het partial credit model Multidimensionale IRT-modellen Een OPLM met een multivariate vaardigheidsverdeling Het multidimensionale model van Rasch Compensatorische IRT-modellen Conjunctieve IRT-modellen Nabeschouwing 237 T.J.H.M. Eggen 6 Itemresponstheorie en onvolledige gegevens De relatie tussen onvolledige gegevens en IRT Efficiëntie van de schattingen Calibratie in onvolledige designs en linken De datamatrices van structureel onvolledige designs De stochastische structuur van structureel onvolledige designs Gerandomiseerd onvolledig design Meerfasen onvolledig design Groepsgericht onvolledig design Algemene voorwaarden voor calibratie in onvolledige designs Voorwaarden voor calibratie in stochastische designs MML in stochastische designs CML in stochastische designs Schatten van persoonsparameters in stochastische designs ML- en WML-vaardigheidsschatting in stochastische designs EAP vaardigheidsschatting in stochastische onvolledige designs 282

5 N.D. Verhelst en F.G.M. Kleintjes 7 Toepassingen van itemresponstheorie De PPON-rekenpeiling De Cito leesbaarheidsindex voor het basisonderwijs De diagnostische verborgen-figurentest 304 R.J.H. Engelen en T.J.H.M. Eggen 8 Equivaleren Overzicht equivaleren Psychometrische voorwaarden voor equivaleren Designs voor equivaleren Equivaleren in de klassieke testtheorie Basismethoden voor equivaleren Equivaleren met behulp van het ankertoetsdesign Equivaleren met itemresponstheorie Calibratie Verschillende vormen van equivalering in de itemresponstheorie Equivaleren met behulp van een itembank Quasi-multidimensionaal IRT-equivaleren De kwaliteit van de equivaleermethoden vergeleken 346 C.A.W. Glas en M.J. Ouborg 9 Vraagonzuiverheid Definitie van onzuiverheid Methoden voor het bepalen van vraagonzuiverheid De Mantel-Haenszel-procedure Procedure met IRT-modellen De relatie tussen de Mantel-Haenszel-procedure en de IRT-procedure Een voorbeeld van het bepalen van vraagonzuiverheid met behulp van het OPLM Conclusie 370

6 F.H. Kamphuis en R.J.H.Engelen 10 Het meten van veranderingen Individuele groei Longitudinale data en modellering Het vaststellen van de individuele groei bij zuigelingen Problemen bij het volgen van individuele leerlingen Klassieke testtheorie en groeiscores Artificiële longitudinale data Statische benadering Dynamische benadering Evaluatie statische en dynamische benadering Schattingen van structurele parameters Itemresponstheorie en groeiscores Schaal Vorderingen en Spellingvaardigheid Het schatten van de latente vaardigheid Epiloog 406 T.J.J.M. Theunissen, P.F. Sanders en A.J.Verschoor 11 Het samenstellen van toetsen Mathematisch programmeren Het samenstellen van toetsen in de itemresponstheorie Lineaire programmeringsproblemen Praktijkvoorbeelden Specificeren van restricties en relaties Het samenstellen van toetsen in de klassieke testtheorie Het samenstellen van toetsen in de generaliseerbaarheidstheorie 438

7 A.P.J.M. Heuvelmans en P.F. Sanders 12 Beoordelaarsovereenstemming Definitie van beoordelaarsovereenstemming Beoordelaarsovereenstemming bij data van nominaal niveau Beoordelaarsovereenstemming bij data van ordinaal niveau Beoordelaarsovereenstemming bij data van intervalniveau Lage beoordelaarsovereenstemming: oorzaken en remedies Tot besluit 469 H.H.F.M. Verstralen 13 Schalen, normen en cijfers Het niveau van de schaal Normschalen Cumulatieve verdelingen Genormeerde lineaire transformaties Genormaliseerde schalen Ontwikkelingsschalen De nauwkeurigheid van normschalen Beheersingsschalen Het rapporteren van meetnauwkeurigheid De cesuur voldoende/onvoldoende en andere normen voor cijfergeving Traditionele methoden van cesuurbepaling Cesuurbepaling en overige cijfers binnen itemresponstheorie Conclusie 509 Literatuur 511 Personenregister 529 Zakenregister 533