'Inspectie en krimp: Perverse effecten'

Transcriptie

1 Datum 'Inspectie en krimp: Perverse effecten' Dr. A. C. (Anneke) Timmermans Rijksuniversiteit Groningen, GION/Onderwijskunde

2 Datum Overzicht Inspectie toezicht Opbrengsten van scholen Opbrengsten van kleine/krimpende scholen Andere kwaliteitsindicatoren en kleine/krimpende scholen Perverse effecten Strategisch gedrag

3 Datum Inspectie toezicht Risico-gestuurd De frequentie en intensiteit van het toezicht kan variëren tussen scholen naargelang het risico op onderpresteren (De Wolf & Verkroost, 2011; Inspectie van het Onderwijs, 2009; Ofsted, 2011; Sparrow, 2000) Effectief: - zwakke scholen hebben meer baat bij toezicht - vinger aan de pols houden Efficiënt: - minder toezicht druk bij scholen met weinig risico - vertrouwen Voorkomen dat scholen zwak of zeer zwak worden - tijdig ingrijpen

4 Datum Inspectie toezicht Inspectie van het onderwijs (2009). Risk-based inspection as of 2009: Primary and secondary education.

5 Datum Meten van opbrengsten van scholen Gemiddelde cito-score op schoolniveau Leren binnen en buiten de school (Bosker, Lam, Luyten, Steen & de Vos, 1998; Doolaard & Leseman, 2008; Gutman, Sameroff & Cole, 2003; Ten Dam & Vermunt, 2003) Invloed van factoren buiten de school zijn niet evenredig verdeeld over scholen (Hill & Rowe, 1996) Geen eerlijke vergelijking tussen scholen (Meyer, 1997; Webster, Mendro, Orsak & Weerasinghe, 1998) Zoeken naar manieren om rekening te houden met verschillen tussen scholen Beginniveau van de leerlingen Achtergrond van de leerlingen (bv. socio-economische status) Context van de school of buurt

6 Datum Meten van opbrengsten van scholen In primair onderwijs moeilijk omdat grote verscheidenheid aan (eind)toetsen geen zicht op instroomniveau van leerlingen pas recent data beschikbaar op leerling-niveau leerlingen wisselen van scholen

7 Datum Meten van opbrengsten van scholen Gegevens van Inspectie van het Onderwijs 8356 basisscholen Beschikbare variabelen Opbrengsten ( ) Achtergrond van leerlingen ( ) Schoolgrootte en krimp van scholen (2009) Kwaliteitsindicatoren ( )

8 Datum Meten van opbrengsten van scholen Opbrengsten na correctie voor het percentage gewichten leerlingen. Onvoldoende correctie om echt van schooleffecten te spreken Kleine scholen vaker onder gemiddeld en maar ook vaker boven gemiddeld Grotere impact van de prestaties van individuele leerlingen

9 Datum Meten van opbrengsten van scholen Opbrengsten van kleine scholen variëren ook meer tussen opeenvolgende jaren Schoolgrootte en meer.60 Correlatie Selectie van 25% van de scholen

10 Datum Meten van opbrengsten van scholen Oplossingen voor meten van opbrengsten van kleine scholen Gebruiken van gegevens van opeenvolgende jaren (3) Trends moeilijker te ontdekken Minimum aantallen voor uitspraken +/- 30 leerlingen per school voor.80 betrouwbaarheid Complexe statistische modellen (shrinkage in multilevel analyse)

11 Opbrengsten van krimpende scholen Datum Krimp Frequentie Percentage Sterke krimp (>20%) 65 0,9 Krimp (>10%) 444 6,1 Geen groei en krimp ,0 Groei (>10%) 255 3,5 Sterke groei (>20%) 116 1,6 Totaal 7325 Komt relatief even vaak voor in en buiten de grote steden

12 Datum Opbrengsten van krimpende scholen

13 Datum Andere kwaliteitsindicatoren en kleine scholen Percentage voldoende op normindicatoren Bij de aangeboden leerinhouden betrekt de school alle kerndoelen en meer De school met veel gewichtenleerlingen biedt passende leerinhouden aan De leraren geven duidelijke uitleg van de leerstof De leraren realiseren een taakgerichte werksfeer De leraren volgen en analyseren systematisch de voortgang van de leerlingen De school voert zorg planmatig uit

14 Datum Andere kwaliteitsindicatoren en krimpende scholen Percentage voldoende Sterke krimp krimp Geen krimp/ groei Groei Sterke groei Bij de aangeboden leerinhouden betrekt de school alle kerndoelen De school met veel gewichtenleerlingen biedt passende leerinhouden aan De leraren geven duidelijke uitleg van de leerstof De leerlingen zijn actief betrokken bij activiteiten De leraren volgen en analyseren systematisch de voortgang van de leerlingen De school voert zorg planmatig uit

15 Datum Perverse effecten Strategisch gedrag Artificieel verhogen van de opbrengsten Teaching to the test (e.g. Jacob, 2005; Jones, 2008; Koretz, 2008) Test manipulatie (e.g. Jacob, 2005; Koretz, 2008; Swanborn et al., 2008) Aanvullende materialen, tijd Aanvullende instructie Voorzeggen antwoorden Reshaping the testpool (e. g. Cullen et al., 2006; Figlio et al., 2002; Jacob, 2005; Jones, 2008; Nichols & Berliner, 2005; Swanborn et al., 2008) Zittenblijven Verwijzen van leerlingen naar SBO Ziekte op toetsdag

16 Datum Perverse effecten Strategisch gedrag (on)verwacht onderzoek bij 257 scholen tijdens eindtoets in 2006 (Inspectie van het Onderwijs, 2006) - 5,5% afname eindtoets niet conform handleiding - Extra materialen (zoals kladpapier) - Extra inhoudelijke instructie Stijgend percentage leerlingen die niet deelnemen aan de eindtoets (Swanborn & de Wolf, 2008) - Verdrievoudiging van ziekte tijdens toetsafname van Vaker bij zeer zwakke scholen Oneerlijke vergelijkingen tussen scholen

17 Datum Perverse effecten Strategisch gedrag Opbrengsten van kleine scholen Relatief vaker zwak (maar ook sterk) Grotere impact van prestaties van individuele leerlingen op de opbrengsten Daardoor opbrengsten makkelijker artificieel te verhogen Grotere incentives voor kleine scholen?

18 Datum Overzicht Opbrengsten spelen een nadrukkelijke rol in toezicht Meten van opbrengsten van scholen is complex en extra moeilijk voor kleine/krimpende scholen Mogelijk grotere incentives voor strategisch gedrag voor kleinere scholen Slechts verbanden, nog geen verklaringen Richting van eventueel causaal verband - Lage beoordelingen op kwaliteitsindicatoren door kleine of krimpende leerling populatie? - Krimpende leerling populatie door lage beoordelingen op kwaliteitsindicatoren? (stemmen met de voeten)

19 Datum Bedankt! Dr. A.C. (Anneke) Timmermans Docent/Onderzoeker Rijksuniversiteit Groningen Faculteit Gedrags- en Maatschappijwetenschappen / onderwijskunde Grote Rozenstraat 3, 9712 TG Groningen T