TECHNISCH RAPPORT SECTORHOOFDSTUK MBO. Onderwijsverslag 2013/2014

Transcriptie

1 TECHNISCH RAPPORT SECTORHOOFDSTUK MBO Onderwijsverslag 2013/2014 April 2015

2 INHOUD Inleiding 4 1 Steekproef mbo Staat van de Instelling bekostigde instellingen Betrouwbaarheid van de steekproef Representativiteit van de steekproef op opleidingsniveau Weging op opleidingsniveau 6 2 Scores Staat van de Instelling 2012, 2013 en 2014 bekostigd onderwijs Kwaliteitsborging op instellingniveau Scores op de vijf kwaliteitsgebieden op opleidingsniveau Kwaliteitsgebied 1: onderwijsproces Samenhang intake en plaatsing met opbrengsten Samenhang differentiatie en benutting leertijd Kwaliteitsgebied 2: examinering en diplomering Inkoop van examens kwaliteitsgebied 3: opbrengsten Kwaliteitsgebied 4: kwaliteitsborging op opleidingsniveau Relaties tussen de kwaliteitsgebieden Kwaliteitsgebied 5: naleving wettelijke vereisten Scores op de taalexamens Vervolgtoezicht en tekortkomingen 21 3 Scores Staat van de Instelling niet-bekostigd middelbaar beroepsonderwijs 2012 en Kwaliteitsborging op instellingsniveau Scores op de vijf kwaliteitsgebieden op opleidingsniveau Kwaliteitsgebied 1: onderwijsproces Kwaliteitsgebied 2: examinering en diplomering Kwaliteitsgebied 3: opbrengsten Kwaliteitsgebied 4: kwaliteitsborging op opleidingsniveau Kwaliteitsgebied 5: naleving van wettelijke vereisten Scores op de taalexamens Vervolgtoezicht en tekortkomingen 30 4 Verslagen van werkzaamheden niet-bekostigde instellingen 31 5 Analyse van de jaarverslagen van bekostigde mbo-instellingen 33 6 Opbrengsten bekostigd mbo over Definitie opbrengsten voor schooljaar 2012/ Startkwalificaties en hoogte van behaalde diploma Prestaties in het mbo over de periode 2008/ / Vooropleiding vo en hoogst behaalde mbo-diploma Diploma s stapelen in het mbo 2012/ Trend in stapelen? Welke variabelen hebben invloed op stapelen? 44 7 Opbrengsten niet-bekostigde instellingen mbo Algemeen beeld 49

3 7.2 Diversiteit in doelgroepen en rendement 50 8 Lesobservaties bekostigd mbo Indicatoren mbo lessen Onderwijssituaties in het mbo Bevoegdheden van de docenten 54 9 Meldcode huiselijk geweld en kindermishandeling 56

4 Inleiding Dit is het technisch rapport dat ten grondslag ligt aan het sectorhoofdstuk mbo van het Onderwijsverslag 2013/2014. In dit rapport vindt u de verantwoording van onderzoeksgegevens in het sectorhoofdstuk mbo voor het Onderwijsverslag over het schooljaar 2013/2014. Pagina 4 van 57

5 1 Steekproef mbo Staat van de Instelling bekostigde instellingen 2014 In de eerste helft van 2014 heeft bij 23 bekostigde mbo-instellingen (zie tabel 1.a) een onderzoek in het kader van de Staat van de Instelling (SVI) plaatsgevonden. Afhankelijk van het aantal opleidingen dat een instelling aanbiedt, zijn er per instelling 1-5 opleidingen (bc-codes) onderzocht middels een kwaliteitsonderzoek. De beoordelingen zijn gebaseerd op het toezichtkader BVE In 2014 zijn er in totaal 98 opleidingen onderzocht. Tabel 1.a Overzicht van steekproef SVI 2014 voor bekostigde instellingen Brin Aantal steekproefopleidingen Totaal aantal opleidingen A 5 86 B 4 18 C 4 21 D 3 13 E 4 37 F 4 39 G 4 28 H 4 19 I 2 7 J 5 73 K 4 22 L 5 72 M N 5 59 O 5 84 P 5 70 Q 5 79 R S 5 60 T 3 13 U 4 37 V 4 44 W 4 73 Totaal Betrouwbaarheid van de steekproef De omvang van de steekproef, uitgedrukt in aantal instellingen en aantal opleidingen, is respectievelijk 23 en 98. Om met een betrouwbaarheid van 95 procent uitspraken over de populatie te doen op basis van deze steekproef, ligt de foutmarge bij instellingsscores rond de 17 procent en bij opleidingsscores rond de 10 procent. 1.2 Representativiteit van de steekproef op opleidingsniveau Om te bepalen in hoeverre de steekproef een representatief beeld geeft over het middelbaar beroepsonderwijs is gekeken naar de verdeling van de kenmerken sector, opleidingsniveau, leerweg en type instelling op landelijk niveau en de verdeling van deze kenmerken binnen de steekproef. Hierbij wordt een afwijking van minder dan 10 procent gehonoreerd. Pagina 5 van 57

6 Tabel 1.2a Verdeling naar sector Landelijk (%) Landelijk (%) deelnemers Steekproef SVI 2014 (%) opleidingen Techniek Groen Economie Zorg Combi Totaal Toelichting: bijna de helft van de mbo-opleidingen bestaat uit techniekopleidingen. Deze opleidingen zijn vaak klein: 27 procent van de studenten in het mbo volgt een techniekopleiding. Bij de steekproeftrekking is hiermee rekening gehouden. De verdeling van de steekproefopleidingen sluit aan bij de landelijke verdeling van de studenten over de sectoren in het mbo. Tabel 1.2b Verdeling naar type instelling Landelijk (%) Steekproef SVI 2014 (%) Vakinstelling 4 5 AOC ROC 6 7 Totaal Toelichting: de steekproef is representatief naar type instelling. Tabel 1.2c Verdeling naar leerweg Landelijk (%) Steekproef SVI 2014 (%) BOL BBL Totaal Toelichting: de steekproef is representatief naar leerweg. Tabel 1.2d Verdeling naar opleidingsniveau Landelijk (%) Steekproef SVI 2014 (%) Totaal Toelichting: de steekproef is representatief naar opleidingsniveau. 1.3 Weging op opleidingsniveau De grootte van de instelling bepaalt hoeveel opleidingen er worden getrokken. Zie hiervoor de onderstaande tabel. Pagina 6 van 57

7 Tabel 1.3a Aantal te trekken opleidingen per instelling Aantal opleidingen (cp-code*niveau)* binnen de instelling Aantal te trekken opleidingen 1-4 opleidingen opleidingen opleidingen opleidingen 4 Meer dan 75 opleidingen 5 *voor de steekproef van 2014 is uitgegaan van bc-codes i.p.v. cp-codes. Omdat deze steekproef al in 2012 is bepaald, is het aantal te trekken opleidingen met de komst van de bc-code niet gewijzigd. Deze verhoudingen leiden er toe dat kleine instellingen in verhouding meer opleidingen leveren aan het stelselonderzoek dan grote instellingen. Bij de analyse van de stelselgegevens zal daarom met wegingsgewichten gewerkt moeten worden. Aan iedere instelling is een gewicht toegekend op basis van de volgende formule: gewicht = (n opl in brin x n opl in de steekproef) (n opl van alle brins in de steekproef x n getrokken opl in brin) In een voorbeeld ziet dat er als volgt uit: De totale steekproef bevat 98 opleidingen van 23 instellingen. Gezamenlijk bieden de 23 instellingen opleidingen aan. Instelling J biedt 73 opleidingen aan en van deze opleidingen zijn er 5 getrokken voor de steekproef. Het gewicht dat aan deze instelling wordt toegekend is dus 1.21 (73*98)/(1.183*5). In tabel 1.3b is een overzicht gemaakt van de gewichten die aan iedere instelling zijn toegekend. Pagina 7 van 57

8 Tabel 1.3b Gewichten per instelling Brin Aantal steekproefopleidingen Totaal aantal opleidingen Gewicht A ,42 B 4 18,37 C 4 21,43 D 3 13,36 E 4 37,77 F 4 39,81 G 4 28,58 H 4 19,39 I 2 7,29 J ,21 K 4 22,46 L ,19 M ,87 N 5 59,98 O ,39 P ,16 Q ,31 R ,92 S 5 60,99 T 3 13,36 U 4 37,77 V 4 44,91 W ,51 De data op opleidingsniveau die in het Onderwijsverslag 2013/2014 worden gepresenteerd, zijn gewogen volgens de bovenstaande methode. Pagina 8 van 57

9 2 Scores Staat van de Instelling 2012, 2013 en 2014 bekostigd onderwijs In dit hoofdstuk wordt een overzicht gegeven van de scores op instellings- en opleidingsniveau op basis van de Staat van de Instelling (SVI) 2014 van bekostigde instellingen. In de tabellen wordt een vergelijking gemaakt met de uitkomsten van 2012 en 2013, zoals opgenomen in de Onderwijsverslagen van 2011/2012 en 2012/2013. In alle jaren zijn de data op opleidingsniveau gewogen volgens de methode die in paragraaf 1.3 is beschreven. Significante verschillen (p<0.05) zijn oranje gearceerd in de tabellen. In superscript is aangeven met welke jaren er een significant verschil is: 1 = significant t.o.v = significant t.o.v ,2 = significant t.o.v én Kwaliteitsborging op instellingniveau Tabel 2.1a Kwaliteitsborging op instellingsniveau in percentages (n 2012=22, n 2013=24, n 2014=23, n Totaal=69) Jaar Totaal Kwaliteitsborging Goed Voldoende ,2 42 Onvoldoende ,2 49 Slecht Totaal Toelichting: de jaren 2012 en 2013 laten hetzelfde beeld zien; de verschillen tussen deze jaren zijn niet significant. In 2014 zien we een stijging van het percentage instellingen met een voldoende beoordeling op de kwaliteitsborging. Pagina 9 van 57

10 Scores op de aspecten en indicatoren van kwaliteitsborging op instellingsniveau Tabel 2.1b Aantal instellingen dat als voldoende is beoordeeld op aspecten en indicatoren van kwaliteitsborging in 2012, 2013 en 2014 (n 2012=22, n 2013=24, n 2014=23, n Totaal=69) Jaar Totaal N N N N 4. Kwaliteitsborging , Sturing * Plannen Informatie Continuïteit Beoordeling * , Monitoring , Evaluatie Verbetering en verankering * , Verbeteraanpak Deskundigheidsbevordering Verankering , Dialoog en verantwoording Intern Extern *kernaspecten Toelichting: de verschillen tussen 2012 en 2013 zijn niet significant. In 2014 zien we echter wel een verbetering van de kwaliteitsborging op instellingsniveau, steeds meer instellingen hebben hun kwaliteitsborging op orde. Tabel 2.1c Percentage instellingen dat als voldoende is beoordeeld op aspecten en indicatoren van kwaliteitsborging in 2012, 2013 en 2014 (n 2012=22, n 2013=24, n 2014=23, n Totaal=69) Jaar Totaal % % % % 4. Kwaliteitsborging , Sturing * Plannen Informatie Continuïteit Beoordeling * , Monitoring , Evaluatie Verbetering en verankering * , Verbeteraanpak Deskundigheidsbevordering Verankering , Dialoog en verantwoording Intern Extern *kernaspecten Toelichting: in 2014 is het percentage instellingen met een voldoende kwaliteitsborging toegenomen van een derde in 2012 en 2013, naar 70 procent in Verbeteringen zijn met name zichtbaar in de sturing op kwaliteit, de beoordeling en de verankering van de kwaliteit. Steeds meer instellingen voldoen aan de eisen die hieraan worden gesteld. De dialoog en verantwoording, zowel intern als extern, is in 2014 bij alle instellingen op orde. Pagina 10 van 57

11 2.2 Scores op de vijf kwaliteitsgebieden op opleidingsniveau Tabel 2.2a Scores op de kwaliteitsgebieden in percentages in 2012, 2013 en 2014 (n 2012=95, n 2013=95, n 2014=98, n Totaal=288) Jaar Totaal % % % % 1 Onderwijsproces Goed ,2 10 Voldoende Onvoldoende Slecht Examinering en diplomering Goed Voldoende Onvoldoende ,2 29 Slecht , Opbrengsten Voldoende Onvoldoende Kwaliteitsborging Goed Voldoende ,2 34 Onvoldoende Slecht , Naleving wettelijke vereisten Voldoet Voldoet niet Toelichting: De kwaliteit van het onderwijsproces is in 2014 beter dan in de voorgaande twee jaren. Ondanks de verbeteringen in 2014 zijn er over de drie jaren bezien nog bij 16 (15 procent onvoldoende + 1 procent slecht) procent van de opleidingen verbeteringen nodig om het onderwijsproces op orde te krijgen. Op het gebied van examinering en diplomering zien we in de afgelopen drie jaren ook veranderingen in de oordelen. In 2014 is het aantal opleidingen met een slechte examinering en diplomering gedaald; wel zijn er nog bij 42 procent van de opleidingen tekortkomingen op dit gebied. Over de drie jaren bezien zijn er bij 49 procent van de opleidingen tekortkomingen geconstateerd. Ook op het gebied van kwaliteitsborging zijn er verbeteringen zichtbaar. In 2014 zijn er minder opleidingen waarvan de kwaliteitsborging slecht is bevonden. Desondanks is de kwaliteitsborging in 2014 bij 47 procent van de opleidingen nog steeds niet op orde. Over drie jaren bezien is dit percentage 64 procent. Het beeld over de opbrengsten en de naleving van wettelijke vereisten blijft tamelijk constant. Uit de analyses over de drie jaren blijkt dat bij 80 procent van de opleidingen de opbrengsten voldoende zijn en dat bij 79 procent de naleving wettelijke vereisten voldoende zijn. Voor de onderstaande tabel zijn de oordelen gehercodeerd naar voldoende (goed + voldoende) en onvoldoende (onvoldoende + slecht). Tabel 2.2b Percentage opleidingen dat als voldoende is beoordeeld naar kwaliteitsgebied in 2012, 2013 en 2014 (n 2012=95, n 2013=95, n 2014=98, n Totaal=288) Totaal % % % % 1 Onderwijsproces Examinering en diplomering Pagina 11 van 57

12 3 Opbrengsten Kwaliteitsborging , Naleving wettelijke vereisten Alle kwaliteitsgebieden voldoende Toelichting: de uitkomsten van het steekproefonderzoek laten zien dat er kwaliteitsverbeteringen zijn op de gebieden onderwijsproces en kwaliteitsborging. In 2014 heeft 92 procent van de opleidingen een voldoende onderwijsproces tegenover 79 procent in Verder heeft 53 procent van de opleidingen in 2014 een voldoende kwaliteitszorgsysteem tegenover 27 en 28 procent in respectievelijk 2012 en Pagina 12 van 57

13 2.3 Kwaliteitsgebied 1: onderwijsproces Tabel 2.3a Percentage opleidingen dat als voldoende is beoordeeld op het onderwijsproces in 2012, 2013 en 2014 (n 2012=95, n 2013=95, n 2014=98, n Totaal=288) Jaar Totaal % % % % 1 Onderwijsproces Samenhang Inhoud Programmering Maatwerk Differentiatie Didactisch handelen* Interactie Ondersteuning en begeleiding van de leeractiviteiten Feedback op de leeractiviteiten en de leerresultaten Leertijd Benutting Werkdruk Leeromgeving Schoolklimaat Materiële voorzieningen Intake & plaatsing Voorlichting Intake en plaatsing Studieloopbaanbegeleiding* Informatievoorziening Studieloopbaanbegeleiding Zorg Eerste- en tweedelijnszorg Derdelijnszorg Beroepspraktijkvorming* Voorbereiding studenten en bedrijven Plaatsing Begeleiding door leerbedrijf Begeleiding door de opleiding ,2 91 *kernaspecten Toelichting: de vergelijking van de steekproefuitkomsten van 2014 met de twee voorgaande jaren laat zien dat steeds meer opleidingen hun onderwijsproces op orde hebben. Opleidingen verbeteren zich vooral op de intake en plaatsing van studenten, maar ook op de studieloopbaanbegeleiding en de begeleiding bij de bpvplaats vanuit de opleiding én het didactisch handelen van de docenten wordt vaker voldoende beoordeeld. De inhoud van de opleiding wordt in 2014 in vergelijking met 2013 iets minder vaak met een voldoende beoordeeld Samenhang intake en plaatsing met opbrengsten De laatste drie jaren is het percentage opleidingen dat voldoet aan de eisen die gesteld worden aan intake en plaatsing gestegen. Verondersteld wordt dat opleidingen waarbij de intake en plaatsing voldoende is ook de opbrengsten vaker op orde zijn dan bij opleidingen waarbij de intake en plaatsing onvoldoende is. In onderstaande kruistabel worden de oordelen (voldoende/onvoldoende) op aspect intake en plaatsing gekruist met de oordelen op het kwaliteitsgebied opbrengsten. Pagina 13 van 57

14 Tabel 2.3.1a Oordelen intake & plaatsing gekruist met opbrengsten (in percentages, n=279) Kwaliteitsgebied opbrengsten Onvoldoende Voldoende Totaal Intake & plaatsing Onvoldoende 42,4 57,6 100,0 Voldoende 17,3 82,7 100,0 Totaal 20,2 79,8 100,0 Toelichting: bij ongeveer 80 procent van de opleidingen zijn de opbrengsten voldoende. Bij de meeste van deze opleidingen is de intake en plaatsing ook voldoende. Een correlatietoets wijst uit dat er inderdaad een significante (p<0.05) samenhang is tussen deze oordelen. Het verband is echter vrij licht (r.199). Dit betekent dat er naast intake en plaatsing ook andere factoren zijn die invloed hebben op de opbrengsten Samenhang differentiatie en benutting leertijd Bij opleidingen die voldoende differentiatie aanbieden mag verondersteld worden dat de benutting van de leertijd hoger ligt dan bij opleidingen die dat niet op orde hebben. Het programma sluit beter aan bij de leerbehoeften en capaciteiten van de studenten en geeft daardoor docenten de mogelijkheid om de leertijd beter te benutten. Tabel 2.3.2a Differentiatie gekruist met benutting leertijd (in percentages, n=287) Benutting leertijd Onvoldoende Voldoende Totaal Differentiatie Onvoldoende 21,4 78,6 100,0 Voldoende 9,9 90,1 100,0 Totaal 13,2 86,8 100,0 Toelichting: Een correlatietoets wijst uit dat er inderdaad een significante (p<0.05) samenhang is tussen deze oordelen. Het verband is echter vrij licht (r.155). Pagina 14 van 57

15 2.4 Kwaliteitsgebied 2: examinering en diplomering Tabel 2.4a Percentage opleidingen waar de examinering en diplomering voldoende is in 2012, 2013 en 2014 (n 2012=93, n 2013=95, n 2014=97, n Totaal=285 ) Jaar Totaal % % % % 2 Examinering en diplomering Exameninstrumentarium* , Onderscheid tussen ontwikkelgerichte toetsen en examinering Dekking van het kwalificatiedossier Cesuur Beoordelingswijze Transparantie , Afname en beoordeling* Authentieke afname Betrouwbaarheid Diplomering* Besluitvorming diplomering Verantwoordelijkheid examencommissie *kernaspecten Toelichting: het eindoordeel over de kwaliteit van de examinering en diplomering is de afgelopen 3 jaren niet verbeterd; nog steeds is dat bij de helft van de opleidingen onvoldoende. Wel zijn er op onderdelen van de examinering en diplomering verbeteringen zichtbaar. Steeds meer opleidingen hebben hun exameninstrumentarium op orde. In 2014 voldoen 9 van de 10 opleidingen aan de eisen die hieraan worden gesteld. Verbeteringen zijn vooral zichtbaar bij de dekking van het kwalificatiedossier, bij de beoordelingswijze en bij de transparantie. Bij de afname en beoordeling van de examens zagen we in 2013 een stijging t.o.v. 2012, maar deze stijging heeft zich in 2014 niet verder doorgezet. Toch is bij 8 op de 10 opleidingen dit onderdeel van de examinering en diplomering voldoende. Het percentage opleidingen met een voldoende op het aspect diplomering blijft nog steeds achter. Over de drie jaren bezien voldoet slechts 60 procent van de opleidingen aan de eisen die hieraan worden gesteld. De inspectie is bij veel opleidingen niet tevreden over de verantwoordelijkheid van de examencommissie. Pagina 15 van 57

16 2.4.1 Inkoop van examens Tabel 2.4.1a Scores op inkoop (n 2012 = 92, n 2013 = 89, n 2014 = 98) Totaal n % n % n % n % Inkoop volledig , Inkoop deels Eigen materiaal , Totaal Het gebruik van ingekochte examens is toegenomen (zie tabel 2.4a). In 2012 en 2013 werd er door respectievelijk 39 en 40 procent van de opleidingen gebruikt gemaakt van ingekochte examens, in 2014 is dit percentage gestegen naar 57 procent. Tabel 2.4.1b Percentage opleidingen dat als voldoende is beoordeeld op het aspect Exameninstrumentarium en onderliggende indicatoren, naar inkoop of eigen materiaal (n 2012=92, n 2013=89, n 2014=98) Inkoop Eigen Volledig Deels materiaal % n % n % n Examinering en diplomering Exameninstrumentarium* Onderscheid tussen ontwikkelgerichte toetsen en examinering Dekking van het kwalificatiedossier Cesuur Beoordelingswijze Examinering en diplomering Exameninstrumentarium* Onderscheid tussen ontwikkelgerichte toetsen en examinering Dekking van het kwalificatiedossier Cesuur Beoordelingswijze Examinering en diplomering Exameninstrumentarium* Onderscheid tussen ontwikkelgerichte toetsen en examinering Dekking van het kwalificatiedossier Cesuur Beoordelingswijze *Kernaspecten Toelichting: in de tabel is het eindoordeel op het kwaliteitsgebied examinering en diplomering opgenomen, evenals de beoordeling op aspect 2.1 en de onderliggende indicatoren. De oordelen zijn uitgesplitst naar kenmerken van de examens, namelijk volledige ingekocht examenmateriaal, deels ingekocht examenmateriaal en eigen ontwikkeld examenmateriaal. De uitkomsten laten zien dat het exameninstrumentarium van ingekochte examens vaker met een voldoende wordt beoordeeld dan wanneer de instelling eigen materiaal gebruikt. Dat geldt ook voor de beoordelingswijze (aspect 2.1.4). Ook voor een aantal andere indicatoren van 2.1 geldt dat het ingekochte materiaal vaker met een voldoende wordt beoordeeld dan eigen materiaal, maar niet in ieder steekproefjaar zijn de verschillen significant. Pagina 16 van 57

17 Het eindoordeel op de examinering en diplomering (in 2012 en 2013) wijst ook in de richting van een positievere beoordeling bij ingekochte examens, maar de verschillen zijn niet significant. Tabel 2.4.1c Percentage opleidingen dat als voldoende is beoordeeld op examinering, naar inkoop of eigen materiaal in 2012, 2013 en 2014 (n 2012 = 92, n 2013 = 89, n 2014 = 98) Inkoop Eigen Volledig Volledig materiaal % n % n % n Examinering en diplomering Exameninstrumentarium* Afname en beoordeling* Diplomering* Examinering en diplomering Exameninstrumentarium* Afname en beoordeling* Diplomering* Examinering en diplomering Exameninstrumentarium* Afname en beoordeling* Diplomering* *kernaspecten Toelichting: in alle drie de jaren is het exameninstrumentarium vaker voldoende van ingekocht materiaal, dan van eigen materiaal. Voor de andere aspecten geldt dat er geen significante verschillen zijn gevonden. 2.5 kwaliteitsgebied 3: opbrengsten Tabel 2.5a Percentage voldoende opleidingen op opbrengsten (n 2012=92, n 2013=91, n 2014=96, n Totaal=279 )* Jaar Totaal 3 Opbrengsten Rendement Jaarresultaat en/of diplomaresultaat *bij een aantal opleidingen zijn de opbrengsten niet beoordeeld. Toelichting: geen significante verschillen tussen de jaren. Over de drie jaren bezien heeft 80 procent van de opleidingen voldoende opbrengsten (zie hoofdstuk 6 voor uitgebreidere analyses van de opbrengsten op stelselniveau). Pagina 17 van 57

18 2.6 Kwaliteitsgebied 4: kwaliteitsborging op opleidingsniveau Tabel 2.6a Percentage opleidingen dat als voldoende is beoordeeld op kwaliteitsborging in 2012, 2013 en 2014 (n 2012=95, n 2013=95, n 2014=98) Jaar Totaal 4 Kwaliteitsborging , Sturing* , Plannen , Informatie , Continuïteit Beoordeling* , Monitoring , Evaluatie , Verbetering en verankering* , Verbeteraanpak Deskundigheidsbevordering Verankering , Dialoog en verantwoording Intern Extern Alle aspecten voldoende ,2 *kernaspecten. Toelichting: de kwaliteitsborging van opleidingen in 2014 is op een aantal aspecten verbeterd t.o.v. de voorgaande jaren. Steeds meer opleidingen slagen erin om het proces van kwaliteitsborging beter te sturen en hun kwaliteit beter te beoordelen. Ook is er een toename van het percentage opleidingen dat met een voldoende is beoordeeld op het aspect verbetering en verankering. Het percentage opleidingen met voldoende aandacht voor dialoog en verantwoording blijft stabiel: bij 9 van de 10 opleidingen is dit op orde. Echter, er zijn nog meer verbeteringen nodig. Nog steeds is bij de 40 procent van de opleidingen in 2014 de kwaliteitsborging onder de maat. Het pijnpunt ligt vooral bij de verankering. Pagina 18 van 57

19 2.7 Relaties tussen de kwaliteitsgebieden Om de relatie tussen kwaliteitsborging op opleidingsniveau en de oordelen op de aspecten en indicatoren van onderwijsproces en examinering en diplomering te bekijken, zijn de steekproeven van 2012, 2013 en 2014 samengenomen. Tabel 2.7a Percentage opleidingen waar het onderwijsproces voldoende is, naar (on)voldoende kwaliteitsborging in de periode (n=288) Onvoldoende Voldoende kwaliteitsborging kwaliteitsborging 1 Onderwijsproces Samenhang Inhoud Programmering Maatwerk Differentiatie Didactisch handelen* Interactie Ondersteuning en begeleiding van de leeractiviteiten Feedback op de leeractiviteiten en de leerresultaten Leertijd Benutting Werkdruk Leeromgeving Schoolklimaat Materiële voorzieningen Intake & plaatsing Voorlichting Intake en plaatsing Studieloopbaanbegeleiding* Informatievoorziening Studieloopbaanbegeleiding Zorg Eerste- en tweedelijnszorg Derdelijnszorg Beroepspraktijkvorming* Voorbereiding studenten en bedrijven Plaatsing Begeleiding door leerbedrijf Begeleiding door de opleiding * Kernaspecten Toelichting: opleidingen met een voldoende beoordeling op kwaliteitsborging hebben ook vaker hun onderwijsproces op orde. In vergelijking met opleidingen die onvoldoende zijn beoordeeld op kwaliteitsborging, scoren de opleidingen met voldoende kwaliteitsborging vaker voldoende op de aspecten samenhang, maatwerk, leertijd, intake en plaatsing, studieloopbaanbegeleiding en Zorg. Pagina 19 van 57

20 Tabel 2.7b Percentage opleidingen waar de examinering en diplomering voldoende is, naar (on)voldoende kwaliteitsborging in de periode (n=285) Onvoldoende kwaliteitsborging Voldoende kwaliteitsborging 2 Examinering en diplomering Exameninstrumentarium* Onderscheid tussen ontwikkelgerichte toetsen en examinering Dekking van het kwalificatiedossier Cesuur Beoordelingswijze Transparantie Afname en beoordeling* Authentieke afname Betrouwbaarheid Diplomering* Besluitvorming diplomering Verantwoordelijkheid examencommissie * kernaspecten Toelichting: opleidingen met voldoende kwaliteitsborging scoren ook vaker voldoende op het kwaliteitsgebied examinering en diplomering als geheel en op alle onderliggende aspecten. Met name de verantwoordelijkheid van de examencommissie is vaker met een voldoende beoordeeld. 2.8 Kwaliteitsgebied 5: naleving wettelijke vereisten Tabel 2.8a Percentage opleidingen waar de naleving wettelijke vereisten voldoende is, in 2012, 2013 en 2014 (n 2012=95, n 2013=95, n 2014=98, n Totaal=288) Jaar Totaal 5 Naleving wettelijke vereisten Naleving wettelijke vereisten Naleving wettelijke vereisten Toelichting: er lijkt een opwaartse trend te zijn in het percentage opleidingen dat voldoet aan de wettelijke vereisten, maar de verschillen tussen de jaren zijn niet significant. Over drie jaren bezien voldoen ongeveer 4 op de 5 opleidingen aan de wettelijke vereisten. 2.9 Scores op de taalexamens Let op: de categorie n.v.t. is niet opgenomen in de tabellen. Alleen de beoordelingen voldoende en onvoldoende (bij nlref deels ) zijn weergegeven in de tabellen. Er is gebruik gemaakt van ongewogen scores, omdat er relatief vaak n.v.t. is gescoord. De opleidingen die wel op dit punt beoordeeld konden worden, zijn slechts een deel van de steekproef. De overgebleven groep kan niet als representatief voor de populatie worden beschouwd. Tabel 2.9a Beoordeling van het taalexamen van een moderne vreemde taal in aantallen en percentages (n 2012=54, n 2013=52, n 2014=55 n Totaal=161) Totaal n % n % n % n % Voldoende Onvoldoende Totaal Pagina 20 van 57

21 Tabel 2.9b Beoordeling van het taalexamen van Nederlands op refniveau in aantallen en percentages (n 2012=48, n 2013=72 n 2014=89, n Totaal=209) Totaal n % n % n % n % Voldoende onvoldoende Deels Totaal % Tabel 2.9c Beoordeling van het taalexamen van Nederlands op CEF-niveau in aantallen en percentages (n 2012=40, n 2013=23, n 2014=26, n Totaal=89) Totaal n % n % n % n % Voldoende Onvoldoende Totaal Vervolgtoezicht en tekortkomingen Tabel 2.10a Vervolgtoezicht en tekortkomingen bekostigde mbo-opleidingen in 2012, 2013 en 2014 (in percentages, n 2012=95, n 2013=95, n 2014=98, n Totaal=288) Zwak onderwijs ,2 Zeer zwak onderwijs Onvoldoende opbrengsten Onvoldoende examenkwaliteit Onvoldoende kwaliteitsborging ,2 Niet-naleving: andere wettelijke vereisten Toelichting: indien er uit het steekproefonderzoek naar voren is gekomen dat er tekortkomingen zijn in de kwaliteit van opleidingen, vindt er vervolgtoezicht plaats. Het percentage opleidingen met vervolgtoezicht vanwege onvoldoende kwaliteitsborging is in 2014 gedaald ten opzichte van de twee voorgaande jaren. Maar nog steeds voldoen bijna de helft van de opleidingen niet aan de eisen die worden gesteld aan kwaliteitsborging. Ook bij bijna de helft van de opleidingen vindt vervolgtoezicht plaats naar aanleiding van tekortkomingen in de examenkwaliteit. Het aantal opleidingen dat heronderzocht moet worden i.v.m. onvoldoende opbrengsten lijkt af te nemen, maar de daling is nog niet significant. Wel is er een afname zichtbaar van opleidingen waarbij het onderwijsproces zwak is. In 2014 is bij 3 procent van de opleidingen vastgesteld dat niet alleen de opbrengsten onvoldoende zijn, maar dat ook het onderwijsproces zwak is: dit zijn de zeer zwakke opleidingen. Tabel 2.10b Patronen in vervolgtoezicht en tekortkomingen mbo-opleidingen (exclusief wettelijke vereisten) (n Totaal=288) Percentage Zeer zwak onderwijs 0 Zeer zwak onderwijs + onvoldoende kwaliteitsborging 1 Zwak onderwijs 1 Onvoldoende opbrengsten 2 Onvoldoende opbrengsten + onvoldoende examenkwaliteit 2 Zeer zwak onderwijs + onvoldoende examenkwaliteit + onvoldoende kwaliteitsborging 3 Zwak onderwijs + onvoldoende kwaliteitsborging 4 Pagina 21 van 57

22 Onvoldoende opbrengsten + onvoldoende examenkwaliteit + onvoldoende kwaliteitsborging 5 Onvoldoende opbrengsten + onvoldoende kwaliteitsborging 6 Zwak onderwijs + onvoldoende examenkwaliteit + onvoldoende kwaliteitsborging 6 Onvoldoende examenkwaliteit 8 Onvoldoende kwaliteitsborging 15 Geen arrangementen 22 Onvoldoende examenkwaliteit + onvoldoende kwaliteitsborging 24 Totaal 100 Toelichting: uit een onderzoek kan naar voren komen dat een opleiding tekortkomingen vertoond op meerdere kwaliteitsgebieden. In de bovenstaande tabel is aangegeven welke combinaties van tekortkomingen zijn voorkomen in de 288 opleidingen die zijn onderzocht in 2012, 2013 en Bij bijna een kwart van de opleidingen is vastgesteld dat zowel de examenkwaliteit als de kwaliteitsborging onvoldoende is. Bij meer dan een vijfde van de opleidingen zijn geen tekortkomingen geconstateerd. Bij zeer zwakke opleidingen blijkt ook altijd een ander kwaliteitsgebied onvoldoende te zijn. Pagina 22 van 57

23 3 Scores Staat van de Instelling niet-bekostigd middelbaar beroepsonderwijs 2012 en 2013 In dit hoofdstuk wordt een overzicht gegeven van de scores op instellings- en opleidingsniveau op basis van de Staat van de Instelling (SVI) 2014 van bekostigde instellingen. In de onderstaande tabellen staan de scores op instellings- en opleidingsniveau op basis van de Staat van de Instelling (SVI) in 2012, 2013 en 2014 tezamen. Er wordt geen onderscheid naar jaren gemaakt, omdat in de drie jaren geen sprake is van een representatieve steekproef. In 2012 zijn er 26 niet-bekostigde instellingen en 41 opleidingen onderzocht. In 2013 zijn er 50 opleidingen van 31 niet-bekostigde instellingen onderzocht en in 2014 zijn er 21 instellingen en 34 opleidingen onderzocht. In totaal kan er een beeld gegeven worden van 78 instellingen en 125 opleidingen. Binnen de groep niet-bekostigde instellingen is een tweedeling zichtbaar. Enerzijds bestaan er instellingen die hoofzakelijk onderwijs verzorgen voor jongeren onder de 23 jaar (dagonderwijs). Dit zijn veelal bol-opleidingen. De andere groep instellingen verzorgt voornamelijk bbl-opleidingen voor deelnemers van 23 jaar en ouder of afstandsonderwijs aan bol-studenten die ouder zijn dan 23 jaar. Opleidingen van nbi s worden niet altijd beoordeeld met het gehele kader. Het komt voor dat de opbrengsten en de examinering niet zijn beoordeeld, omdat de opleiding nog te kort bestaat om hierover een oordeel te geven. Voor opleidingen die onderwijs aanbieden in de derde leerweg (ovo) geldt dat zowel de opbrengsten als het onderwijsproces niet worden beoordeeld. De nadruk ligt daar op de kwaliteitsborging en de examinering. De aantallen die bij de tabellen zijn genoemd kunnen daardoor variëren. 3.1 Kwaliteitsborging op instellingsniveau Hieronder worden de scores op de kwaliteitsborging op instellingsniveau weergegeven in aantallen. Tabel 3.1a Beoordeling kwaliteitsborging bij niet-bekostigde instelling naar type onderwijs in de periode (in aantallen, n=78) Deelnemers jonger dan 23 jaar Deelnemers van 23 jaar en ouder Totaal instellingen Goed Voldoende Onvoldoende Slecht Totaal Toelichting: er zijn 33 instellingen die dagonderwijs aanbieden en 45 instellingen die geen dagonderwijs aanbieden. Bij de helft van de instellingen die tussen 2012 en 2014 zijn onderzocht, is de kwaliteitsborging op instellingsniveau niet op orde. Bij instellingen die zich richten op deelnemers onder de 23 jaar voldoet de kwaliteitsborging bij circa 60 procent van de onderzochte instellingen. De 23- plusinstellingen blijven daar met 44 procent voldoende borging bij achter. Pagina 23 van 57

24 Scores op de aspecten en indicatoren van kwaliteitsborging op instellingsniveau Voor de onderstaande tabel zijn de oordelen gehercodeerd naar voldoende (goed + voldoende) en onvoldoende (onvoldoende + slecht). Tabel 3.1b Aantal niet-bekostigde instellingen dat als voldoende is beoordeeld op aspecten en indicatoren van kwaliteitsborging naar type onderwijs in de periode (n=78) Deelnemers jonger dan 23 jaar Deelnemers van 23 jaar en ouder Totaal instellingen N=33 N=45 N=78 4. Kwaliteitsgebied: kwaliteitsborging Sturing * Plannen Informatie Continuïteit Beoordeling * Monitoring Evaluatie Verbetering en verankering * Verbeteraanpak Deskundigheidsbevordering Verankering Dialoog en verantwoording Intern Extern *Kernaspecten Toelichting: instellingen die dagonderwijs aanbieden voldoen vaker aan de eisen die gesteld worden aan de verbetering en verankering van de kwaliteitsborging dan instellingen die geen dagonderwijs aanbieden. Pagina 24 van 57

25 3.2 Scores op de vijf kwaliteitsgebieden op opleidingsniveau Tabel 3.2a Scores op de kwaliteitsgebieden in percentages naar type onderwijs in de periode (n=125) Deelnemers jonger dan 23 jaar Type onderwijs Deelnemers van 23 jaar en ouder % % 1 Onderwijsproces Goed 26 7 Voldoende Onvoldoende Slecht Examinering en diplomering* Goed 18 4 Voldoende Onvoldoende Slecht Opbrengsten** Goed 9 0 Voldoende Onvoldoende Slecht Kwaliteitsborging Goed 12 7 Voldoende Onvoldoende Slecht Naleving wettelijke vereisten Voldoet Voldoet niet *het kwaliteitsgebied examinering en diplomering is beoordeeld bij 105 van de 125 opleidingen ** het kwaliteitsgebied opbrengsten is beoordeeld bij 42 van de 125 opleidingen Toelichting: opleidingen van instellingen die niet gericht zijn op dagonderwijs worden minder goed beoordeeld dan opleidingen van instellingen die daar wel op gericht zijn. In de onderstaande analyses worden de scores ingedeeld in voldoende/onvoldoende. Daar zijn de verschillen getoetst op significantie. Voor de onderstaande tabel zijn de oordelen gehercodeerd naar voldoende (goed + voldoende) en onvoldoende (onvoldoende + slecht). Pagina 25 van 57

26 Tabel 3.2b Percentage opleidingen dat als voldoende is beoordeeld op de vijf kwaliteitsgebieden naar type onderwijs in de periode (n=125) Type onderwijs Deelnemers jonger dan 23 jaar Deelnemers van 23 jaar en ouder Totaal opleidingen % % % 1 Onderwijsproces Examinering en diplomering* Opbrengsten** Kwaliteitsborging Naleving wettelijke vereisten *het kwaliteitsgebied examinering en diplomering is beoordeeld bij 105 van de 125 opleidingen ** het kwaliteitsgebied opbrengsten is beoordeeld bij 42 van de 125 opleidingen Toelichting: Opleidingen van instellingen die dagonderwijs verzorgen hebben vaker hun onderwijsproces en kwaliteitsborging op orde dan opleidingen van instellingen die niet gericht zijn op dagonderwijs. Ook bij de andere kwaliteitsgebieden zien we dat dagonderwijs een voorsprong heeft op niet-dagonderwijs, maar die verschillen zijn niet significant. De verschillen in opbrengsten zijn hier niet significant, hetgeen te maken heeft met de kleine aantallen (n= 42). In de opbrengstanalyses (H7) zien we wel dat studenten die dagonderwijs hebben gevolgd vaker een diploma behalen dan studenten die geen dagonderwijs hebben gevolgd. Pagina 26 van 57

27 3.3 Kwaliteitsgebied 1: onderwijsproces Tabel 3.3a Percentage opleidingen dat als voldoende is beoordeeld op het onderwijsproces naar type onderwijs in de periode (n = 117) Type onderwijs Deelnemers jonger dan 23 jaar Deelnemers van 23 jaar en ouder Totaal opleidingen percentage percentage percentage 1 Onderwijsproces Samenhang Inhoud Programmering Maatwerk Differentiatie Didactisch handelen* Interactie Ondersteuning en begeleiding van de leeractiviteiten Feedback op de leeractiviteiten en de leerresultaten Leertijd Benutting Werkdruk Leeromgeving Schoolklimaat Materiële voorzieningen Intake & plaatsing Voorlichting Intake en plaatsing Studieloopbaanbegeleiding* Informatievoorziening Studieloopbaanbegeleiding Zorg Eerste- en tweedelijnszorg Derdelijnszorg Beroepspraktijkvorming* Voorbereiding studenten en bedrijven Plaatsing Begeleiding door leerbedrijf Begeleiding door de opleiding *kernaspecten * ovo-opleidingen worden niet beoordeeld op dit gebied. Toelichting: opleidingen van instellingen die dagonderwijs aanbieden hebben vaker het onderwijsproces op orde dan opleidingen van instellingen die daar niet opgericht zijn. Deze opleidingen voldoen vaker aan de eisen die gesteld worden aan: - maatwerk; - leertijd; - intake en plaatsing; - studieloopbaanbegeleiding. Het schoolklimaat is vaker met een voldoende beoordeeld bij opleidingen die geen dagonderwijs aanbieden. Pagina 27 van 57

28 3.4 Kwaliteitsgebied 2: examinering en diplomering Tabel 3.4a Percentage opleidingen dat als voldoende is beoordeeld op examinering en diplomering in de periode (n=105) Type onderwijs Deelnemers jonger dan 23 jaar Deelnemers van 23 jaar en ouder Totaal opleidingen 2 Examinering en diplomering Exameninstrumentarium* Onderscheid tussen ontwikkelgerichte toetsen en examinering Dekking van het kwalificatiedossier Cesuur Beoordelingswijze Transparantie Afname en beoordeling* Authentieke afname Betrouwbaarheid Diplomering* Besluitvorming diplomering Verantwoordelijkheid examencommissie *kernaspecten Toelichting: opleidingen van instellingen die gericht zijn op dagonderwijs hebben de afname en beoordeling van de examinering vaker op orde dan opleidingen van instellingen die niet gericht zijn op dagonderwijs. Ook de betrouwbaarheid van de afname en beoordeling is beter georganiseerd bij deze opleidingen. Tabel 3.4b Scores op inkoop naar type onderwijs in de periode (n=105) Type onderwijs Deelnemers jonger dan 23 jaar Deelnemers van 23 jaar en ouder n % n % Volledig Deels N.v.t Totaal Toelichting: Er bestaan geen verschillen naar type onderwijs. Ongeveer de helft van de opleidingen gebruikt eigen examenmateriaal. De andere helft maakt gebruik van volledig of deels ingekocht examenmateriaal. Tabel 3.4c Percentage opleidingen dat als voldoende is beoordeeld op examinering en diplomaring, naar inkoop of eigen materiaal in de periode (n=105) Inkoop Inkoop Eigen materiaal % n % n 2 Examinering en diplomering Exameninstrumentarium* Afname en beoordeling* Diplomering* *kernaspecten Toelichting: net als bij bekostigde instellingen geldt ook voor de niet-bekostigde instellingen dat het exameninstrumentarium van ingekocht materiaal vaker met een Pagina 28 van 57

29 voldoende is beoordeeld dan bij eigen ontwikkeld examenmateriaal. Er bestaan geen significante verschillen in de afname en beoordeling en diplomering. 3.5 Kwaliteitsgebied 3: opbrengsten De opbrengsten zijn slechts beoordeeld bij 42 van de 125 opleidingen. Zie hoofdstuk 7 voor een uitgebreide opbrengstanalyse van de nbi s. Zie tabel 3.2b voor de uitkomsten van de SVI van dit kwaliteitsgebied. 3.6 Kwaliteitsgebied 4: kwaliteitsborging op opleidingsniveau Tabel 3.6a Percentage opleidingen dat als voldoende is beoordeeld op aspecten en indicatoren van kwaliteitsborging naar type onderwijs in de periode (n =124) Type onderwijs Deelnemers jonger dan 23 jaar Deelnemers van 23 jaar en ouder Totaal opleidingen % % % 4 Kwaliteitsborging Sturing * Plannen Informatie Continuïteit Beoordeling * Monitoring Evaluatie Verbetering en verankering * Verbeteraanpak Deskundigheidsbevordering Verankering Dialoog en verantwoording Intern Extern *kernaspecten Toelichting: opleidingen van instellingen die gericht zijn op dagonderwijs hebben vaker hun kwaliteitsborging op orde dan opleidingen van instellingen die daar niet op gericht zijn. Het verschil heeft betrekking op verbetering en verankering. 3.7 Kwaliteitsgebied 5: naleving van wettelijke vereisten Zie tabel 3.2b. 3.8 Scores op de taalexamens Tabel 3.8a Beoordeling van het taalexamen van een moderne vreemde taal in aantallen en percentages periode (n=42) n percentage Voldoende Onvoldoende Totaal Pagina 29 van 57

30 Tabel 3.8b Beoordeling van het taalexamen van Nederlands op refniveau in aantallen en percentages periode (n =73) n percentage Voldoende Onvoldoende Deels Totaal Vervolgtoezicht en tekortkomingen Tabel 3.9a Vervolgtoezicht en tekortkomingen niet-bekostigde mbo-opleidingen in aantallen en percentages (n=125) Type onderwijs Deelnemers jonger dan 23 jaar Deelnemers van 23 jaar en ouder percentage percentage Zwak onderwijs 5 4 Zeer zwak onderwijs Onvoldoende opbrengsten 5 15 Onvoldoende examenkwaliteit Onvoldoende kwaliteitsborging Niet-naleving: andere wettelijke vereisten *zeer zwak en onvoldoende opbrengsten (op basis van 42 opleidingen): vanwege kleine aantallen is het verschil niet significant. ** onvoldoende examenkwaliteit (op basis van 105 opleidingen) Toelichting: opleidingen van instellingen die niet gericht zijn op dagonderwijs krijgen vaker vervolgtoezicht vanwege onvoldoende kwaliteitsborging dan opleidingen van instellingen die daar wel op gericht zijn. Ook bij de andere tekortkomingen zijn er verschillen zichtbaar naar type onderwijs, maar vanwege de variëteit in aantallen zijn de verschillen niet significant. Pagina 30 van 57

31 4 Verslagen van werkzaamheden niet-bekostigde instellingen De verslagen van werkzaamheden (vvw) van de niet-bekostigde instellingen (nbi s) waarbij er in 2013 en in 2014 een onderzoek in het kader van de Staat van de Instelling (SVI) heeft plaatsgevonden, zijn beoordeeld met behulp van een vragenlijst door inspecteurs/analisten. Hieronder volgen de resultaten. Tabel 4a Informatie over de omvang van de instellingen (n=55) 1. Bevat het verslag informatie over de omvang van de instelling? n percentage Nee Ja 6 11 Toelichting: slechts weinig instellingen rapporteren in het verslag van werkzaamheden over de omvang van de instelling. Tabel 4b Informatie over aantal onderwerpen (n = 55) 2. Bevat het verslag informatie over de volgende onderwerpen? n percentage Aantal vsv ers Ja Nee Rendementen van Ja opleidingen Nee De afhandeling van klachten Ja Nee 6 11 Toelichting: in het merendeel van de verslagen is wel informatie opgenomen over de rendementen van opleidingen en de afhandeling van klachten, echter weinig instellingen besteden aandacht aan het aantal vsv ers. Een van de redenen hiervoor is dat er nbi s zijn die alleen onderwijs verzorgen aan volwassenen die niet binnen de definitie van vsv er vallen. Tabel 4c Beoordeling van onderwijskwaliteit (n = 55) 3. Bevat het verslag een beoordeling van de onderwijskwaliteit? n percentage Ja Nee Toelichting: in iets minder dan de helft van de verslagen wordt een beoordeling gegeven van de onderwijskwaliteit. Tabel 4d Beoordeling met onafhankelijke deskundigen (n=26) 4. Vindt de beoordeling plaats met inzet van onafhankelijke deskundigen? n percentage Ja 5 19 Nee Onbekend 4 15 Pagina 31 van 57

32 Toelichting: bij 26 instellingen is in het verslag wel informatie te vinden over een beoordeling van de onderwijskwaliteit. Bij slechts vijf van deze instellingen wordt gerapporteerd over de inzet van onafhankelijke deskundigen hierbij. Veel instellingen beoordelen zelf hun onderwijskwaliteit. Tabel 4e Voorgenomen beleid/verbetermaatregelen (n=26) 5. Bevat het verslag verbetermaatregelen/voorgenomen beleid op basis van de uitkomsten van de beoordeling? N Percentage Ja Nee 2 8 N.v.t 4 15 Toelichting: 20 van de 26 instellingen hebben in hun verslag informatie opgenomen over voorgenomen beleid of verbetermaatregelen naar aanleiding van de beoordeling van hun onderwijskwaliteit. Tabel 4f Beoordeling van examenkwaliteit (n=55) 6. Bevat het verslag een beoordeling van de examenkwaliteit? N Percentage Ja Nee Toelichting: bij een derde van de instellingen wordt in het verslag van werkzaamheden aandacht besteed aan de beoordeling van de examenkwaliteit. Tabel 4h Beoordeling met onafhankelijke deskundigen (n=19) 7. Vindt de beoordeling plaats met inzet van onafhankelijke deskundigen? N Percentage Ja 5 26 Nee Onbekend 4 21 Toelichting: een kwart van de instellingen (n=5) die in hun jaarverslag aandacht besteden aan een beoordeling van de examenkwaliteit, geeft aan hiervoor gebruik te maken van onafhankelijke deskundigen. De meeste instellingen beoordelen dus zelf hun examenkwaliteit. Tabel 4i Voorgenomen beleid/verbetermaatregelen (n=19) 8. Bevat het verslag verbetermaatregelen/voorgenomen beleid op basis van de uitkomsten van de beoordeling? N Percentage Ja Nee 2 11 N.v.t 3 16 Toelichting: van de 19 instellingen die in hun jaarverslag aandacht besteden aan een beoordeling van de examenkwaliteit, geven 14 aan dat ze op basis daarvan verbetermaatregelen hebben geformuleerd en/of beleid hebben gemaakt. Pagina 32 van 57