ROC Eindhoven HERONDERZOEK KWALITEIT EXAMINERING 2007-2008 Amersfoort, juni 2008
Heronderzoek examinering ROC Eindhoven 2007-2008 p.2 van 17
VASTSTELLING RAPPORT Dit rapport bevat de resultaten van het heronderzoek naar de kwaliteit van de examinering dat op 22 april 2008 plaatsvond bij het ROC Eindhoven. Het rapport is vastgesteld op 24 juni 2008. Reproductie van het rapport zonder toestemming van de inspectie of de school vindt niet plaats anders dan in zijn volledige vorm. Heronderzoek examinering ROC Eindhoven 2007-2008 p.3 van 17
Heronderzoek examinering ROC Eindhoven 2007-2008 p.4 van 17
INHOUDSOPGAVE SAMENVATTING 7 1 INLEIDING 9 2 KWALITEIT EXAMINERING BIJ ELEKTROTECHNIEK EN INSTALLATIETECHNIEK, WERKTUIGBOUW EN METAAL 11 3 CONCLUSIES 15 BIJLAGE 1: STANDAARDEN EN NORMERING 17 Heronderzoek examinering ROC Eindhoven 2007-2008 p.5 van 17
Heronderzoek examinering ROC Eindhoven 2007-2008 p.6 van 17
SAMENVATTING Dit rapport bevat de resultaten van het heronderzoek naar de kwaliteit van de examinering van een opleiding waarvan eerder was vastgesteld, dat deze onvoldoende was. Tijdens het heronderzoek bij het ROC Eindhoven waren het beoordelingskader en de normering van het Toezichtkader 2007-2008 van toepassing. Het heronderzoek naar de kwaliteit van de examens vond plaats bij de School voor Elektrotechniek en Installatietechniek, Werktuigbouw en Metaal, locatie Frederiklaan 60a te Eindhoven, op 22 april 2008. De examinering van de volgende opleiding is van voldoende kwaliteit: Monteur sterkstroominstallaties (10261) BBL Bij deze opleiding vindt geen nader onderzoek plaats. De opleiding kan overigens op grond van de aselecte steekproeftrekking opnieuw onderzocht worden. Heronderzoek examinering ROC Eindhoven 2007-2008 p.7 van 17
Heronderzoek examinering ROC Eindhoven 2007-2008 p.8 van 17
1 INLEIDING De inspectie van het onderwijs voert onderzoek uit naar de kwaliteit van de examinering 2007-2008. Hierbij is sprake van de onderstaande onderzoeken met separate rapporten. a. Het heronderzoek bij de categorie van 285 opleidingen: waarvan de examenkwaliteit 2005-2006 als onvoldoende is beoordeeld door het Kwaliteitscentrum examinering (KCE); en waarvoor de staatssecretaris een voorgenomen besluit of verlengde verbetertijd heeft gegeven vanwege de onvoldoende examenkwaliteit 2005-2006; en waarvan de examenkwaliteit 2006-2007 door de inspectie als onvoldoende is beoordeeld. b. Het onderzoek bij de categorie opleidingen: waarvan de examenkwaliteit 2005-2006 als onvoldoende is beoordeeld door het Kwaliteitscentrum examinering (KCE); en waarvoor de staatssecretaris een waarschuwing heeft gegeven vanwege de onvoldoende examenkwaliteit 2005-2006. Op grond van de brief van de staatssecretaris d.d. 6 september 2007 is van deze categorie opleidingen het eerdere onderzoek naar de examinering 2006-2007 stopgezet en heeft de inspectie geen herbeoordeling van de examenkwaliteit 2006-2007 uitgevoerd. Bij deze opleidingen heeft de inspectie thans een onderzoek naar de examenkwaliteit 2007-2008 uitgevoerd. Dit betreft een nulmeting. c. Het onderzoek bij een aselecte steekproef van overige opleidingen. Dit betreft een nulmeting. Van resultaten van dit onderzoek ontvangt de instelling een separaat rapport. Dit rapport heeft uitsluitend betrekking op de onder ad a. genoemde categorie opleidingen. Het heronderzoek naar de kwaliteit van examinering 2007-2008 van deze opleidingen is uitgevoerd in de periode april en mei 2008. In dit heronderzoek betreft dit de opleiding: Crebo Naam opleiding Leerweg Deelkwalificatie(s) Exameneenheid en locatie 10261 Monteur Sterkstroominstallaties (MSI) BBL Eigen product: 50910, 50943, 50944 Elektrotechniek en Installatietechniek, Werktuigbouw en Metaal Tijdens dit onderzoek waren de standaarden en de normering van het Toezichtkader examinering BVE 2007-2008 van toepassing. Heronderzoek examinering ROC Eindhoven 2007-2008 p.9 van 17
Opzet heronderzoek Uitgangspunt voor het heronderzoek was de informatie van de instelling over de examenkwaliteit van de te onderzoeken opleiding. Het onderzoek concentreerde zich op de onderdelen die eerder onvoldoende waren. Er vonden gesprekken plaats met constructeurs, vaststellers, vertegenwoordigers uit de examencommissies en het management. Tijdens deze gesprekken werden de voorlopige resultaten uit het onderzoek naar het exameninstrumentarium doorgenomen en werd relevante documentatie onderzocht. Ter afsluiting vond een gesprek plaats met het college van bestuur. Heronderzoek examinering ROC Eindhoven 2007-2008 p.10 van 17
2 KWALITEIT EXAMINERING BIJ ELEKTROTECHNIEK EN INSTALLATIETECHNIEK, WERKTUIGBOUW EN METAAL 2.1. Beoordeling opleiding bij Elektrotechniek en Installatietechniek, Werktuigbouw en Metaal Standaard 1 Vertrouwen beroepenveld 2 Tevredenheid deelnemer 3 Deskundigheid betrokkenen 4 Instrumentarium: uitstroomeisen 5 Instrumentarium: toetstechnisch 6 Transparantie processen 7 Borging processen 8 Wettelijke vereisten Monteur sterkstroominstallaties (MSI) V V V V V V V V 10261 BBL O = onvoldoende/ V = voldoende/ G = goed 2.2 Beschouwing Algemeen beeld De examinering van de opleiding Monteur sterkstroominstallaties is van voldoende kwaliteit. Voor deze opleiding geldt dat betrokkenen bij de examinering voldoende deskundig zijn. Het exameninstrumentarium voldoet aan de uitstroomeisen en aan de toetstechnische eisen. De examinering is transparant en geborgd. De overige kwaliteitsaspecten voldeden in januari 2008 al en komen in de verdere toelichting niet aan de orde. Heronderzoek examinering ROC Eindhoven 2007-2008 p.11 van 17
Toelichting beoordeling exameninstrumentarium Beoordeling exameninstrumentarium Monteur sterkstroominstallaties (MSI) 10261 Standaard 4. Het exameninstrumentarium voldoet inhoudelijk aan de uitstroomeisen 5. Het exameninstrumentarium voldoet aan toetstechnische kwaliteitseisen 50910 Veilig werken en meten in de elektrotechniek 50943 Installeren kabelinstallaties woningbouw en utiliteit 50944 Installeren buisinstallaties woningbouw en utiliteit O = onvoldoende/ V = voldoende/ G = goed G V G V V G Het exameninstrumentarium voldoet aan de uitstroomeisen en aan de toetstechnische eisen. De examenopgaven en examenopdrachten passen inhoudelijk en qua niveau goed tot voldoende bij de eindtermen. Voor de deelkwalificatie Veilig werken en meten in de elektrotechniek kan de afstemming van de inhoud op eindterm drie nog worden verbeterd. Voor de deelkwalificatie Installeren kabelinstallaties woningbouw en utiliteit kunnen de eindtermen 5, 8, 9, 12 en 13 meer expliciet in de opdrachten worden opgenomen. Het exameninstrumentarium voldoet aan de toetstechnische kwaliteitseisen. De informatie aan deelnemers over beoordelingscriteria en deelscores vormen bij enkele deelkwalificaties een aandachtspunt. Toelichting beoordeling examineringsprocessen De deskundigheid van de betrokkenen bij examinering is voldoende. De vereiste criteria voor de deskundigheid van de betrokkenen bij examinering zijn geformuleerd in het handboek examinering. Door middel van inventarisatie in de teams is de aanwezige deskundigheid van betrokkenen in kaart gebracht en vastgesteld. De transparantie en borging van de examineringsprocessen zijn voldoende. In het handboek voor examinering zijn de procedures en beschrijvingen van taken en verantwoordelijkheden van betrokkenen helder weergegeven. Voor deze Heronderzoek examinering ROC Eindhoven 2007-2008 p.12 van 17
opleiding is gekozen voor een examenmodel bestaande uit een examen-mix van theorie- en praktijkopdrachten uitgevoerd op school en een proeve van bekwaamheid in de beroepspraktijk. Door middel van evaluaties van de toetsperiodes heeft de examencommissie zicht op de uitvoering van de examinering. Daarnaast wordt door steekproefsgewijze aanwezigheid van bpvdocenten tijdens de proeve van bekwaamheid en een eindgesprek de examinering in de beroepspraktijk geborgd. Heronderzoek examinering ROC Eindhoven 2007-2008 p.13 van 17
Heronderzoek examinering ROC Eindhoven 2007-2008 p.14 van 17
3 CONCLUSIES De examinering van de volgende opleiding is van voldoende kwaliteit: Monteur sterkstroominstallaties (10261) BBL Bij deze opleiding vindt geen nader onderzoek plaats. De opleiding kan overigens op grond van de aselecte steekproeftrekking opnieuw onderzocht worden. Heronderzoek examinering ROC Eindhoven 2007-2008 p.15 van 17
Heronderzoek examinering ROC Eindhoven 2007-2008 p.16 van 17
BIJLAGE 1: STANDAARDEN EN NORMERING De standaarden en normering zijn opgenomen in de Regeling standaarden examens beroepsonderwijs 2007-2008, gepubliceerd in de staatscourant 29 april 2008. DOMEIN A: VALIDERING DOOR BELANGHEBBENDEN Standaard 1: Het beroepenveld heeft vertrouwen in de kwaliteit van de examinering. Standaard 2: De deelnemer is tevreden over de kwaliteit van de examinering. DOMEIN B: DESKUNDIGHEID VAN BETROKKENEN Standaard 3: De betrokkenen bij examinering zijn deskundig. DOMEIN C: EXAMENINSTRUMENTARIUM Standaard 4: Het exameninstrumentarium voldoet inhoudelijk aan de uitstroomeisen. Standaard 5: Het exameninstrumentarium voldoet aan toetstechnische kwaliteitseisen. DOMEIN D: PROCESSEN Standaard 6: De examineringsprocessen zijn transparant. Standaard 7: De examineringsprocessen zijn geborgd. DOMEIN E: WETTELIJKE VEREISTEN Standaard 8: De instelling voldoet aan de wettelijke vereisten rondom examinering. De kwaliteit van de examinering is voldoende, wanneer zes van de acht standaarden minimaal voldoende zijn, waaronder in elk geval standaarden 4, 5 en 8. Voor een toelichting op de standaarden en de normering, zie het document Toezichtkader examinering 2007-2008 (te vinden op www.onderwijsinspectie.nl) Heronderzoek examinering ROC Eindhoven 2007-2008 p.17 van 17