ONDERZOEK NAAR KWALITEITSVERBETERING MBO OP OPLEIDINGSNIVEAU Graafschap College te Doetinchem Medewerker marketing en communicatie (Medewerker marketing en communicatie) Medewerker marketing en communicatie (Marketing medewerker) Maatschappelijke zorg (Persoonlijk begeleider gehandicaptenzorg) BRIN: 24ZZ Onderzoeksnummer: 285532 Onderzoek uitgevoerd: 1 december 2015 Conceptrapport verzonden op: 1 februari 2016 Rapport vastgesteld te Utrecht op: 25 februari 2016 4255204/7
INHOUD 1 Inleiding... 1 2 Conclusie en vervolg... 2 2.1 Conclusie... 2 2.2 Vervolg... 2 3.1 Medewerker marketing en communicatie... 3 Bijlage... 6 Bijlage I Normering kwaliteitsgebied... 6
1 Inleiding In dit rapport staan de uitkomsten van twee onderzoeken naar kwaliteitsverbetering, die de Inspectie van het Onderwijs op 1 december 2015 heeft uitgevoerd bij het Graafschap College. De inspectie baseert zich op het Toezichtkader bve 2012 en het Addendum 2015 (zie www.onderwijsinspectie.nl). Aanleiding onderzoeken naar kwaliteitsverbetering De aanleiding voor de onderzoeken naar kwaliteitsverbetering is het vervolgtoezicht, zoals is opgenomen in het rapport van de Staat van de instelling (vastgesteld op 24 juni 2014). We hebben een onderzoek naar kwaliteitsverbetering uitgevoerd bij de volgende opleidingen. Gebied Examinering en diplomering 24ZZ 90530 Medewerker marketing en communicatie (Medewerker marketing en communicatie) 24ZZ 90532 Medewerker marketing en communicatie (Marketing medewerker) 92661 Maatschappelijke Zorg (Persoonlijk begeleider gehandicaptenzorg) Leerweg, niveau, locatie leerweg bol, niveau 4, locatie Ruimzichtlaan 155 te Doetinchem leerweg bbl, niveau 4, locatie Dr. Bardetplaats 7 te Doetinchem Medewerker marketing en communicatie (Medewerker marketing en communicatie), 90530 Medewerker marketing en communicatie (Marketing medewerker), 90532 We hebben de examinering en diplomering onderzocht, omdat tijdens de Staat van de instelling in februari en maart 2014 is geconstateerd dat er sprake was van onvoldoende examenkwaliteit. Maatschappelijke Zorg (Persoonlijk begeleider gehandicaptenzorg), 92661 We hebben de examinering en diplomering onderzocht, omdat tijdens de Staat van de instelling in februari en maart 2014 is geconstateerd dat er sprake was van onvoldoende examenkwaliteit. Om ons een beeld te vormen van de kwaliteitsverbeteringen hebben we informatie over de instelling en opleidingen geanalyseerd. Op locatie zijn documenten onderzocht en gesprekken gevoerd. Er is onder andere gesproken met bpvcoördinatoren, schoolexaminatoren, praktijkbeoordelaars, leden van de examencommissies en het management. In dit rapport starten we met de conclusie van de onderzoeken naar kwaliteitsverbetering en geven we aan wat het vervolg is (hoofdstuk 2). Vervolgens lichten we de onderzoeken naar kwaliteitsverbetering op opleidingsniveau toe (hoofdstuk 3). Onderzoek naar kwaliteitsverbetering mbo - Graafschap College pagina 1 van 6
2 Conclusie en vervolg In dit hoofdstuk staat de conclusie van het onderzoek naar kwaliteitsverbetering en beschrijven we het vervolg. De toelichting op de beoordeling staat in hoofdstuk 3. 2.1 Conclusie Onderzoeken naar kwaliteitsverbetering op opleidingsniveau Medewerker marketing en communicatie (Medewerker marketing en communicatie), 90530 Medewerker marketing en communicatie (Marketing medewerker), 90532 We concluderen dat bij Medewerker marketing en communicatie en Marketing medewerker het kwaliteitsgebied examinering en diplomering voldoende is. Maatschappelijke Zorg (Persoonlijk begeleider gehandicaptenzorg), 92661 We concluderen dat bij Persoonlijk begeleider gehandicaptenzorg het kwaliteitsgebied examinering en diplomering voldoende is. 2.2 Vervolg Vervolgtoezicht naar aanleiding van de onderzochte opleidingen We voeren bij de twee opleidingen geen vervolgtoezicht uit, omdat we het onderzochte kwaliteitsgebied als voldoende hebben beoordeeld. Onderzoek naar kwaliteitsverbetering mbo - Graafschap College pagina 2 van 6
3. Resultaten opleiding In dit hoofdstuk lichten wij het resultaat van de kwaliteitsonderzoeken bij de opleidingen toe. We geven per gebied aan wat het oordeel is (goed, onvoldoende, voldoende, slecht) en verantwoorden ons over het oordeel op het niveau van de onderliggende aspecten. 3.1 Medewerker marketing en communicatie Het onderzoek naar kwaliteitsverbetering bij de opleiding Marketing medewerker, crebo 90532 en Medewerker marketing en communicatie, crebo 90530, niveau 4, bol, locatie Ruimzichtlaan 155 te Doetinchem richtte zich op de examinering en diplomering. Het onderzoek naar kwaliteitsverbetering leidt tot de volgende beoordeling: Kwaliteitsgebied Goed Voldoende Onvoldoende 2. Examinering en diplomering Slecht Kwaliteitsgebied Voldoende Aspect Gebied 2: Examinering en diplomering 2.1 Exameninstrumentarium* 2.2 Afname en beoordeling* 2.3 Diplomering* Onvoldoende De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied. Beschouwing Algemeen Tijdens voorgaand onderzoek is geconstateerd dat de examinering en diplomering onvoldoende was. We hebben ons binnen dit gebied alleen gericht op aspecten, die tijdens voorgaand onderzoek als onvoldoende zijn beoordeeld. De voldoende oordelen hebben we overgenomen. Examinering en diplomering voldeed niet, omdat niet voldaan was aan het aspect Afname en beoordeling. Het aspect Afname en beoordeling voldeed niet, omdat een gelijkwaardige beoordeling voor alle studenten niet was geborgd. De beroepsgerichte examens werden beoordeeld door één beoordelaar en de opleiding monitorde niet tussentijds de kwaliteit van de afname. Niet alle beoordelaars waren toetstechnisch deskundig. Hierna lichten we alleen het aspect toe, dat tijdens dit onderzoek opnieuw is onderzocht en beoordeeld. Examinering en diplomering De examinering en diplomering beoordelen we als voldoende. Aan alle aspecten is voldaan. De examenprocessen van afname en beoordeling zijn voldoende deugdelijk. Een gelijkwaardige beoordeling voor alle studenten is nu in voldoende mate geborgd. Onderzoek naar kwaliteitsverbetering mbo - Graafschap College pagina 3 van 6
Er is allereerst meer zicht op de kwaliteit van de afname omdat schoolexaminatoren het functioneren van praktijkbeoordelaars tijdens de afname van de proeve beoordelen en daarover rapporteren aan de examencommissie. Leden van de examencommissie wonen soms eindgesprekken van proeves bij en geven dan een beoordeling op vooraf vastgestelde punten. Naast de praktijkbeoordelaar heeft nu ook een schoolexaminator tijdens de eindgesprekken een rol. Voor schoolexaminatoren en praktijkbeoordelaars zijn handleidingen ontwikkeld waarin duidelijk staat beschreven wat er tijdens de afname en beoordeling van de proeves in de beroepspraktijk van hen wordt verwacht. Verder is een duidelijk onderscheid aangebracht tussen het ontwikkelingsgerichte deel van de bpv en het kwalificerende deel van de bpv. Ook is de deskundigheid van de beoordelaars verbeterd doordat de schoolexaminatoren zijn geschoold in het voeren van eindgesprekken. De deskundigheidsbevordering van praktijkbeoordelaars is nog voor verbetering vatbaar; genoemde scholing is op facultatieve basis aan hen aangeboden en slechts een deel van de praktijkbeoordelaars heeft de scholing daadwerkelijk gevolgd. Er is geen overzicht beschikbaar van degenen die de scholing hebben gevolgd. De objectiviteit van de beoordeling zou nog vergroot kunnen worden door meer zicht te creëren op het verloop van het praktijkgedeelte van de proeves, bijvoorbeeld door steekproefsgewijze bijwoning daarvan door leden van de examencommissie. Ten slotte is de onderbouwing van de oordelen een aandachtspunt. Daar waar sprake is van een beoordeling onvoldoende of goed vraagt het exameninstrument om een toelichting. Dit gebeurt niet altijd zorgvuldig. 3.2 Maatschappelijke Zorg (Persoonlijk begeleider gehandicaptenzorg) Het onderzoek naar kwaliteitsverbetering bij de opleiding Persoonlijk begeleider gehandicaptenzorg, crebo 92661, niveau 4, bbl, locatie Dr. Bardetplaats 7 te Doetinchem richtte zich op de examinering en diplomering. Het onderzoek naar kwaliteitsverbetering leidt tot de volgende beoordeling: Kwaliteitsgebied Goed Voldoende Onvoldoende 2. Examinering en diplomering Slecht Kwaliteitsgebied Voldoende Aspect Gebied 2: Examinering en diplomering 2.1 Exameninstrumentarium* 2.2 Afname en beoordeling* 2.3 Diplomering* Onvoldoende De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied. Beschouwing Algemeen Tijdens voorgaand onderzoek is geconstateerd dat de examinering en diplomering onvoldoende was. We hebben ons binnen dit gebied alleen gericht op aspecten, die tijdens voorgaand onderzoek als onvoldoende zijn beoordeeld. De voldoende Onderzoek naar kwaliteitsverbetering mbo - Graafschap College pagina 4 van 6
oordelen hebben we overgenomen. Examinering en diplomering voldeed niet, omdat niet voldaan was aan het aspect Afname en beoordeling. Het aspect Afname en beoordeling voldeed niet, omdat zowel het inzicht in de betrouwbaarheid van de beoordeling van de beroepsproeves als de controle op de professionaliteit van assessoren te beperkt was. Hierna lichten we alleen het aspect toe, dat tijdens dit onderzoek opnieuw is onderzocht en beoordeeld. Examinering en diplomering De examinering en diplomering beoordelen we als voldoende. Aan alle aspecten is voldaan. We lichten alleen het aspect toe, dat opnieuw is onderzocht. De examenprocessen van afname en beoordeling zijn voldoende deugdelijk. De examencommissie en het onderwijsteam hebben in nauw overleg met het werkveld een aantal maatregelen getroffen waardoor de betrouwbaarheid en objectiviteit van de beoordeling van de proeves in de beroepspraktijk worden geborgd. Zo is er een instructie voor de beoordelaars waarin duidelijk staat beschreven wat er tijdens de afname en beoordeling in de beroepspraktijk van hen wordt verwacht. Ook vindt beoordeling van het gedrag van de examenkandidaten plaats door onafhankelijke praktijkbeoordelaars (niet zijnde de bpv-begeleiders). Verder is er een duidelijk onderscheid aangebracht tussen het ontwikkelingsgerichte deel van de bpv en het kwalificerende deel van de bpv. De professionaliteit van assessoren is bovendien versterkt, allereerst doordat zowel schoolexaminatoren als praktijkbeoordelaars zijn en worden geschoold in het objectief beoordelen en vervolgens schriftelijk onderbouwen van de oordelen. Daarnaast zijn en worden er voor deze groepen intervisiebijeenkomsten gehouden op deze terreinen. Ten slotte voert de examencommissie steekproefsgewijs controles uit op de examendossiers, waarbij de kwaliteit van de onderbouwing van de oordelen één van de aandachtspunten is. Onderzoek naar kwaliteitsverbetering mbo - Graafschap College pagina 5 van 6
Bijlage Bijlage I Normering kwaliteitsgebied De normering per gebied is per januari 2015 aangepast (zie het Toezichtkader bve 2012 en het Addendum 2015). De normering heeft betrekking op de toezichtperiode 2015-2016. De normen Op basis van het onderzoek spreekt de inspectie oordelen uit waarvoor zij gebruikmaakt van een normering. Deze bestaat uit twee stappen: 1. Een normering per aspect: per aspect wordt een beschrijving gegeven. Indicatoren en portretten zijn daarvoor indicerend en richtinggevend. 2. Een normering per kwaliteitsgebied. Bij het gebied Examinering en diplomering zijn alle aspecten als kernaspect benoemd. Normering Examinering en diplomering Goed Aan alle drie de aspecten is voldaan. De elementen in het portret worden op een uitstekende wijze uitgevoerd. Voldoende Aan alle drie de aspecten is voldaan. Er wordt voor het grootste deel aan de omschrijving van de portretten voldaan, waaronder de essentiële onderdelen. Onvoldoende Aan een of twee aspecten is niet voldaan. Slecht Aan geen van de drie aspecten is voldaan. Onderzoek naar kwaliteitsverbetering mbo - Graafschap college pagina 6 van 6