ONDERZOEK NAAR KWALITEITSVERBETERING MBO OP INSTELLINGS- EN OPLEIDINGSNIVEAU Leeuwenborgh Opleidingen te Maastricht Commercieel medewerker (Commercieel medewerker binnendienst) Vliegtuigonderhoud (Technicus mechanica) Reizen (Manager verkoop reizen) Januari, 2016 BRIN: 25PL Onderzoeksnummer: 286074 Onderzoek uitgevoerd: 5-10-2015 t/m 6-10-2015 Conceptrapport verzonden op: 16-11-2015 Rapport vastgesteld te Utrecht op: 20-01-2016
INHOUD 1 Inleiding... 1 2 Conclusie en vervolg... 3 2.1 Conclusie... 3 2.2 Vervolg... 3 3 Resultaten kwaliteitsborging op instellingsniveau... 5 4. Resultaten opleidingen... 7 4.1 Commercieel medewerker (Commercieel medewerker binnendienst) 7 4.2 Vliegtuigonderhoud (Technicus mechanica), 94412...9 4.3 Reizen (Manager verkoop reizen)... 11 Bijlage... 13 Bijlage I Normering kwaliteitsgebieden... 13
1 Inleiding In dit rapport staan de uitkomsten van de drie onderzoeken naar kwaliteitsverbetering, die de Inspectie van het Onderwijs van 5 oktober 2015 tot en met 6 oktober 2015 heeft uitgevoerd bij Leeuwenborgh Opleidingen. De inspectie baseert zich op het Toezichtkader bve 2012 en het Addendum 2015 (zie www.onderwijsinspectie.nl). Aanleiding onderzoeken naar kwaliteitsverbetering De aanleiding voor de onderzoeken naar kwaliteitsverbetering is het vervolgtoezicht, zoals is opgenomen in het rapport van de Staat van de instelling (vastgesteld op 3 juli 2014). We hebben de kwaliteitsborging op instellingsniveau onderzocht, omdat tijdens de Staat van de instelling is geconstateerd dat de instelling niet voldeed aan de wettelijke vereiste op het gebied van kwaliteitsborging (WEB, art. 1.3.6). Daarnaast hebben we een onderzoek naar kwaliteitsverbetering uitgevoerd bij de volgende opleidingen. Gebied Opbrengsten Gebied Kwaliteitsborging Gebied Examinering en diplomering Leerweg, niveau, locatie Niet onderzocht Niet onderzocht Niet onderzocht 90111, Commercieel medewerker (Commercieel medewerker binnendienst) 94412, Vliegtuigonderhoud (Technicus mechanica) 94100, Reizen (Manager verkoop reizen) 90111, Commercieel medewerker (Commercieel medewerker binnendienst) 94412, Vliegtuigonderhoud (Technicus mechanica) 94100, Reizen (Manager verkoop reizen) leerweg bol, niveau 3, locatie Sibemaweg 20, Maastricht leerweg bol, niveau 4, locatie Horsterweg 13, Maastricht leerweg bol, niveau 4, locatie Sibemaweg 20, Maastricht Commercieel medewerker (Commercieel medewerker binnendienst), 90111 We hebben de examinering en diplomering en de kwaliteitsborging onderzocht, omdat tijdens de Staat van de instelling is geconstateerd dat er sprake was van onvoldoende examenkwaliteit en niet-naleving van de wet op het gebied van kwaliteitsborging (WEB, art. 1.3.6). Vliegtuigonderhoud (Technicus mechanica), 94412 We hebben de examinering en diplomering en de kwaliteitsborging onderzocht, omdat tijdens de Staat van de instelling is geconstateerd dat er sprake was van onvoldoende examenkwaliteit en niet-naleving van de wet op het gebied van kwaliteitsborging (WEB, art. 1.3.6). Reizen (Manager verkoop reizen), 94100 We hebben de examinering en diplomering en de kwaliteitsborging onderzocht, omdat tijdens de Staat van de instelling is geconstateerd dat er sprake was van onvoldoende examenkwaliteit en niet-naleving van de wet op het gebied van kwaliteitsborging (WEB, art. 1.3.6). Onderzoek naar kwaliteitsverbetering mbo Leeuwenborgh Opleidingen pagina 1 van 15
Om ons een beeld te vormen van de kwaliteitsverbeteringen hebben we informatie over de instelling en opleidingen geanalyseerd. Op locatie zijn documenten onderzocht en gesprekken gevoerd. Er is onder andere gesproken met docenten, het management en het college van bestuur. In dit rapport starten we met de conclusie van de onderzoeken naar kwaliteitsverbetering en geven we aan wat het vervolg is (hoofdstuk 2). Daarna volgt de toelichting op de beoordeling van de kwaliteitsborging op instellingsniveau (hoofdstuk 3). Vervolgens lichten we de onderzoeken naar kwaliteitsverbetering op opleidingsniveau toe (hoofdstuk 4). Onderzoek naar kwaliteitsverbetering mbo Leeuwenborgh Opleidingen pagina 2 van 15
2 Conclusie en vervolg In dit hoofdstuk staat de conclusie van de onderzoeken naar kwaliteitsverbetering en beschrijven we het vervolg. De toelichting op de beoordeling staat in de hoofdstukken 3 en 4. 2.1 Conclusie Onderzoek naar kwaliteitsverbetering kwaliteitsborging instellingsniveau We concluderen dat de kwaliteitsborging op instellingsniveau bij roc Leeuwenborgh Opleidingen voldoende is. Hiermee is op instellingsniveau voldaan aan de wettelijke vereiste op het gebied van kwaliteitsborging (WEB, art. 1.3.6). Onderzoeken naar kwaliteitsverbetering opleidingsniveau Commercieel medewerker (Commercieel medewerker binnendienst), 90111 We concluderen dat bij Commercieel medewerker binnendienst het kwaliteitsgebied examinering en diplomering wederom onvoldoende is. Het kwaliteitsgebied kwaliteitsborging is voldoende. Bij deze opleiding is sprake van onvoldoende examenkwaliteit. Tijdens dit onderzoek naar kwaliteitsverbetering bleek dat de opleiding de eerder geconstateerde tekortkomingen op het gebied van de examinering heeft hersteld. Wij hebben echter een nieuwe tekortkoming geconstateerd waardoor de examinering nu wederom, maar wel vanwege een nieuw feit (dat de inspectie eerder niet signaleerde), onvoldoende is. Vliegtuigonderhoud (Technicus mechanica), 94412 We concluderen dat bij Technicus mechanica het kwaliteitsgebied examinering en diplomering voldoende is. Het kwaliteitsgebied kwaliteitsborging is wederom onvoldoende. Hiermee is op opleidingssniveau niet voldaan aan de wettelijke vereiste op het gebied van kwaliteitsborging (WEB, art. 1.3.6). Bij deze opleiding is sprake van onvoldoende kwaliteitsborging. Tijdens dit onderzoek naar kwaliteitsverbetering bleek dat de opleiding de eerder geconstateerde tekortkomingen bij het aspect verbetering en verankering onvoldoende heeft hersteld. Reizen (Manager verkoop reizen), 94100 We concluderen dat bij Manager verkoop reizen het kwaliteitsgebied examinering en diplomering en het kwaliteitsgebied kwaliteitsborging voldoende zijn. 2.2 Vervolg Vervolg onderzoek naar kwaliteitsverbetering kwaliteitsborging instellingsniveau We voeren geen vervolgtoezicht uit naar de kwaliteitsborging van de instelling, omdat de instelling voldoet aan de wettelijke vereiste (WEB, art. 1.3.6). Vervolg onderzoek naar kwaliteitsverbetering opleidingsniveau We voeren bij een opleiding geen vervolgtoezicht uit, omdat we alle kwaliteitsgebieden als voldoende hebben beoordeeld. Onderzoek naar kwaliteitsverbetering mbo Leeuwenborgh Opleidingen pagina 3 van 15
Bij twee opleidingen voeren we vervolgtoezicht uit, omdat we niet alle kwaliteitsgebieden als voldoende hebben beoordeeld. Het vervolgtoezicht richt zich bij een opleiding op een nieuw geconstateerde tekortkoming binnen het reeds eerder als onvoldoende beoordeelde kwaliteitsgebied. Bij één opleiding betreft het een voortzetting van de eerder geconstateerde tekortkoming in hetzelfde kwaliteitsgebied. In onderstaande schema's is het vervolgtoezicht te lezen. Commercieel medewerker (Commercieel medewerker binnendienst), 90111 Beoordeling Toezichtvorm Vervolgtoezicht Kwaliteit examinering is onvoldoende. Aangepast toezicht vanwege onvoldoende examenkwaliteit. De inspectie meldt het oordeel aan de minister. De instelling ontvangt een waarschuwing. Na de in de waarschuwingsbrief opgenomen termijn volgt een onderzoek naar kwaliteitsverbetering. Vliegtuigonderhoud (Technicus mechanica), 94412 Beoordeling Toezichtvorm Vervolgtoezicht Kwaliteitsborging voldoet niet aan de eisen en is onvoldoende. Aangepast toezicht vanwege niet-naleving van 1.3.6 van de WEB. Circa een jaar na het definitieve rapport beoordelen wij de kwaliteitsborging opnieuw. Onderzoek naar kwaliteitsverbetering mbo Leeuwenborgh Opleidingen pagina 4 van 15
3 Resultaten kwaliteitsborging op instellingsniveau In dit hoofdstuk informeren wij u over de beoordeling van de kwaliteitsborging op instellingsniveau en onderbouwen wij ons oordeel. De normering van het kwaliteitsgebied kwaliteitsborging staat in bijlage I. De kwaliteitsborging van roc Leeuwenborgh Opleidingen beoordelen we als voldoende. Dit oordeel is gebaseerd op de beoordeling van de onderliggende aspecten. Kwaliteitsgebied Goed Voldoende Onvoldoende 4. Kwaliteitsborging Slecht Aspecten Voldoende Onvoldoende 4.1 Sturing* 4.2 Beoordeling* 4.3 Verbetering en verankering* 4.4 Dialoog en verantwoording De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied. Beschouwing Algemeen Tijdens voorgaand onderzoek is geconstateerd dat de kwaliteitsborging onvoldoende was, omdat niet voldaan was aan het aspect verbetering en verankering. Alleen dit aspect is opnieuw onderzocht en beoordeeld. De verbetering en verankering voldeed niet door een onvoldoende planmatige verbeteraanpak. Hierdoor had het college van bestuur onvoldoende grip op de verbetering van de kwaliteit. Hierna lichten we alleen het aspect toe, dat tijdens dit onderzoek opnieuw is onderzocht en beoordeeld. Kwaliteitsborging De kwaliteitsborging op instellingsniveau bij roc Leeuwenborgh Opleidingen is beoordeeld als voldoende. Aan alle aspecten is voldaan. De verbetering en verankering beoordelen we als voldoende omdat de verbeteraanpak planmatig wordt aangepakt. De huidige kwaliteitszorgsystematiek draagt effectief bij aan het verbeteren van het onderwijs. Zo wordt de kwaliteitszorg mede gestuurd door een kwaliteitskalender, waarin alle rollen van de betrokkenen zijn vastgelegd. Tevens is er een toezichtplan voor de controle op de kwaliteit van de examinering en diplomering. Verder werken de teams met een doorlopend teamplan, waarin alle verbeteractiviteiten zijn opgenomen. Dit is een grote verbetering ten opzichte van het vorige onderzoek. De teams hebben nu een totaaloverzicht van de verbeteractiviteiten. Het plan wordt tussentijds bijgesteld wanneer bevindingen van audits, panelgesprekken, tevredenheidsmetingen of lesbezoeken hiertoe aanleiding geven. Positief is dat de instelling systematisch meer aandacht besteedt aan de ontwikkeling van de competenties van het personeel in de functie van bijvoorbeeld docent, begeleider of assessor. Scholing wordt roc breed gefaciliteerd en alle opleidingsmanagers bezoeken inmiddels de onderwijsactiviteiten van de docenten. De oordelen over de ontwikkeling van het Onderzoek naar kwaliteitsverbetering mbo Leeuwenborgh Opleidingen pagina 5 van 15
personeel komen aan de orde in de rapportages van de sectordirectie aan het college van bestuur. Verder heeft de instelling de zogeheten kartrekkers gefaciliteerd die belast zijn met onder andere de portefeuilles onderwijs, examinering of kwaliteit. Deze rollen worden uitgevoerd door één van de docenten van het team. Hierdoor leven de ontwikkeltrajecten sterker in de teams en is het draagvlak groter. Op deze wijze heeft het college van bestuur het onderwijskundig leiderschap in de instelling een extra impuls gegeven. Om voeling te houden met wat er op de werkvloer speelt bezoekt het college van bestuur jaarlijks twee keer alle opleidingsteams. Wij zien dat deze slag van kwaliteitsverbetering nog niet is voltooid vanwege de korte tijdsspanne van de cyclus van de verbeteringstrajecten. Wel hebben wij vertrouwen in de ingezette verbetering gezien de voortvarendheid waarmee de instelling de tekortkomingen heeft opgepakt. Het is daarom een aandachtspunt voor het college van bestuur om de voortgang van de implementatie van verbetering en verankering in de teams te blijven volgen. Ten eerste omdat wij verschil zien in de mate waarin de teams de vernieuwde systematiek succesvol implementeren. Ten tweede omdat het college van bestuur de opleidingsmanagers de ruimte geeft om tijdens de lesbezoeken nog geen oordeel te geven over de kwaliteit van het didactisch handelen. Ten derde omdat er nog niet in alle teams afspraken zijn gemaakt over de concrete criteria en normen voor goed onderwijs voor de eigen specifieke doelgroep. Hierdoor is er nog niet altijd sprake van een systematisch verkregen oordeel over de kwaliteit van het functioneren van het onderwijskundig personeel. Onderzoek naar kwaliteitsverbetering mbo Leeuwenborgh Opleidingen pagina 6 van 15
4. Resultaten opleidingen In dit hoofdstuk lichten wij het resultaat van de kwaliteitsonderzoeken bij de opleidingen toe. We geven per gebied aan wat het oordeel is (goed, onvoldoende, voldoende, slecht) en verantwoorden ons over het oordeel op het niveau van de onderliggende aspecten. 4.1 Commercieel medewerker (Commercieel medewerker binnendienst) Het onderzoek naar kwaliteitsverbetering bij Commercieel medewerker binnendienst, crebocode 90111, niveau 3, bol, locatie Sibemaweg 20 te Maastricht richtte zich op de gebieden examinering en diplomering en kwaliteitsborging. Het onderzoek naar kwaliteitsverbetering leidt tot de volgende beoordeling: Kwaliteitsgebied Goed Voldoende Onvoldoende 2. Examinering en diplomering 4. Kwaliteitsborging Slecht Kwaliteitsgebied Voldoende Aspect Gebied 2: Examinering en diplomering 2.1 Exameninstrumentarium* Onvoldoende 2.2 Afname en beoordeling* 2.3 Diplomering* Gebied 4: Kwaliteitsborging 4.1 Sturing* 4.2 Beoordeling* 4.3 Verbetering en verankering* 4.4 Dialoog en verantwoording De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied. Beschouwing Algemeen Tijdens voorgaand onderzoek is geconstateerd dat de gebieden examinering en diplomering en kwaliteitsborging onvoldoende waren. In het onderzoek naar kwaliteitsverbetering hebben we ons binnen deze gebieden alleen gericht op aspecten, die tijdens voorgaand onderzoek als onvoldoende zijn beoordeeld. De voldoende oordelen voor de overige aspecten hebben we overgenomen. Tijdens het voorgaande onderzoek is het volgende geconstateerd. Het gebied examinering en diplomering voldeed niet, omdat de aspecten afname en beoordeling en diplomering tekortkomingen vertoonden. De afname en beoordeling was onvoldoende, omdat bij kerntaak 3 alleen de praktijkbegeleider bij de beoordeling was betrokken en dit oordeel onvoldoende door de instelling werd geverifieerd. De diplomering schoot tekort omdat de examencommissie zich Onderzoek naar kwaliteitsverbetering mbo Leeuwenborgh Opleidingen pagina 7 van 15
onvoldoende grondig en frequent vergewiste van de afname en beoordeling van de examens evenals van de juistheid van de besluitvorming van de diplomering. Het gebied kwaliteitsborging voldeed niet aan het aspect verbetering en verankering. Dit aspect was onvoldoende omdat er nog geen sprake was van een planmatige en cyclische aanpak van het plannen, uitvoeren en evalueren van vooraf bepaalde doelstellingen. Hierna lichten we alleen de aspecten toe, die tijdens dit onderzoek naar kwaliteitsverbetering opnieuw zijn onderzocht en beoordeeld. Examinering en diplomering Het gebied examinering en diplomering beoordelen we opnieuw als onvoldoende omdat nog steeds niet voldaan is aan het aspect afname en beoordeling. Er wordt inmiddels wel voldaan aan het aspect diplomering. De examenprocessen van afname en beoordeling zijn onvoldoende deugdelijk. De tijdens het onderzoek naar de Staat van de instelling geconstateerde tekortkoming betreffende het ontbreken van een waarborg voor een eenduidige beoordeling is opgeheven. Inmiddels beoordelen twee assessoren (een van school en een uit de praktijk) kerntaak 3. Er is ten aanzien van hetzelfde aspect echter een nieuwe tekortkoming vastgesteld. De opleiding wijkt bij de examinering van kerntaak 3 af van de voorschriften van het examenproduct dat de instelling heeft ingekocht bij de Stichting Praktijkleren. Zij had evenwel verklaard het product ongewijzigd te hebben ingezet. De proeve van bekwaamheid voor kerntaak 3 blijkt dan ook niet volgens de richtlijnen in het exameninstrumentarium te worden afgenomen in de beroepspraktijk, zoals bedoeld onder aspect 2.2. De proeve bestaat slechts uit een criterium gericht interview, naar aanleiding van producten die tijdens de stage door de student zijn gemaakt. Een criteriumgericht interview alleen is echter niet de juiste wijze van toetsing om te bepalen of de student de competenties die de werkprocessen van hem verlangen op het vereiste niveau van een beginnend beroepsbeoefenaar beheerst. Competenties als het te woord staan van klanten of het behandelen van klachten, dienen te worden beoordeeld wanneer de student in een reële (eventueel gesimuleerde) praktijksituatie aantoont hierover al of niet te beschikken. De wijze van examinering via een criterium gericht interview biedt dus geen waarborg dat de student de werkprocessen van kerntaak 3 uit het kwalificatiedossier op het vereiste niveau beheerst. Hiermee voldoet de opleiding niet aan het aspect afname en beoordeling. De diplomering is voldoende deugdelijk en geborgd omdat de examencommissie werkt volgens het plan van toezicht en zich vergewist van de afname en beoordeling van de examens. Toch is er het aandachtspunt dat de examencommissie nadrukkelijker zorg draagt voor een correcte afname van examens volgens de in het exameninstrumentarium vastgelegde richtlijnen. Zo moet voorkomen worden dat de eerder gemelde tekortkoming zich niet meer voordoet. De examencommissie woont een vooraf bepaalde steekproef van de examens bij. Bij die bijwoning beoordeelt zij zowel het beoordelingsproces van de student als de competenties van de assessoren. De assessoren zijn geschoold en gecertificeerd. Ook de examencommissie zelf is geschoold. Analyses van de resultaten van de vakken Nederlands en rekenen worden weliswaar uitgevoerd maar leveren slechts beperkt informatie op. De examencommissie evalueert de uitvoering van alle procedures systematisch. Hiermee voldoet de instelling aan het aspect diplomering. Onderzoek naar kwaliteitsverbetering mbo Leeuwenborgh Opleidingen pagina 8 van 15
Kwaliteitsborging Het gebied kwaliteitsborging beoordelen we nu als voldoende omdat inmiddels wordt voldaan aan het aspect verbetering en verankering. Hiermee voldoet de opleiding aan de wettelijke vereiste op het gebied van kwaliteitsborging (WEB, art. 1.3.6). We lichten alleen het aspect toe, dat opnieuw is onderzocht. De verbetering en verankering beoordelen we als voldoende. Het doorlopend teamplan bevat alle ingezette verbetertrajecten. Door frequente bespreking van het plan en de actieve rol van de zogeheten kartrekkers leeft het plan onder de docenten en is er draagvlak voor de ingezette koers. De kartrekkers Zorg en Begeleiding voor onder anderen onderwijs, kwaliteit en examinering worden voor hun werkzaamheden gefaciliteerd door de opleidingsmanager. De kartrekkers faseren het verbetertraject en bewaken hun portefeuille in overleg met de opleidingsmanager. De competenties van de teamleden worden op verschillende manieren geëvalueerd. Twee keer per jaar worden zij beoordeeld volgens een vastgestelde systematiek en elke tien weken geven de studenten hun oordeel over de onderwijsactiviteiten. Daarnaast vergaart het management informatie uit de notulen van de panelgesprekken met studenten. Al deze informatie wordt besproken tijdens de cyclus van functionerings- en beoordelingsgesprekken. Hierin wordt bepaald op welke wijze de ontwikkeling van de individuele docent verder zal worden ondersteund. Hierdoor is er een planmatige en cyclische aanpak van het plannen, uitvoeren en evalueren van vooraf bepaalde doelstellingen gerealiseerd. Hiermee voldoet de instelling aan het aspect verbetering en verankering. 4.2 Vliegtuigonderhoud (Technicus mechanica), 94412 Het onderzoek naar kwaliteitsverbetering bij technicus mechanica, 94412, niveau 4, bol, locatie Horsterweg 13 te Maastricht richtte zich op de gebieden examinering en diplomering en kwaliteitsborging. Het onderzoek naar kwaliteitsverbetering leidt tot de volgende beoordeling: Kwaliteitsgebied Goed Voldoende Onvoldoende 2. Examinering en diplomering 4. Kwaliteitsborging Slecht Kwaliteitsgebied Voldoende Aspect Gebied 2: Examinering en diplomering 2.1 Exameninstrumentarium* 2.2 Afname en beoordeling* 2.3 Diplomering* Gebied 4: Kwaliteitsborging 4.1 Sturing* Onvoldoende 4.2 Beoordeling* 4.3 Verbetering en verankering* 4.4 Dialoog en verantwoording De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied. Onderzoek naar kwaliteitsverbetering mbo Leeuwenborgh Opleidingen pagina 9 van 15
Beschouwing Algemeen Tijdens voorgaand onderzoek is geconstateerd dat de gebieden examinering en diplomering en kwaliteitsborging onvoldoende waren. In het onderzoek naar kwaliteitsverbetering hebben we ons binnen deze gebieden alleen gericht op aspecten, die tijdens voorgaand onderzoek als onvoldoende zijn beoordeeld. De voldoende oordelen voor de overige aspecten hebben we overgenomen. Tijdens het voorgaande onderzoek is het volgende geconstateerd. Het gebied examinering en diplomering voldeed niet, omdat niet voldaan was aan het aspect diplomering. De diplomering schoot tekort omdat de examencommissie zich onvoldoende grondig en frequent vergewiste van de afname en beoordeling van de examens. Dit betrof eveneens de juistheid van de besluitvorming omtrent de diplomering. Het gebied kwaliteitsborging voldeed niet omdat niet voldaan was aan het aspect verbetering en verankering. Dit was onvoldoende omdat er nog onvoldoende planmatig en structureel analyses plaatsvonden waardoor een cyclische aanpak van het plannen, uitvoeren en evalueren van vooraf bepaalde doelstellingen niet werd afgemaakt. Hierna lichten we alleen de aspecten toe, die tijdens dit onderzoek naar kwaliteitsverbetering opnieuw zijn onderzocht en beoordeeld. Examinering en diplomering Het gebied examinering en diplomering beoordelen we als voldoende omdat inmiddels wordt voldaan aan het aspect diplomering. De diplomering is voldoende deugdelijk en geborgd. De examencommissie werkt volgens het plan van toezicht waarin de jaaractiviteiten van de commissie zijn opgenomen. De examencommissie vergewist zich voldoende van de afname en beoordeling van de examens. Zij voert bijwoningen van examens uit en geeft daarbij feedback op de uitgevoerde beoordelingen. Ook worden er verificatievergaderingen gehouden met het gehele team als extra controle op behaalde examenresultaten en zijn er intervisie bijeenkomsten voor constructeurs en vaststellers van examens. Naast constructeurs en vaststellers heeft ook de examencommissie zelf een scholing gevolgd. Tevens draagt de examencommissie er zorg voor dat de diploma- en examendossiers van de studenten op orde zijn. Hiermee voldoet de instelling aan het aspect verbetering en verankering. Kwaliteitsborging Het gebied kwaliteitsborging beoordelen we opnieuw als onvoldoende omdat nog steeds niet voldaan is aan het aspect verbetering en verankering. Hiermee is op opleidingssniveau niet voldaan aan de wettelijke vereiste op het gebied van kwaliteitsborging (WEB, art. 1.3.6). De verbetering en verankering beoordelen we als onvoldoende omdat er geen integraal grip en zicht is op de voortgang van de verbeteracties. Het team beschikt over een doorlopend teamplan met verbeteracties maar kortlopende verbeteractiviteiten zijn hierin niet opgenomen waardoor de opleiding geen integraal overzicht heeft over de voortgang van alle verbeteractiviteiten. Ook heeft Onderzoek naar kwaliteitsverbetering mbo Leeuwenborgh Opleidingen pagina 10 van 15
de opleiding nog onvoldoende zicht of de ingezette verbeteracties leiden tot het gewenste resultaat. Dit wordt mede veroorzaakt door het ontbreken van analyse, helder geformuleerde doelstellingen en gestelde normen binnen een samenhangend geheel van planning, monitoring, evaluatie, verbetering en verantwoording. Het doorlopend teamplan wordt tweewekelijks in het team besproken. De eigenaar van een verbeteractie informeert de overige teamleden over de voortgang van het proces van de verbeteractie, maar de inhoudelijke voortgang wordt niet besproken zoals blijkt uit notulen van deze bijeenkomsten. Door deze benadering hebben de overige teamleden onvoldoende zicht op de inhoudelijke voortgang en samenhang van alle verbeteractiviteiten. Naast scholing op het gebied van feedback en studieloopbaanbegeleiding heeft het team ook een scholing gevolgd om het didactisch handelen op een hoger niveau te brengen. In aansluiting daarop voert de opleidingsmanager lesbezoeken uit waarbij een kijkwijzer wordt gehanteerd. De bevindingen worden met de betreffende docent besproken. Hiermee voldoet de instelling niet aan het aspect verbetering en verankering. 4.3 Reizen (Manager verkoop reizen) Het onderzoek naar kwaliteitsverbetering bij Manager verkoop reizen, 94100, niveau 4, bol, locatie Sibemaweg 20 te Maastricht richtte zich op de gebieden examinering en diplomering en kwaliteitsborging. Het onderzoek naar kwaliteitsverbetering leidt tot de volgende beoordeling: Kwaliteitsgebied Goed Voldoende Onvoldoende 2. Examinering en diplomering 4. Kwaliteitsborging Slecht Kwaliteitsgebied Voldoende Aspect Gebied 2: Examinering en diplomering 2.1 Exameninstrumentarium* 2.2 Afname en beoordeling* 2.3 Diplomering* Gebied 4: Kwaliteitsborging 4.1 Sturing* 4.2 Beoordeling* 4.3 Verbetering en verankering* 4.4 Dialoog en verantwoording De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied. Onvoldoende Beschouwing Algemeen Tijdens voorgaand onderzoek is geconstateerd dat de gebieden examinering en diplomering en kwaliteitsborging onvoldoende waren. In het onderzoek naar kwaliteitsverbetering hebben we ons binnen deze gebieden alleen gericht op Onderzoek naar kwaliteitsverbetering mbo Leeuwenborgh Opleidingen pagina 11 van 15
aspecten, die tijdens voorgaand onderzoek als onvoldoende zijn beoordeeld. De voldoende oordelen voor de overige aspecten hebben we overgenomen. Tijdens het voorgaande onderzoek is het volgende geconstateerd. Het gebied examinering en diplomering voldeed niet, omdat het aspect diplomering tekortkomingen vertoonde. De diplomering schoot tekort omdat de examencommissie onvoldoende haar verantwoordelijkheid nam voor het gehele proces van examinering. Zo was onder andere een adequate controle op behaalde examenresultaten onmogelijk omdat voortijdig vernietiging van examenmateriaal plaatsvond. Het gebied kwaliteitsborging voldeed niet aan het aspect verbetering en verankering. Dit aspect was onvoldoende omdat er nog geen sprake was van een planmatige en cyclische aanpak van het plannen, uitvoeren en evalueren van vooraf bepaalde doelstellingen. Examinering en diplomering Het gebied examinering en diplomering beoordelen we als voldoende omdat inmiddels wordt voldaan aan het aspect diplomering. De diplomering is voldoende. De examencommissie werkt volgens het plan van toezicht waarin de jaaractiviteiten van deze commissie zijn opgenomen. Zo is de examencommissie steekproefsgewijs aanwezig bij de afname van examens, geeft ze feedback aan de beoordelaars van de examens en inventariseert eventuele verbeterpunten die na analyse opgenomen worden in het plan van toezicht. Ook op andere terreinen is de examencommissie actief. Aan de hand van evaluaties zijn er aanpassingen gedaan in het handboek examinering. Ook heeft de examencommissie zelf een scholing gevolgd. De examencommissie ziet er op toe dat de examendossiers compleet zijn voordat er wordt overgegaan tot besluitvorming tot diplomering. Hiermee voldoet de instelling aan het aspect diplomering. Kwaliteitsborging Het gebied kwaliteitsborging beoordelen we als voldoende, omdat inmiddels wordt voldaan aan het aspect verbetering en verankering. Hiermee voldoet de opleiding aan de wettelijke vereiste op het gebied van kwaliteitsborging (WEB, art. 1.3.6). De verbetering en verankering beoordelen we als voldoende. Het doorlopend teamplan bevat alle ingezette verbetertrajecten. Het integrale teamplan is opgesteld in samenspraak met het team waarbij ook aandacht is gegeven aan prioritering van onderwerpen. Het teamplan bevat meetbare doelstellingen en docenten zijn eigenaar van een of meerdere onderwerpen. Zij monitoren zelf de voortgang van het afgesproken tijdpad. Door frequente bespreking van het plan en de actieve rol van de eigenaar leeft het plan onder de docenten en is er draagvlak voor de ingezette koers. Kwalitatieve meting vindt plaats door bijvoorbeeld studentenevaluaties of panelgesprekken. De competenties van de teamleden worden op verschillende manieren geëvalueerd. Op structurele basis worden er lesbezoeken uitgevoerd en ook de tevredenheid van de studenten levert input hiervoor. Binnen het team ontstaat een meer collectief beeld over wat goed onderwijs is zoals blijkt uit de activiteiten die het team onderneemt zoals visievorming en SWOT analyse. Hiermee voldoet de instelling aan het aspect verbetering en verankering. Onderzoek naar kwaliteitsverbetering mbo Leeuwenborgh Opleidingen pagina 12 van 15
Bijlage Bijlage I Normering kwaliteitsgebieden De normering per gebied is per januari 2015 aangepast (zie het Toezichtkader bve 2012 en het Addendum 2015). De normering heeft betrekking op de toezichtperiode 2015-2016. De normen Op basis van het onderzoek spreekt de inspectie oordelen uit waarvoor zij gebruikmaakt van een normering. Deze bestaat uit twee stappen: 1. Een normering per aspect: per aspect wordt een beschrijving gegeven. Indicatoren en portretten zijn daarvoor indicerend en richtinggevend. 2. Een normering per kwaliteitsgebied. Bij het gebied Examinering en diplomering zijn alle aspecten als kernaspect benoemd. Normering Examinering en diplomering Goed Aan alle drie de aspecten is voldaan. De elementen in het portret worden op een uitstekende wijze uitgevoerd. Voldoende Aan alle drie de aspecten is voldaan. Er wordt voor het grootste deel aan de omschrijving van de portretten voldaan, waaronder de essentiële onderdelen. Onvoldoende Aan een of twee aspecten is niet voldaan. Slecht Aan geen van de drie aspecten is voldaan. Voor de normering van het gebied Kwaliteitsborging zijn drie kernaspecten benoemd. De kernaspecten zijn 4.1 Sturing, 4.2 Beoordeling en 4.3 Verbetering en verankering. Normering Kwaliteitsborging Goed Aan alle aspecten is voldaan. De elementen in het portret worden op een uitstekende wijze uitgevoerd. Voldoende Aan alle kernaspecten is voldaan. Er wordt voor het grootste deel aan de omschrijving van de portretten voldaan, waaronder de essentiële onderdelen. Onvoldoende Aan twee of drie aspecten is niet voldaan. Slecht Aan alle vier de aspecten is niet voldaan. Onderzoek naar kwaliteitsverbetering mbo Leeuwenborgh Opleidingen pagina 13 van 15