STAAT VAN DE INSTELLING MBO. Gilde Opleidingen

Transcriptie

1 STAAT VAN DE INSTELLING MBO Gilde Opleidingen Plaats : Roermond BRIN nummer : 25LT Onderzoeksnummer : Datum onderzoek : 12 maart - 1 april 2014 Datum vaststelling : 20 juni 2014

2 Pagina 2 van 67

3 INHOUDSOPGAVE 1 INLEIDING CONCLUSIE EN VERVOLGTOEZICHT Conclusie Vervolgtoezicht INSTELLINGSBREDE RESULTATEN Oordeel kwaliteitsborging op instellingsniveau Risico s op relevante indicatoren RESULTATEN PER OPLEIDING Ondernemer horeca/bakkerij (Manager/ondernemer horeca) Manager transport en logistiek (manager transport en logistiek) Maatschappelijke Zorg (Medewerker maatschappelijke zorg) Onderwijsassistent Veiligheid en vakmanschap (Aankomend medewerker grondoptreden) 45 5 BIJLAGEN Bijlage I Normeringen kwaliteitsgebieden Bijlage II Overzicht bc-id Bijlage III Beoordeling aspecten en indicatoren kwaliteitsborging instellingsbreed Bijlage IV Beoordeling aspecten en indicatoren opleiding Ondernemer horeca/bakkerij (Manager/ondernemer horeca) Manager transport en logistiek (manager transport en logistiek) Maatschappelijke Zorg (Medewerker maatschappelijke zorg) ovd07 Onderwijsassistent Veiligheid en vakmanschap (Aankomend medewerker grondoptreden). 66 Pagina 3 van 67

4 Pagina 4 van 67

5 1 INLEIDING De Inspectie van het Onderwijs voerde in maart/april 2014 een onderzoek naar de Staat van de instelling uit bij Gilde opleidingen. Dit onderzoek heeft betrekking op het middelbaar beroepsonderwijs en vavo. Gilde opleidingen is een roc met ongeveer studenten en ongeveer 150 opleidingen. De instelling heeft in totaal 9 uitvoeringslocaties in Noord- en Midden-Limburg, waarvan 5 hoofdlocaties. Het onderzoek heeft tot doel om de stand van de kwaliteitsborging van de instelling te bepalen en om de risico's voor de onderwijskwaliteit in te schatten. De Staat van de instelling wordt elke drie jaar opgemaakt en bestaat uit een analyse van gegevens, een instellingsbreed onderzoek en een kwaliteitsonderzoek bij een of meer opleidingen. Daarnaast is een financiële risico-analyse gemaakt. De informatie over de instelling die bij de inspectie aanwezig is, zoals het jaarverslag 2012 en ter aanvulling of verduidelijking opgevraagde (toekomstige) financiële gegevens, opbrengstgegevens, uitkomsten tevredenheidonderzoek en signalen, is geanalyseerd en is aangevuld met onderzoeken op uw instelling. Tijdens het onderzoek zijn gesprekken gevoerd met studenten, vertegenwoordigers van de studentenraad, docenten, examencommissies en management. Daarnaast hebben we documenten onderzocht en onderwijsactiviteiten geobserveerd. Ook maakte een gesprek met het college van bestuur en de sectordirecteuren deel uit van het onderzoek. In verband met de financiële risico-analyse is verder een gesprek met college van bestuur, directeur bestuursbureau en directeur personeel en financiën gevoerd. Ook is een gesprek gevoerd met de verantwoordelijke directeur voor vavo. Tenslotte zijn enkele bpv-organisaties telefonisch bevraagd. Pagina 5 van 67

6 De volgende opleidingen zijn onderzocht: Gebied Opbrengsten Gebied Onderwijsproces, Kwaliteitsborging en Wettelijke vereisten Gebied Examinering en diplomering Leerweg, niveau, locatie bc , Ondernemer horeca/bakkerij (Manager/ ondernemer horeca) 90303, Ondernemer horeca/bakkerij (Manager/ ondernemer horeca) leerweg bol, niveau 4, locatie Laaghuissingel 4, Venlo bc , Manager transport en logistiek (manager transport en logistiek) 91870, Manager transport en logistiek (manager transport en logistiek) leerweg bol, niveau 4, locatie Hagerhofweg, Venlo bc , Maatschappelijke Zorg (Medewerker maatschappelijke zorg) 92650, Maatschappelijke Zorg (Medewerker maatschappelijke zorg) leerweg bbl, niveau 3, locatie Kerkeveldlaan 1, Roermond bc , Onderwijsassistent 93500, Onderwijsassistent leerweg bol, niveau 4, locatie Drakesteijn 5, Weert bc , Veiligheid en vakmanschap (Aankomend medewerker grondoptreden) 95081, Veiligheid en vakmanschap (Aankomend medewerker grondoptreden) leerweg bol, niveau 2, locatie Kasteel Hillenraedtstraat 1, Roermond De resultaten van het onderzoek naar kwaliteitsborging leiden, in combinatie met geconstateerde risico s en de resultaten van de kwaliteitsonderzoeken, tot een risicobepaling voor uw instelling. De omvang van de risico's bepaalt mede het vervolgtoezicht. Pagina 6 van 67

7 De inspectie heeft zich bij het onderzoek gebaseerd op het Toezichtkader bve Dit is te vinden op De normering is als bijlage I toegevoegd aan dit rapport. In hoofdstuk 2 leest u de conclusie waaronder ook het vervolgtoezicht voor de instelling. De resultaten van het instellingsbrede onderzoek naar kwaliteitsborging en de resultaten van de analyse kunt u lezen in hoofdstuk 3. De resultaten van de kwaliteitsonderzoeken van de onderzochte opleidingen vindt u in hoofdstuk 4. Pagina 7 van 67

8 Pagina 8 van 67

9 2 CONCLUSIE EN VERVOLGTOEZICHT In dit hoofdstuk geven we aan welke conclusie we trekken uit het onderzoek naar de Staat van de instelling en wat het vervolgtoezicht voor u inhoudt. Het vervolgtoezicht is bepaald op basis van het onderzoek naar kwaliteitsborging, de kwaliteitsonderzoeken en de analyse van risico s. In het onderzoek naar de Staat van de instelling geven we aan in welke mate er risico s zijn geconstateerd. Daarbij gebruiken we een driedeling: geen risico s, enkele risico s of veel risico s. Voorts geven we een oordeel over de kwaliteitsborging. We gebruiken daarbij een vierdeling: goed, voldoende, onvoldoende of slecht. In de hoofdstukken 3 en 4 volgt een nadere onderbouwing van de oordelen. 2.1 Conclusie Op basis van de resultaten uit het onderzoek naar de Staat van de instelling concluderen we dat er enkele risico s zijn voor de kwaliteit van het onderwijs. Deze risico s komen naar voren bij de kwaliteit van de examens. Daarnaast concluderen we dat de kwaliteitsborging bij Gilde opleidingen op instellingsniveau voldoende is. We gaan er op basis van deze conclusie vanuit, dat de instelling voldoende zicht heeft op de onderwijskwaliteit en in staat is om ook in de toekomst de risico s voor de onderwijskwaliteit te voorkomen, danwel vroegtijdig te signaleren en te verhelpen. Bovenstaande leidt er toe dat we geen aanvullend vervolgtoezicht uitvoeren bij Gilde Opleidingen. De instelling heeft reeds in beeld welke risico's het betreft en heeft maatregelen genomen of gepland. Voor het onderzoek naar de Staat van de instelling hebben we vijf opleidingen onderzocht. Drie opleidingen zijn op alle onderdelen als voldoende beoordeeld. Bij twee opleidingen zijn tekortkomingen geconstateerd en vindt vervolgtoezicht plaats, zoals is te lezen in de volgende paragraaf. 2.2 Vervolgtoezicht Vervolgtoezicht naar aanleiding van onderzoek kwaliteitsborging instellingsbreed De kwaliteitsborging bij Gilde opleidingen is voldoende. Er is geen aanleiding om aanvullend vervolgtoezicht uit te voeren. Pagina 9 van 67

10 Vervolgtoezicht financiële continuïteit Er is geen vervolgtoezicht op het gebied van de financiële continuïteit. De inspectie ziet geen aanleiding tot het aanpassen van het financiële continuïteitstoezicht en kent daarom opnieuw het basisarrangement toe aan Gilde Opleidingen. Dit besluit is gebaseerd op de door de instelling zelf verzamelde en verstrekte informatie en de toelichtingen daarop. De inspectie heeft de informatie beoordeeld op aannemelijkheid. Zij heeft hierop echter geen controlewerkzaamheden verricht. Ook heeft de inspectie de volledigheid en/of de juistheid van de gegevens in de (financiële) administratie van de instelling niet onderzocht. Het onderzoek is niet te kwalificeren als een accountantsonderzoek. Vervolgtoezicht naar aanleiding van de vijf onderzochte opleidingen In onderstaande schema s is het vervolgtoezicht te lezen. Wij voeren dit vervolgtoezicht zoveel mogelijk gelijktijdig uit. Hierbij is de genoemde termijn in de waarschuwingsbrief van de minister leidend. Manager transport en logistiek (manager transport en logistiek), 25LT Beoordeling Toezichtvorm Vervolgtoezicht Kwaliteit examinering is onvoldoende. Aangepast toezicht vanwege onvoldoende De inspectie meldt het oordeel aan de minister. examenkwaliteit. De instelling ontvangt een waarschuwing. Na de in de waarschuwingsbrief opgenomen termijn volgt een onderzoek naar kwaliteitsverbetering. Niveau opbrengsten is onvoldoende* Aangepast toezicht vanwege onvoldoende Na circa een jaar onderzoek naar kwaliteitsverbetering* opbrengsten* Kwaliteitsborging is onvoldoende. Aangepast toezicht vanwege niet naleving van van de WEB. Circa een jaar na het definitieve rapport beoordelen wij de kwaliteitsborging opnieuw. * Het oordeel van de opbrengsten betreft de opleidingen binnen de bc-id, zie bijlage II voor het overzicht waaruit blijkt op welke opleidingen dit oordeel van toepassing is. In het vervolgtoezicht voor opbrengsten worden alle bijbehorende opleidingen betrokken. Pagina 10 van 67

11 Veiligheid en vakmanschap (Aankomend medewerker grondoptreden), 25LT Beoordeling Toezichtvorm Vervolgtoezicht Kwaliteit examinering is onvoldoende. Aangepast toezicht vanwege onvoldoende De inspectie meldt het oordeel aan de minister. examenkwaliteit. De instelling ontvangt een waarschuwing. Na de in de waarschuwingsbrief opgenomen termijn volgt een onderzoek naar kwaliteitsverbetering. Kwaliteitsborging is onvoldoende. Aangepast toezicht vanwege niet naleving van van de WEB. Circa een jaar na het definitieve rapport beoordelen wij de kwaliteitsborging opnieuw. Lopende toezichtactiviteiten voortvloeiend uit eerder inspectieonderzoek Op het moment van het vaststellen van het definitieve rapport van de Staat van de instelling hebben we geen kwaliteitsonderzoeken dan wel onderzoeken naar kwaliteitsverbetering in uitvoering dan wel in onze planning staan. Pagina 11 van 67

12 Pagina 12 van 67

13 3 INSTELLINGSBREDE RESULTATEN In dit hoofdstuk geven we de oordelen over de kwaliteitsborging op instellingsniveau weer. Tevens bespreken we op basis waarvan is bepaald in welke mate er risico s zijn bij de instelling. 3.1 Oordeel kwaliteitsborging op instellingsniveau Het onderzoek naar kwaliteitsborging heeft geleid tot het volgende oordeel: Kwaliteitsgebied Goed Voldoende Onvoldoende Slecht 4 Kwaliteitsborging Hieronder geven we het oordeel van de aspecten van het kwaliteitsgebied kwaliteitsborging weer. Een detaillering van het oordeel vindt u in bijlage III. Daarin is de beoordeling van de onderliggende indicatoren per aspect opgenomen. Gebied 4: Kwaliteitsborging Voldoende Onvoldoende 4.1 Sturing * 4.2 Beoordeling * 4.3 Verbetering en verankering * 4.4 Dialoog en verantwoording De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied. Beschouwing De kwaliteitsborging op instellingsniveau is voldoende. We hebben daarbij gekeken naar de wijze waarop het kwaliteitszorgsysteem is opgezet en in hoeverre de werking op uitvoeringsniveau zichtbaar is en resultaten laat zien. De gedegen overlegstructuur die alle niveaus omvat draagt in belangrijke mate bij aan de kwaliteitsborging. Gilde Opleidingen is er voldoende in geslaagd ook grip te krijgen op de borging van de kwaliteit op uitvoeringsniveau, al is er op punten nog versterking mogelijk. De sturing is voldoende. De laatste jaren heeft Gilde Opleidingen stevig ingezet op het verder ontwikkelen van het kwaliteitszorgsysteem. Het systeem kent een centraal uitgezette koers op hoofdlijnen, die is uitgewerkt in speerpunten op sectorniveau, waarbij het onderwijskundig leiderschap is belegd bij de tandem sectordirecteur/teammanager. De teams werken aan de sectorspeerpunten, eventueel aangevuld met teamspeerpunten. De sturing wordt ondersteund door de Gilde Beleidsmonitor (hierna: GBM). Hierin zijn de strategische doelen en Pagina 13 van 67

14 sectorspeerpunten zijn opgenomen. Deze vormen het aanknopingspunt voor de verantwoordingsgesprekken van de sectordirecteuren met het college van bestuur. De sectordirecteuren zijn verantwoordelijk voor het verzamelen van informatie over de opleidingen en de input vanuit de teams. Zij voeren daartoe overleg met de teammanagers en voeren ook verantwoordingsgesprekken met hen. De teammanagers zijn verantwoordelijk voor de vertaling van de speerpunten naar de teams en de realisatie daarvan met de teams. Zo wordt in de lijn ook gestuurd op resultaten. De GBM is een instrument dat het mogelijk maakt om de regie te houden, terwijl er toch professionele ruimte is voor de sectoren om bij de sector passend beleid te voeren binnen de kaders van de strategische doelen, onder andere om te kunnen inspelen op de eigenheid van het werkveld in de omgeving. Om te kunnen borgen dat de kwaliteit van opleidingen die op verschillende locaties worden aangeboden toch van eenzelfde niveau is, wordt gestuurd op uniformiteit van de belangrijkste processen van onderwijs en examinering. Met de GBM wordt de koers bewaakt. Door de inzet van onderwijskundigen en kwaliteitszorgmedewerkers per sector op de verschillende locaties wordt geborgd dat wordt gewerkt volgens de afspraken die de uniformiteit van processen moeten bewerkstelligen. Ook wordt zo geborgd dat het onderwijskundig leiderschap van sectordirecteur en teammanager bij elke opleiding leidt tot focus op kwaliteit en realisatie van de doelen van de instelling, de sector en de teams. Dit past bij de keuze van de instelling: er is geen aparte kwaliteitskolom georganiseerd. De verantwoordelijkheid voor de kwaliteit van het onderwijs ligt bij de sectordirecteuren en teammanagers. Het college van bestuur laat zich verder voor het bewaken van de grote lijnen en het kritisch volgen van de werking van het kwaliteitszorgsysteem bijstaan door het bestuursbureau. Hier werken medewerkers die onder andere gericht zijn op verbetering van de processen van onderwijs en examinering en de verbetering van het kwaliteitszorgsysteem. Zij coördineren op instellingsbrede thema's de activiteiten van de onderwijskundigen en kwaliteitszorgmedewerkers in de sectoren en zorgen voor onderlinge afstemming in het zogenaamde OKE-overleg (onderwijs/kwaliteit/examinering). Ook worden door het bestuursbureau sturingsgegevens verzameld en geanalyseerd en tot opleidingsprofielen samengebundeld. De sturingsinformatie is in veel gevallen tot op opleidingsniveau uitgesplitst en betreft de rendementen, vsv-cijfers, resultaten van tevredenheidsonderzoeken onder stakeholders en dergelijke. Deze informatie is voor alle managementniveaus digitaal beschikbaar in het managementinformatie portaal. Pagina 14 van 67

15 De beoordeling is als voldoende beoordeeld. De beoordeling van de kwaliteit van het onderwijs is vooral op sectorniveau uitgewerkt met sectorzelfevaluaties gekoppeld aan de GBM waaraan de sectordirecteur een verantwoording toevoegt en daarnaast is er een systeem van interne audits. De teammanagers zorgen voor evaluatieve input vanuit de teams. De systematische evaluatie op teamniveau is wel aanwezig met verschillende vormen van zelfevaluatie op basis van het toezichtkader, maar mist nog scherpte en is bij twee van de vijf opleidingen onvoldoende. Alle teams werken aan de speerpunten van de sector eventueel aangevuld met eigen doelstellingen. De speerpunten en doelen zijn veelal in een globaal activiteitenplan opgenomen of op onderdelen verwerkt in jaarplanningen en/of deelopdrachten. De aansluiting van zelfevaluaties van teams op dergelijke plannen is daardoor niet altijd optimaal. Het effect kan zijn dat niet alle informatie die van belang is het bovenliggende niveau bereikt. Het college van bestuur heeft weliswaar mede door de overlegstructuur de risico s goed in beeld, maar een meer eenduidige uitwerking van de plannen op teamniveau zal de kwaliteit en onderbouwing van de zelfevaluaties op teamniveau kunnen versterken, waardoor beter geborgd wordt dat alle evaluatieve input van de teams het sectorniveau bereikt. De instelling heeft eerder door middel van een kritische beschouwing op basis van de zelfevaluaties van de sectoren door het bestuursbureau al vastgesteld dat het systeem van kwaliteitszorg op teamniveau nog een verbeterslag behoeft op dit punt. Naar aanleiding daarvan is een servicedocument opgesteld met richtlijnen voor kwaliteitsborging door teams en wordt overwogen de GBM uit te breiden met speerpunten op teamniveau. Wij hebben overigens geconstateerd dat de teams met de goede dingen bezig zijn en weten hoe de stand van zaken is en waaraan moet worden gewerkt. Sterk is overigens dat de instelling oog heeft voor het organiseren van kritisch vermogen binnen de organisatie. Zo worden de zelfevaluaties per sector voorzien van een kritische beschouwing door een onafhankelijke deskundige. Dat is ook de werkwijze bij de jaarverslagen waarin de examencommissies de kwaliteit van de examinering evalueren en daarover verantwoording afleggen. De instelling werkt ook met interne audits, waarbij auditoren van buiten de onderzochte sector worden aangetrokken. De verbetering en verankering beschouwen wij eveneens als voldoende. Alle bezochte teams geven blijk van een goed kwaliteitsbewustzijn. Ook de teams waar wij tekortkomingen hebben geconstateerd, bleken zelf al bezig te zijn met verbeteringen. Kleine aanpassingen worden als vanzelfsprekend gemonitord in de werkoverleggen. Als er grotere verbeteringen nodig zijn of als het tekortkomingen betreft die sectorbreed spelen, dan wordt een verbeterplan opgesteld. Het valt op dat in de bezochte teams een ontwikkelgerichte attitude Pagina 15 van 67

16 aanwezig is en er ruimte is om elkaar aan te spreken. Dat draagt eraan bij dat de teams voortdurend werken aan verbetering. De onderwijskundigen en kwaliteitszorgmedewerkers zijn daar ook actief bij betrokken. Voor de verbeterplannen geldt nog wel dat aanscherping van formulering van doelstellingen en beoogde resultaten wenselijk is, zodat de bereikte resultaten beter kunnen worden geëvalueerd. De deskundigheidsbevordering van medewerkers is deels op centraal niveau en deels op sectorniveau bepaald. De scholingstrajecten sluiten aan bij de onderwerpen waaraan wordt gewerkt. Alle taken en verantwoordelijkheden rond de kwaliteitsborging zijn belegd. Samen met de adequaat ingerichte overlegstructuur en afspraken over de vormgeving van de dialoog met stakeholders zorgt dit ervoor dat de kwaliteitszorg voldoende is verankerd in de organisatie. Er zijn wel verschillen in ontwikkeling tussen de sectoren, zoals de instelling zelf ook heeft geconstateerd. De borging van de examinering is goed vormgegeven. Het functioneren van een van de sectorexamencommissies behoeft echter nog aandacht. De nadrukkelijke rol van de overlegstructuur in het kwaliteitszorgsysteem maakt dat de kwaliteit van het leiderschap van sectordirecteur en teammanager extra zwaar weegt. Gezien de eerder genoemde verbeterpunten kan hierin een risico liggen voor de verankering. Dat is een aandachtspunt. Het college van bestuur is zich hiervan bewust. De interne en externe dialoog zijn als voldoende beoordeeld. De interne dialoog wordt in alle sectoren gevoerd. De intensiteit verschilt, maar de meeste sectoren kennen regelmatig georganiseerde studentengesprekken, naast de gebruikelijke tevredenheidsonderzoeken. Het college van bestuur heeft verder periodiek overleg met de studentenraad. Er zijn intensieve contacten met de medewerkers op en tussen de verschillende organisatieniveaus, waarbij ook verantwoording aan de orde is. De externe dialoog is goed vormgegeven. Er is sprake van betrokkenheid van het werkveld bij alle onderzochte opleidingen, zowel op het gebied van ontwikkeling van het onderwijs als op het gebied van examinering. Ook wordt het werkveld regelmatig uitgenodigd om evaluatieve informatie te geven. Hiervoor zijn onder andere klankbordgroepen in het leven geroepen. Daarnaast is Gilde Opleidingen betrokken bij of initiator van diverse samenwerkingsinitiatieven in de regio met zowel werkveld als andere instellingen en instanties. Tenslotte legt het college van bestuur publieke verantwoording af door middel van het geïntegreerde jaarverslag. Pagina 16 van 67

17 3.2 Risico s op relevante indicatoren Bij het bepalen van de risico s in de zin van het toezichtkader hebben we, in samenhang met de toezichthistorie, gekeken naar de kwaliteit van onderwijs en examinering, de opbrengsten, de tevredenheid van studenten, medewerkers en werkgevers, de stabiliteit van organisatie en management en de financiële continuïteit. Het onderzoek heeft geleid tot de volgende risicobepaling: Mate van risico's Geen Enkele Veel Kwaliteit onderwijs Op basis van de onderzoeken bij de opleidingen beoordelen wij de risico s voor de kwaliteit van het onderwijs als geen tot gering. De toezichtshistorie geeft geen aanleiding een andere inschatting te maken. De kwaliteit van het onderwijs is voldoende; bij vier van de vijf opleidingen zelfs goed. Slechts bij één opleiding is één indicator als onvoldoende beoordeeld. Bij alle opleidingen hebben we betrokken docententeams aangetroffen, die mede op basis van gesprekken met studenten en andere stakeholders voortdurend gericht zijn op verbetering van het onderwijs. De opleidingen kennen alle een goede opbouw in het programma en een goede balans tussen theorie en praktijk. De begeleiding van de studenten op school en in de praktijk is goed vormgegeven. De kwaliteit van het didactisch handelen is bij alle opleidingen voldoende tot goed. Ook de betrokkenheid van het werkveld is adequaat georganiseerd en draagt bij aan een goede aansluiting tussen theorie en praktijk. Wij hebben geen aanwijzingen dat de kwaliteit van het onderwijs bij andere opleidingen niet in orde zou zijn. Wat betreft vavo heeft de instelling kunnen aantonen dat de risico's in beeld zijn. Kwaliteit examinering Op basis van ons onderzoek bij de opleidingen schatten wij de risico s voor de examinering in als gering tot matig. Dat is vooral terug te voeren op de onvoldoende kwaliteit van de examinering in één sector. De tekortkomingen zitten vooral bij het functioneren van de betrokken examencommissie waardoor er risico s zijn voor de borging van de examinering bij die sector. Bij de onderzochte opleidingen in de andere sectoren is de kwaliteit van de examinering voldoende en de betrokken examencommissies functioneren naar behoren. Op instellingsniveau wordt veel aandacht besteed aan het versterken Pagina 17 van 67

18 van de processen van examinering, de borging en de deskundigheid van de bij examinering betrokkenen door middel van scholing. De instelling heeft laten zien dat de risico's in beeld zijn en waar nodig maatregelen worden genomen. Opbrengsten De stijgende lijn van de opbrengsten op het instellingsniveau heeft zich ook in doorgezet. Het jaarlijks rendement (JR) is met bijna 5% gestegen tot 78,6%, terwijl het diplomarendement (DR) met ca. 2,5% toenam tot 77,2%. Wij beoordelen de risico's voor de rendementen als geen tot gering. Wat betreft vsv is in een lichte stijging van het aantal vsv ers zichtbaar, maar het vsv-percentage van Gilde opleidingen ligt voor het mbo met 5,9 procent wel onder het landelijk gemiddelde van 6,9 procent. De opbrengsten bij het vavo liggen in wat betreft het driejaarsgemiddelde boven de norm, behalve voor de afdeling vwo. Deze afdeling heeft voor het gemiddelde CE-cijfer en de zorgvuldigheid van de procedures tijdens de examens onder de norm gescoord, waardoor wij voor vavo de inschatting enkele risico s van toepassing achten. Over het geheel genomen beoordelen wij de risico s voor de opbrengsten bij Gilde Opleidingen echter als geen tot gering. Tevredenheid studenten/medewerkers/werkgevers. Wij beoordelen de risico s op het punt van de tevredenheid van de genoemde stakeholders als geen tot gering. Studenten zijn volgens de JOB Monitor 2012 tevreden. De opleidingen scoren gemiddeld een 6,9 en de school is beoordeeld met een 6,3. Deze scores komen min of meer overeen met het landelijk gemiddelde. De tevredenheid van de medewerkers is in april 2013 gemeten. De medewerkers waren over de hele linie tevreden. Gilde Opleidingen scoort op dit punt iets beter dan de benchmark MBO. Bedrijven zijn volgens het Geïntegreerd jaardocument van de instelling overwegend tevreden. Er is geen recente informatie uit enquêtes. De instelling heeft in afwachting van de landelijk te ontwikkelen bpv-monitor op andere wijze informatie verzameld over de tevredenheid van bedrijven. De dialoog met het bedrijfsleven is goed georganiseerd en uit onderzoek bij de opleidingen is gebleken dat in die contacten regelmatig gevraagd wordt naar de tevredenheid van de bedrijven. Pagina 18 van 67

19 Stabiliteit organisatie en management Het college van bestuur bestaat uit twee leden. Recent is het voorzitterschap overgedragen tussen de leden van het college. De gewezen voorzitter blijft aan als lid van het college. In voorbereiding op zijn terugtreding uit het college van bestuur te zijner tijd wordt een nieuw lid voor het college van bestuur geworven. De sectoren worden aangestuurd door sectordirecteuren. De sectordirecteuren sturen samen met de teammanagers de opleidingsteams aan. Daarbij is sprake van een opleidingsinhoudelijk teammanager en een teammanager die een team op locatie aanstuurt. Daarnaast worden de ondersteunende diensten geleid door de dienstdirecteuren. Binnen de sector Economie is tijdelijk een probleem gerezen op directieniveau, maar daarvoor heeft het college van bestuur maatregelen genomen. Over het geheel genomen beoordelen wij de risico s voor organisatie en management als geen tot gering. Financiële continuïteit Uit de financiële risicoanalyse blijken geen verhoogde financiële risico s. Er zijn geen aanwijzingen dat de financiële continuïteit binnen afzienbare termijn in het geding is. De solvabiliteit 2 (2012: 0,43; 2011: 0,43) van de instelling is stabiel en bevindt zich boven de signaleringsgrens van 0,3. De liquiditeit bevindt zich vanaf 2011 boven de signaleringsgrens van 0,5 (2012: 0,62; 2011: 0,60). De rentabiliteit heeft de afgelopen vijf jaar een, weliswaar wisselend, maar structureel negatief karakter. De negatieve rentabiliteit in 2012 wordt mede veroorzaakt door de afwaardering. Het resultaat exclusief impairment is positief. De instelling heeft aangegeven dat de aanhoudende negatieve rentabiliteit tevens wordt veroorzaakt, doordat het aantal deelnemers sterker daalde dan de formatie. De instelling heeft in 2013 maatregelen getroffen om de formatie in lijn te krijgen met de (verwachte) deelnemersontwikkeling. Op basis van een interne analyse en de omgevingsomstandigheden is het de verwachting dat de daling nog beperkt zal doorzetten. Uit het masterplan blijkt dat de instelling het aantal vierkante meters fors wil terugdringen. De instelling is voornemens om de komende jaren circa 30 mln. te investeren in de instandhouding en nieuwbouw van haar huisvesting. Op basis van de huidige financiële positie en het afgesloten Pagina 19 van 67

20 financieringsarrangement met het ministerie van Financiën verwacht de instelling dit met eigen middelen te kunnen financieren. Samenvattend We komen op grond van bovenstaande informatie voor Gilde Opleidingen uit op enkele risico's vanwege de inschatting dat er bij een van de sectoren risico s zijn op het gebied van examinering. Daarnaast is gebleken dat de kwaliteit van het onderwijsproces bij vier van de vijf opleidingen goed is en dat de opbrengsten voor vier van de vijf opleidingen voldoende zijn. De tevredenheid van de studenten, medewerkers en bedrijfsleven is bovengemiddeld. Risico's voor de financiële continuïteit waren er evenmin. Het college van bestuur heeft er blijk van gegeven dat de risico s in beeld zijn. De kwaliteitsborging op instellingsniveau is voldoende en wordt verder versterkt. We gaan er daarom vanuit dat het college van bestuur in staat is toekomstige risico's tijdig te detecteren en weg te werken. Pagina 20 van 67

21 4 RESULTATEN PER OPLEIDING In dit hoofdstuk vermelden we per opleiding de oordelen over de onderzochte kwaliteitsgebieden. Tevens geven we per opleiding een beschouwing. 4.1 Ondernemer horeca/bakkerij (Manager/ondernemer horeca) Het kwaliteitsonderzoek bij Ondernemer horeca/bakkerij (Manager/ondernemer horeca), 25LT 90303, niveau 4, locatie Laaghuissingel 4, Venlo heeft geleid tot de volgende oordelen: Kwaliteitsgebied Goed Voldoende Onvoldoende Slecht 1 Onderwijsproces 2 Examinering en diplomering 3 Opbrengsten 4 Kwaliteitsborging Kwaliteitsgebied Voldoet Voldoet niet 5 Naleving wettelijke vereisten Het kwaliteitsonderzoek heeft geleid tot het oordeel goed of voldoende voor de vijf kwaliteitsgebieden. Dat betekent dat de inspectie geen aanleiding heeft vervolgonderzoek uit te voeren of afspraken met het college van bestuur/de directie te maken voor deze opleiding. Oordeel per aspect Hieronder geven we het oordeel over de aspecten van de vijf kwaliteitsgebieden weer. In bijlage IV is de beoordeling van de onderliggende indicatoren van de betreffende aspecten per kwaliteitsgebied opgenomen. Gebied 1: Onderwijsproces Voldoende Onvoldoende Programma 1.1 Samenhang 1.2 Maatwerk Leren in de onderwijsinstelling 1.3 Didactisch handelen* 1.4 Leertijd 1.5 Leeromgeving Begeleiding 1.6 Intake & plaatsing Pagina 21 van 67

22 Gebied 1: Onderwijsproces Voldoende Onvoldoende 1.7 Studieloopbaanbegeleiding* 1.8 Zorg Leren in de beroepspraktijk 1.9 Beroepspraktijkvorming* Gebied 2: Examinering en diplomering Voldoende Onvoldoende 2.1 Exameninstrumentarium* 2.2 Afname en beoordeling* 2.3 Diplomering* Gebied 3: Opbrengsten Voldoende Onvoldoende 3.1 Rendement Gebied 4: Kwaliteitsborging Voldoende Onvoldoende 4.1 Sturing * 4.2 Beoordeling * 4.3 Verbetering en verankering * 4.4 Dialoog en verantwoording Gebied 5: Naleving wettelijke vereisten Voldoet Voldoet niet 5.1 Naleving wettelijke vereisten De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied. Beschouwing Algemeen Het team HOM (horeca ondernemer/manager) heeft met de opleiding Manager/ ondernemer horeca een aansprekende opleiding neergezet met ruimte voor verdieping en initiatieven van studenten. De leden van het team zijn goed op elkaar ingespeeld. Het team is zeer betrokken bij de ontwikkeling van de student en heeft de ambitie om de beste hotelschool van Nederland te worden. Het team is daartoe voortdurend in contact met alle interne en externe stakeholders en gebruikt hun input voor verbetering van de opleiding. De overlegstructuur is adequaat vormgegeven en is een belangrijk onderdeel van de kwaliteitsborging. Onderwijsproces Het onderwijsproces hebben wij beoordeeld als goed. Programma, didactisch handelen, begeleiding en bpv sluiten goed op elkaar aan en studenten zijn te spreken over de ontwikkelingsmogelijkheden bij deze opleiding. Het programma kent een evenwichtige opbouw waarbij de student kan toegroeien naar een grotere zelfstandigheid. De combinatie van theorie en Pagina 22 van 67

23 praktijk en het aanbod van verdiepende vakken in de vrije ruimte draagt eraan bij dat de studenten gevarieerde ervaringen kunnen opdoen. Ook in het eerste leerjaar doen studenten ruimschoots ervaring op in de binnenschoolse praktijk door programmering van twee dagen praktijk en drie dagen theorie per week. In volgende leerjaren neemt de beroepspraktijkvorming (hierna: bpv) naast de binnenschoolse praktijk een steeds grotere plaats in. Er is voldoende maatwerk. Voor havisten is een verkort traject van twee jaar ingericht. Studenten die meer tijd nodig hebben kunnen onder andere hun docent om extra uitleg of extra lessen vragen. Initiatieven van studenten worden zo mogelijk in de vorm van projecten ingepast in het programma. De intake is zorgvuldig en de verzamelde gegevens worden bij de begeleiding van de studenten meegenomen. Het team heeft gekozen voor een mentorsysteem per leerjaar om op die manier beter te kunnen aansluiten bij de specifieke competenties van docenten, waardoor de begeleiding aan kwaliteit wint. Elke tien weken wordt met de student de voortgang besproken, met name op het punt van beroepshouding en vaardigheden. Tijdens het wekelijkse mentoruur nodigt de mentor die studenten uit die dat nodig hebben. Alle studenten worden door het team tenminste één keer per periode besproken in de rapportvergaderingen. De begeleiding in de bpv is goed georganiseerd. In de bpv wordt gewerkt met geschoolde leermeesters vanuit de bpv-bedrijven en bpv-begeleiders vanuit de opleiding. Kort na de start van de bpv neemt de bpv-begeleider contact op met het bedrijf ter bespreking van de bpv-opdrachten en eventuele examens. Studenten moeten elke 3 weken via verslag te doen van hun voortgang. De bpv wordt afgerond met een eindgesprek. Op die manier is men goed in staat de student te volgen en in te springen als er problemen zijn. In leermeesterbijeenkomsten bespreekt het team van de opleiding ook de opdrachten en de beoordeling van de bpv en de eventuele examens. Examinering en diplomering De examinering en diplomering hebben wij als voldoende beoordeeld. Instrumentarium en afname en beoordeling kunnen op een aantal punten worden verbeterd, maar zijn over het geheel genomen voldoende. De examencommissie functioneert goed en heeft zicht op de examinering en de relevante verbeterpunten. De beroepsgerichte examens zijn deels ingekocht. De kerntaken 1 en 2 worden door de opleiding zelf ontwikkeld. Wat betreft een aantal opdrachten, waaronder het opstellen van een ondernemingsplan, zijn maatregelen genomen die moeten Pagina 23 van 67

24 borgen dat studenten alleen worden beoordeeld op eigen werk. Bijvoorbeeld het werken in tweetallen wordt gevolgd via de logboeken en reflectieverslagen van de studenten en de voortgangsgesprekken met de betrokken docent. De kerntaken 4 en 5 zijn ingekocht bij Examenwerk. Deze examens zijn eerder door de inspectie als voldoende beoordeeld. De examens Nederlands, Engels en Duits worden ingekocht bij De Vries Taaltraining. Deze examens zijn eerder door de inspectie als voldoende beoordeeld. Voor rekenen is aangesloten bij de pilot COE. Voor loopbaan & burgerschap is een verantwoording aangeleverd. De examens voor Nederlands, moderne vreemde talen en rekenen worden dit jaar nog niet in de beoordeling meegenomen. De afname van examens gebeurt onder andere in de binnenschoolse praktijk samen met een beoordelaar uit het werkveld en in de bpv. De afname en beoordeling zijn in het algemeen deugdelijk. Voor zowel theorie- als (binnen- en buitenschoolse) praktijkexamens zijn maatregelen genomen om de betrouwbaarheid van de beoordeling te borgen. De examens die in de bpv plaatsvinden worden afgenomen door gecertificeerde leermeesters. De beoordelaar vanuit de opleiding ziet toe op de betrouwbaarheid van de beoordeling door tevoren de leermeesters duidelijk te instrueren (ook tijdens leermeesterbijeenkomsten) en tijdens het eindgesprek via de eindbeoordeling. Het team is zich ervan bewust dat hierin nog verbeterd kan worden en heeft daarom het verschil tussen ontwikkelingsgerichte opdrachten en examinering in de bpv duidelijker gemarkeerd. Daarnaast heeft de examencommissie steekproefsgewijze bijwoning bij examens in de bpv gepland. Het examenproces is met een onafhankelijke deskundige doorgenomen om verbeteringen te kunnen aanscherpen. De examencommissie is zich bewust van zijn verantwoordelijkheden rond de borging van de kwaliteit van de examinering. Zowel voor borging van de deskundigheid van beoordelaars als voor checks op de afname en beoordeling van examens zijn voldoende maatregelen genomen en waar nodig verbeterpunten benoemd. Opbrengsten De opbrengsten zijn met een jaarresultaat van 73,0 procent en een diplomaresultaat van 73,0 procent voldoende. Voor de beoordeling van de opbrengsten, gebaseerd op de BRON-gegevens zijn de resultaten van de bc-id 152, niveau 4 gebruikt. In bijlage II is te zien welke opleidingen hierbij betrokken zijn. Pagina 24 van 67

25 Kwaliteitsborging Wij hebben de kwaliteitsborging bij deze opleiding als voldoende beoordeeld. De kwaliteitsborging van de opleiding wordt sterk bepaald vanuit het Gilde- en sectorniveau. De Gilde- en sectordoelen worden vertaald en bewaakt door de teammanager. Doelen en beoogde resultaten op teamniveau sluiten op hoofdlijnen aan bij de sectorspeerpunten en zijn vastgelegd in een beknopt teamplan. Het team weet waaraan moet worden gewerkt. De formulering en evaluatie van doelen, verbetermaatregelen en beoogde resultaten op opleidingsniveau kan nog aan kracht winnen door deze meer smart vast te leggen en de link met de jaarplanning te verduidelijken. De sturing vindt plaats vanuit de strategische doelstellingen en sectorspeerpunten en krijgt op teamniveau vorm in de vertaling naar een teamplan, waarin ook teamspeerpunten zijn benoemd. Het teamplan is beknopt van opzet. Hierin is weliswaar niet duidelijk beschreven wie wat wanneer gaat doen en de beoogde resultaten zijn beperkt uitgewerkt, maar de teammanager heeft de acties naar aanleiding van de teamspeerpunten weggezet in de jaarplanning van het team en in deelplannen, waardoor uitvoering is geborgd. De overlegstructuur tussen Gilde centraal, de sector, de afdelingen en opleidingen is erop gericht voortdurende communicatie over de voortgang van werkzaamheden tussen alle niveaus en de verschillende locaties open te houden. Op die manier wordt afstemming tussen de niveaus in de lijn en tussen teams en locaties geborgd. De sturing is daarom voldoende. Een verder uitgewerkt teamplan kan voor alle betrokkenen evenwel een duidelijker aanknopingspunt voor evaluatie bieden. Monitoring en evaluatie zijn voldoende. In de teamoverleggen wordt de voortgang besproken en tweemaal per jaar wordt geëvalueerd met het team. De teammanager stelt jaarlijks een zelfevaluatie op na overleg met het team. De input voor evaluatie betreft vooral de resultaten van de verschillende enquêtes, rendementsgegevens en de gesprekken met stakeholders in de verschillende overlegcircuits. Daarnaast worden er periodiek interne audits uitgevoerd. Uit de gesprekken met het team wordt duidelijk dat het team met de goede dingen bezig is en voortdurend gericht is op verbetering van de kwaliteit van onderwijs en examinering. Taken en verantwoordelijkheden rond kwaliteitsborging zijn belegd. De verankering op teamniveau kan echter nog aan stevigheid winnen door explicieter aan te sluiten bij sector- en teamspeerpunten. Over het geheel genomen hebben wij de verbetering en verankering als voldoende beoordeeld. Pagina 25 van 67

26 De interne en externe dialoog is krachtig georganiseerd. De contacten met het werkveld zijn divers en leveren veel informatie op. De betrokkenheid van het werkveld bij onderwijs en examinering is goed geregeld. De dialoog met studenten is met diverse instrumenten geborgd. Behalve met tevredenheidsonderzoeken worden studenten bijvoorbeeld ook bevraagd over de kwaliteit van de docenten. De keuze van de teammanager om nog enkele uren les te geven draagt ook bij aan een goede dialoog, zowel met studenten als met docenten. Wettelijke vereisten De opleiding voldoet aan de onderzochte wettelijke eisen. Schoolkosten/wettelijke bijdragen De opleiding voldoet aan de eisen gesteld in artikel van de WEB. 4.2 Manager transport en logistiek (manager transport en logistiek) Het kwaliteitsonderzoek bij Manager transport en logistiek (manager transport en logistiek), 25LT 91870, niveau 4, locatie Hagerhofweg, Venlo heeft geleid tot de volgende oordelen: Kwaliteitsgebied Goed Voldoende Onvoldoende Slecht 1 Onderwijsproces 2 Examinering en diplomering 3 Opbrengsten 4 Kwaliteitsborging Kwaliteitsgebied Voldoet Voldoet niet 5 Naleving wettelijke vereisten De kwaliteitsgebieden examinering en diplomering/ opbrengsten/ kwaliteitsborging zijn niet voldoende. Hierdoor vindt vervolgtoezicht plaats vanwege onvoldoende examenkwaliteit/ onvoldoende opbrengsten / niet naleving van de wettelijke vereisten op het gebied van kwaliteitsborging. Oordeel per aspect Hieronder geven we het oordeel over de aspecten van de vijf kwaliteitsgebieden weer. In bijlage IV is de beoordeling van de onderliggende indicatoren van de betreffende aspecten per kwaliteitsgebied opgenomen. Pagina 26 van 67

27 Gebied 1: Onderwijsproces Voldoende Onvoldoende Programma 1.1 Samenhang 1.2 Maatwerk Leren in de onderwijsinstelling 1.3 Didactisch handelen* 1.4 Leertijd 1.5 Leeromgeving Begeleiding 1.6 Intake & plaatsing 1.7 Studieloopbaanbegeleiding* 1.8 Zorg Leren in de beroepspraktijk 1.9 Beroepspraktijkvorming* Gebied 2: Examinering en diplomering Voldoende Onvoldoende 2.1 Exameninstrumentarium* 2.2 Afname en beoordeling* 2.3 Diplomering* Gebied 3: Opbrengsten Voldoende Onvoldoende 3.1 Rendement Gebied 4: Kwaliteitsborging Voldoende Onvoldoende 4.1 Sturing * 4.2 Beoordeling * 4.3 Verbetering en verankering * 4.4 Dialoog en verantwoording Gebied 5: Naleving wettelijke vereisten Voldoet Voldoet niet 5.1 Naleving wettelijke vereisten De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied. Beschouwing Algemeen Het team Transport en Logistiek is een deskundig team dat bezig is om zowel de opbouw van het programma als de exameninstrumenten opnieuw in te richten, omdat het team concludeerde dat de gekozen structuur en systematiek voor competentiegericht onderwijs in de praktijk te omslachtig en te weinig Pagina 27 van 67

28 flexibel is. Signalen van studenten vormden hier mede de aanleiding voor. Het team is eind 2011 zelf tot de conclusie gekomen dat een substantiële verbetering nodig was. De eerste resultaten zijn inmiddels wel zichtbaar in het programma van leerjaar 1 en 2 maar nog niet in de examinering. Hoewel de verbeteraanpak voldoet, is echter van systematische kwaliteitsborging nog geen sprake. Daarvoor zijn de beoordeling van de eigen onderwijskwaliteit en de verankering van de kwaliteitsborgingsystematiek nog te zwakke schakels in het geheel. Onderwijsproces De kwaliteit van het onderwijsproces is voldoende. Kenmerkend voor het onderwijsproces is de aandacht voor structuur en het zorgen voor een werkzame sfeer. Het team verzorgt een degelijke opleiding met goed voorbereide lessen en volgt de voortgang van de studenten nauwgezet. Op het gebied van maatwerk dient de opleiding echter nog verbeteringen aan te brengen. Het programma vertoont een inhoudelijk goede samenhang en het didactisch concept van het team is hierin verwerkt. Inhoudelijk is in het programma in de eerste twee leerjaren de nadruk gelegd op werkzaamheden in de transport en logistiek en is de begeleiding tijdens de lessen intensief. In de leerjaren drie en vier wordt de aandacht verlegd naar leidinggeven en management. Dan wordt ook meer zelfstandigheid van studenten verwacht en neemt de intensiteit van de begeleiding af. Aandachtspunt in het programma is dat er onvoldoende sprake is van een gestructureerde (terug)koppeling van bpv-ervaringen en (klassikale) theorie. Maatwerk hebben wij als onvoldoende beoordeeld, want het beginniveau van studenten bij de talen loopt sterk uiteen en in het programma wordt hiermee onvoldoende rekening gehouden. Dit is bij rekenen overigens wel het geval. Dit kan hier ook gemakkelijker, omdat er gekozen is voor de werkvorm zelfstandig werken en leren door studenten. Bij de talen, met een klassikale aanpak, is er geen gedifferentieerd aanbod. Wel is de doorstroom naar het hbo vergemakkelijkt: in samenspraak met het hbo is een programma met extra wiskunde samengesteld dat studenten als keuzeprogramma kunnen volgen in het vierde leerjaar. Het didactisch handelen van het team is voldoende. Docenten hanteren verschillende werkvormen en het rooster laat ook zien dat studenten afwisselende lesdagen hebben. De begeleiding is adequaat en studenten krijgen stelselmatig feedback. Dit zorgt ervoor dat studenten weten wat hun sterke punten en wat hun aandachtspunten zijn. Pagina 28 van 67

29 Ook zijn we positief over de wijze waarop de opleiding mogelijkheden te baat neemt om zittende studenten bij de uitvoering van de opleiding te betrekken. Zij hebben een rol bij de voorlichting voor aankomende studenten en bij de voorlichting bij de start van de bpv voor jongerejaarsstudenten. Dit leidt ertoe dat studenten de voorlichting als realistisch ervaren. De intake is ook gedegen, mede omdat de informatie van de voorgaande school daarbij wordt gebruikt en het team de diplomakans inschat. Deze inschatting wordt ook gebruikt bij het evalueren en in kaart brengen van oorzaken van uitval. Intake en plaatsing zijn dan ook als voldoende beoordeeld. De studieloopbaanbegeleiding is eveneens voldoende. De trajectbegeleiders brengen de voortgang in de diverse vakken en beroepspraktijkvorming (bpv) nauwgezet in kaart en bespreken dit met de studenten. Het team signaleert mogelijke knelpunten bij studenten en stelt bijvoorbeeld in samenspraak met een student een plan van aanpak op om studievertraging te voorkomen. Indien nodig verwijst de trajectbegeleider door naar specialistischer vormen van hulp. De beroepspraktijkvorming is goed opgezet. De opdrachten sluiten aan bij het lesprogramma en studenten worden geplaatst bij een bedrijf dat zo veel mogelijk aansluit bij hun wensen. De begeleiding vanuit de opleiding is systematisch van karakter. Studenten waarderen het leereffect van de bpv en de begeleiding daarbij. Examinering en diplomering De examinering en diplomering is op alle aspecten als onvoldoende beoordeeld. Het instrumentarium voldoet niet, het proces van afname en beoordeling is ondeugdelijk en de examencommissie heeft onvoldoende zicht op de kwaliteit van de examinering. De bevindingen die hieraan ten grondslag liggen komen overeen met de conclusies die het team en de examencommissie eerder hebben getrokken. De onderzochte examens die het team zelf heeft geconstrueerd voldoen niet aan de inhoudelijke en toetstechnische eisen. Inhoudelijk gezien betreft de tekortkoming met name de toetsvorm: veel examens bestaan uit het maken van een verslag en het voeren van een gesprek naar aanleiding van dat verslag. Daarmee ontstaat echter onvoldoende zicht op alle vereiste competenties van de kandidaten. Daarnaast wordt bij veel examens niet de volledige inhoud van de werkprocessen gedekt. Toetstechnisch voldoen de exameninstrumenten evenmin. Zo zijn er bij veel examens geen beoordelingscriteria opgesteld, zitten er fouten en tegenstrijdigheden in de toetsen en bevatten de instructies aan de examenkandidaten onvoldoende informatie over het gewenste resultaat van het Pagina 29 van 67

30 examen. Bovendien borgt de cesuur per afzonderlijke toets onvoldoende dat minimaal de wezenlijke criteria voldoende moeten zijn. Bovenstaande oordelen betreffen zowel de beroepsgerichte examens als de zelf geconstrueerde examens voor de mondelinge vaardigheden Nederlands. De overige exameninstrumenten voor de moderne vreemde talen en de schriftelijke vaardigheden Nederlands worden ingekocht bij De Vries Taaltrainingen. Deze zijn eerder door ons beoordeeld en in orde bevonden. De examens Nederlands en MVT worden overigens dit jaar niet betrokken in de beoordeling van de examinering. Eind 2011 heeft het team op basis van een analyse van de examens geconstateerd dat aanpassing van de examens noodzakelijk was. Daarom is in 2012 zijn gestart met het opstellen van een nieuw examenplan en het herzien/reconstrueren van de examens. Dit verbetertraject is echter nog niet voor alle leerjaren afgerond waardoor resultaten nog niet zichtbaar zijn en daarom niet in ons oordeel zijn betrokken. De onderzochte examens vinden in zeer beperkte mate in de praktijk plaats en zijn daardoor in onvoldoende mate authentiek. Evenmin zijn beoordelaars uit de praktijk betrokken. In het verbeterplan van het team is daarom ook voorzien in een grotere mate van examinering in de praktijk. De betrouwbaarheid van de beoordeling is voor de onderzochte examens onvoldoende geborgd. Beoordelingen worden veelal gebaseerd op het oordeel van één beoordelaar en de verslaglegging van de beoordeling is dermate summier dat na afloop nauwelijks mogelijkheden bestaan om de betrouwbaarheid van het oordeel te toetsen. De diplomering als geheel is onvoldoende, maar de besluitvorming rond diplomering is wel voldoende: de examenresultaten worden zorgvuldig geregistreerd en conform een checklist gecontroleerd. De verantwoordelijkheid van de examencommissie is echter als onvoldoende beoordeeld. De examencommissie heeft namelijk geen zicht en grip op de examinering en kan derhalve onvoldoende verantwoordelijkheid nemen voor de kwaliteit ervan. Zo heeft de commissie geen beeld van de deskundigheid van de betrokkenen en heeft onvoldoende maatregelen genomen om de kwaliteit van de exameninstrumenten te verbeteren. De examencommissie heeft vorig jaar wel twee examens beoordeeld. Geconstateerde onvolkomenheden in deze toetsen hebben echter niet geleid tot maatregelen of nader onderzoek en/of analyse door de examencommissie. De examencommissie is recent gestart met toezicht op de kwaliteit van de afname en beoordeling van enkele theorie-examens, maar er is nog Pagina 30 van 67

31 geen toezicht op de afname en beoordeling van de praktijkexamens, waardoor de examencommissie geen maatregelen kan treffen ter verbetering van de kwaliteit. We hebben bovendien geconstateerd dat de examencommissie geen aanscherping van de globaal geformuleerde controleactiviteiten heeft aangebracht waardoor we niet kunnen zien of en op welke termijn de examencommissie hierin verbetering zal aanbrengen. Wij sluiten niet uit dat het grote aantal opleidingen waarvoor de examencommissie verantwoordelijk is, een van de factoren is die ertoe leidt dat het zicht op de examinering slechts in beperkte mate kan worden gerealiseerd gezien de beschikbare tijd van de commissieleden. Opbrengsten De opbrengsten zijn met een jaarresultaat van 58,6 procent en een diplomaresultaat van 65,4 procent onvoldoende. Voor de beoordeling van de opbrengsten, gebaseerd op de BRON-gegevens zijn de resultaten van de bc-id 111, niveau 4 gebruikt. In bijlage II is te zien welke opleidingen hierbij betrokken zijn. Kwaliteitsborging De kwaliteitsborging is onvoldoende omdat de beoordeling en verankering onvoldoende zijn. Op onderdelen, zoals exameninstrumenten en beroepspraktijkvorming, heeft het team weliswaar een beeld van de kwaliteit en dat beeld leidt ook tot het formuleren en uitvoeren van maatregelen ter verbetering. Maar het lukt het team niet op alle onderdelen de kwaliteit te beoordelen waardoor eventuele verbetermaatregelen niet of niet tijdig worden uitgevoerd. De kwaliteitsborging wordt sterk bepaald vanuit het Gilde- en sectorniveau. Het accent van de sturing ligt vooral op sectorniveau, waarbij sectordirecteur en teammanager de speerpunten van de sector als uitgangspunt nemen voor de sturing in het team, aangevuld met speerpunten van het team. De sturing op opleidingsniveau is voldoende, met name omdat de sturing op het onderwijsontwikkelproces effectief is. Hierbij is de focus van het team voor dit jaar vooral gericht op het harmoniseren van de opleidingen, zoals uitgewerkt in het document 'Optuigen kerstboom', en maatregelen in het kader van Focus op Vakmanschap. De sturing op teamniveau kan nog versterkt worden door in het teamactiviteitenplan (TAP) niet alleen acties te formuleren maar ook gewenste resultaten en vooraf te bepalen welke meetinstrumenten gebruikt kunnen worden om achteraf de resultaten in beeld te brengen. Het TAP biedt daarvoor door de gekozen opzet te weinig mogelijkheden. Daarnaast kan de relatie met sectordoelen in het TAP meer inzichtelijk worden gemaakt. Dankzij met name de Pagina 31 van 67