ONDERZOEK NAAR KWALITEITSVERBETERING MBO OP INSTELLINGS- EN OPLEIDINGSNIVEAU. Productiedieren (melkveehouderij)

Transcriptie

1 ONDERZOEK NAAR KWALITEITSVERBETERING MBO OP INSTELLINGS- EN OPLEIDINGSNIVEAU AOC Terra te Groningen Productiedieren (melkveehouderij) Natuur en groene ruimte (medewerker buitenruimte) Groen, Grond, Infra (medewerker gemechaniseerd loonbedrijf) Dierenartsassistent paraveterinair /5

2 BRIN: 01NJ Onderzoeksnummer: en Onderzoek uitgevoerd: 9 juni 2015 en 23 juni 2015 Conceptrapport verzonden op: 16 juli 2015 Rapport vastgesteld te Utrecht op: 9 september 2015

3 INHOUD 1 Inleiding Conclusie en vervolg Conclusie Vervolg Resultaten kwaliteitsborging op instellingsniveau Resultaten opleidingen Productiedieren (Melkveehouderij) Groen, grond, infra (Medewerker gemechaniseerd loonbedrijf) Natuur en groene ruimte (medewerker buitenruimte) Dierenartsassistent paraveterinair Bijlage Bijlage I Normering kwaliteitsgebieden /5

4

5 1 Inleiding In dit rapport staan de uitkomsten van de vijf onderzoeken naar kwaliteitsverbetering, die de Inspectie van het Onderwijs op 9 juni 2015 en 23 juni 2015 heeft uitgevoerd bij AOC Terra: vier op het niveau van afzonderlijke opleidingen en één op het niveau van de instelling. De inspectie baseert zich op het Toezichtkader bve 2012 en het Addendum 2015 (zie Aanleiding onderzoeken naar kwaliteitsverbetering De aanleiding voor de onderzoeken naar kwaliteitsverbetering is het vervolgtoezicht, zoals is opgenomen in het rapport van de Staat van de instelling (vastgesteld op 23 april 2014). We hebben de kwaliteitsborging op instellingsniveau onderzocht, omdat tijdens de Staat van de instelling is geconstateerd dat de instelling niet voldeed aan de wettelijke vereiste op het gebied van kwaliteitsborging (WEB, art ). Daarnaast hebben we een onderzoek naar kwaliteitsverbetering uitgevoerd bij de volgende opleidingen. Gebied Opbrengsten Gebied Onderwijsproces, Kwaliteitsborging en Wettelijke vereisten bc-id 176 Crebocode 97054, Dierenhouderij (melkveehouderij) 97713, Productiedieren (melkveehouderij Bc-id 073 Crebocode 97140, Groen, grond, infra (medewerker gemechaniseerd loonbedrijf) Bc-id 144 Crebocode 97531, Natuur en groene ruimte 2 (Medewerker Buitenruimte) Bc-id 162 Crebocode Dierenartsassistent paraveterinair Gebied Examinering en diplomering Crebocode Dierenhouderij (melkveehouderij) Leerweg, niveau, locatie leerweg bol, niveau 4. Locatie Werkhorst 56, Meppel Niet onderzocht leerweg bbl, niveau 2. Locatie Hereweg 99, Groningen Crebocode 97531, Natuur en groene ruimte 2 (Medewerker Buitenruimte) leerweg bbl, niveau 2. Locatie Burgemeester Legroweg 33, Eelde Niet onderzocht leerweg bol, niveau 4. Locatie Noordbargerstraat 75, Emmen Dierenhouderij (melkveehouderij), en Productiedieren (melkveehouderij), We hebben de examinering en diplomering en de kwaliteitsborging onderzocht, omdat tijdens de Staat van de instelling is geconstateerd dat er sprake was van onvoldoende examenkwaliteit en niet-naleving van de wet op het gebied van kwaliteitsborging (WEB, art ). Om ons een beeld te vormen van de kwaliteitsverbeteringen hebben we informatie over de opleiding geanalyseerd. Er zijn gesprekken gevoerd met de teamleider, vertegenwoordigers van de examencommissie en de vestgingsdirecteur. Onderzoek naar kwaliteitsverbetering mbo AOC Terra pagina 1 van 15

6 Groen, grond, infra (medewerker gemechaniseerd loonbedrijf), We hebben de kwaliteitsborging onderzocht, omdat tijdens de Staat van de instelling is geconstateerd dat er sprake was niet-naleving van de wet op het gebied van kwaliteitsborging (WEB, art ) Om ons een beeld te vormen van de kwaliteitsverbeteringen hebben we informatie over de opleiding geanalyseerd. Op locatie zijn documenten onderzocht en gesprekken gevoerd met docenten en het management. Natuur en groene ruimte 2 (Medewerker Buitenruimte), We hebben de examinering en diplomering en de kwaliteitsborging onderzocht, omdat tijdens de Staat van de instelling is geconstateerd dat er sprake was van onvoldoende examenkwaliteit en niet-naleving van de wet op het gebied van kwaliteitsborging (WEB, art ). Daarnaast werd een tekortkoming geconstateerd met betrekking tot de wettelijke vereisten. Om ons een beeld te vormen van de kwaliteitsverbeteringen hebben we informatie over de instelling en opleidingen geanalyseerd. Er zijn documenten onderzocht en gesprekken gevoerd docenten, het management en een vertegenwoordiger van de examencommissie. Dierenartsassistent paraveterinair, We hebben de kwaliteitsborging onderzocht, omdat tijdens de Staat van de instelling is geconstateerd dat er sprake was van niet-naleving van de wet op het gebied van kwaliteitsborging (WEB, art ) Om ons een beeld te vormen van de kwaliteitsverbeteringen hebben we informatie over de instelling en opleidingen geanalyseerd. Er zijn documenten onderzocht en gesprekken gevoerd teamleiders en het management. In dit rapport starten we met de conclusie van de onderzoeken naar kwaliteitsverbetering en geven we aan wat het vervolg is (hoofdstuk 2). Daarna volgt de toelichting op de beoordeling van de kwaliteitsborging op instellingsniveau (hoofdstuk 3).Vervolgens lichten we de onderzoeken naar kwaliteitsverbetering op opleidingsniveau toe (hoofdstuk 4). Onderzoek naar kwaliteitsverbetering mbo AOC Terra pagina 2 van 15

7 2 Conclusie en vervolg In dit hoofdstuk staat de conclusie van de onderzoeken naar kwaliteitsverbetering en beschrijven we het vervolg. De toelichting op de beoordeling staat in de hoofdstukken 3 en Conclusie Onderzoek naar kwaliteitsverbetering kwaliteitsborging instellingsniveau We concluderen dat de kwaliteitsborging op instellingsniveau bij AOC Terra onvoldoende is. Hiermee is niet voldaan aan de wettelijke vereiste op het gebied van kwaliteitsborging (WEB, art ). Onderzoeken naar kwaliteitsverbetering opleidingsniveau Opleiding Dierenhouderij (melkveehouderij), Productiedieren (melkveehouderij), niveau 4, crebo en 97713, locatie Meppel We concluderen dat bij deze opleiding de kwaliteitsgebieden examinering en diplomering en kwaliteitsborging voldoende zijn. Opleiding Groen, grond, infra (medwerker gemechaniseerd loonbedrijf), niveau 2, crebo 97140, locatie Groningen We concluderen dat bij deze opleiding het kwaliteitsgebied kwaliteitsborging onvoldoende is. Opleiding Natuur en groene ruimte 2 (medewerker buitenruimte), niveau 2, crebo 97531, locatie Eelde We concluderen dat bij deze opleiding de kwaliteitsgebieden examinering en diplomering en kwaliteitsborging voldoende zijn. Aan de wettelijke vereisten wordt voldaan. Opleiding Dierenartsassistent paraveterinair, niveau 4, crebo 97590, locatie Emmen We concluderen dat bij deze opleiding het kwaliteitsgebied kwaliteitsborging onvoldoende is. 2.2 Vervolg We voeren vervolgtoezicht uit naar de kwaliteitsborging van de instelling, omdat niet voldaan is aan de wettelijke vereiste (WEB, art ). De instelling krijgt de gelegenheid de kwaliteitsborging te verbeteren. Over een jaar zullen we de kwaliteitsborging opnieuw onderzoeken en beoordelen. We voeren bij twee van de onderzochte opleidingen geen vervolgtoezicht uit, omdat we daar alle kwaliteitsgebieden als voldoende hebben beoordeeld. Bij de twee andere opleidingen voeren we wel vervolgtoezicht uit, omdat we niet alle kwaliteitsgebieden als voldoende hebben beoordeeld. Het vervolgtoezicht richt zich op de geconstateerde tekortkomingen binnen het onvoldoende kwaliteitsgebied. Onderzoek naar kwaliteitsverbetering mbo AOC Terra pagina 3 van 15

8 In onderstaande schema's is het vervolgtoezicht te lezen. Groen, grond, infra (medewerker gemechaniseerd grondbedrijf), niveau 2, crebo Beoordeling Toezichtvorm Vervolgtoezicht Kwaliteitsborging voldoet niet aan de eisen en is onvoldoende. Aangepast toezicht vanwege niet-naleving van van de WEB. Circa een jaar na het definitieve rapport beoordelen wij de kwaliteitsborging opnieuw. Dierenartsassistent paraveterinair, niveau 4, crebo Beoordeling Toezichtvorm Vervolgtoezicht Kwaliteitsborging voldoet niet aan de eisen en is onvoldoende. Aangepast toezicht vanwege niet-naleving van van de WEB. Circa een jaar na het definitieve rapport beoordelen wij de kwaliteitsborging opnieuw. Onderzoek naar kwaliteitsverbetering mbo AOC Terra pagina 4 van 15

9 3 Resultaten kwaliteitsborging op instellingsniveau In dit hoofdstuk informeren wij u over de beoordeling van de kwaliteitsborging op instellingsniveau en onderbouwen wij ons oordeel. De normering van het kwaliteitsgebied kwaliteitsborging staat in bijlage I. De kwaliteitsborging van AOC Terra beoordelen we als onvoldoende. Dit oordeel is gebaseerd op de beoordeling van de onderliggende aspecten. Kwaliteitsgebied Goed Voldoende Onvoldoende 4. Kwaliteitsborging Slecht Aspecten Voldoende Onvoldoende 4.1 Sturing* 4.2 Beoordeling* 4.3 Verbetering en verankering* 4.4 Dialoog en verantwoording De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied. Beschouwing De kwaliteitsborging op instellingsniveau beoordelen we als onvoldoende. Bij het onderzoek naar de staat van de instelling in 2014 beoordeelden we de kwaliteitsborging op instellingsniveau reeds eerder als onvoldoende. De aspecten sturing en beoordeling voldeden naar ons oordeel niet aan de norm. Ook nu zijn deze beide aspecten met een onvoldoende gewaardeerd. We hebben kunnen vaststellen dat in de periode sinds het vorige onderzoek op het gebied van de kwaliteitsborging veel in beweging is gezet. Ten aanzien van specifieke processen en ook bij sommige locaties heeft dat reeds tot verbeteringen geleid. Echter, nog niet in de gehele organisatie is de beoogde omslag op dit punt al voldoende is doorgevoerd. Binnen de instelling zijn een aantal ingrijpende veranderingen gelijktijdig ingezet. Die veranderingen hebben betrekking op structuur en werkwijzen, maar vooral ook op de cultuur van en binnen de instelling. Deze veranderingen vallen samen met veranderingen die van buitenaf op de instelling afkomen, zoals de herziening van de kwalificatiestructuur. Belangrijke veranderingen die de instelling voorstaat zijn onder meer een intensievere samenwerking en afstemming tussen de locaties en een vergroting van het gevoel van eigenaarschap bij alle betrokkenen, niet in de laatste plaats in de onderwijsteams. Dat laatste impliceert een cultuurverandering. Die cultuurverandering kost tijd en zal niet op alle plaatsen in de organisatie op dezelfde wijze verlopen. Het college van bestuur heeft er voor gekozen die tijd bewust te nemen. Voor de verbeteringen op het gebied van de kwaliteitsborging betekent dit dat niet is gekozen voor een proces dat leidt tot snelle resultaten in termen van aanpassing van werkwijzen en procedures, maar voor een proces waarbij veel ruimte wordt gegeven voor het meedenken over en experimenteren met de beoogde vernieuwingen op het gebied van de kwaliteitsborging. De inspectie kan de gedachtegang achter deze keuze volgen. Tegelijkertijd moeten wij constateren dat deze er toe leidt dat op dit moment de vooruitgang op het gebied van de kwaliteitsborging nog niet zo ver is gevorderd dat er in de gehele Onderzoek naar kwaliteitsverbetering mbo AOC Terra pagina 5 van 15

10 organisatie sprake is van een gedegen inzicht in de bereikte kwaliteit (aspect 4.2: beoordeling) en van een adequate sturing door samenhangende planvorming op het passende niveau (aspect 4.1 sturing). Er is bij alle locaties begonnen met het werken met teamplannen. Voor de eerste ronde van teamplannen was het doel vooral om de onderwijsteams de leiding te laten nemen bij het opstellen van specifieke ontwikkeldoelstellingen op opleidingsniveau. Om zo vanaf de start een grotere betrokkenheid en gevoel van eigenaarschap bij de docenten voor het verbeteren van onderwijskwaliteit te bewerkstelligen. De vestigingsjaarplannen waren, aldus Terra, op een te hoog abstractieniveau en niet opleidingsspecifiek genoeg. Het beoogde doel is niet in alle gevallen bereikt. Opvallend is dat in sommige teamplannen het opleidingsniveau nog grotendeels ontbreekt. Ook mist vaak een duidelijke probleemformulering, is het beoogde doel van verander- of verbetertraject niet helder en controleerbaar geformuleerd en blijkt er sprake van een gebrek aan uitkristallisering van begrippen. Er wordt soms wel en soms niet verwezen naar parallelle vestigingsplannen en additionele verbeterplannen. Voor het systematisch en samenhangend sturen is het zaak de planvorming te bundelen. Dit vergroot ook de herkenbaarheid op het niveau van de onderwijsteams. Per saldo zijn wij van oordeel dat er nog onvoldoende sprake is van een gecontroleerde aansturing van de primaire processen en de veranderingen die daarin worden beoogd. Ook ten aanzien van de zelfevaluatie is er nog niet voldoende voortgang geboekt. Een integrale waardering van de gerealiseerde kwaliteit op het niveau van opleidingen is niet of beperkt voor handen. Opvallend daarbij is dat er geen gebruik wordt gemaakt van de Kwaliteitsaspecten van Terra die richting en houvast bieden bij het Terrabreed borgen van de onderwijskwaliteit. Daardoor ontbreekt de basis voor een genormeerde afweging van noodzakelijke verbeteractiviteiten. Ondanks dit oordeel zien wij ook dat op onderdelen er juist al wel belangrijke successen zijn bereikt met een kritische zelfbeoordeling en een daarop gebaseerde veranderaanpak. Een voorbeeld daarvan zijn de inspanningen rond de opleidingen Paardensport. Voor die opleidingen heeft een gedegen en zelfkritische beoordeling van de bestaande situatie plaatsgevonden en zijn op grond daarvan operationele, controleerbare verandertrajecten uitgezet. Ook de wijze waarop tekortkomingen bij de rol van de examencommissies en de ondersteuning van kwetsbare studenten in beeld zijn gebracht en zijn vertaald in verbetertrajecten zijn ons inziens een illustratie van een effectieve kwaliteitsborging. Verder zien we dat op sommige locaties de vernieuwing in de kwaliteitsborging verder is voortgeschreden dan op andere. Dit komt tot uitdrukking in onze waarderingen van de kwaliteitsborging op het niveau van de afzonderlijke opleidingen die bij het onderzoek naar kwaliteitsverbetering zijn betrokken. Onderzoek naar kwaliteitsverbetering mbo AOC Terra pagina 6 van 15

11 4. Resultaten opleidingen In dit hoofdstuk lichten wij het resultaat van de onderzoeken naar kwaliteitsverbetering bij de opleidingen toe. We geven per gebied aan wat het oordeel is (goed, onvoldoende, voldoende, slecht) en verantwoorden ons over het oordeel op het niveau van de onderliggende aspecten. 4.1 Productiedieren (Melkveehouderij) Het onderzoek naar kwaliteitsverbetering bij Productiedieren (melkveehouderij), 97713, niveau 4, bol, locatie Meppel richtte zich op de examinering en diplomering en de kwaliteitsborging. Het onderzoek naar kwaliteitsverbetering leidt tot de volgende beoordeling: Kwaliteitsgebied Goed Voldoende Onvoldoende 2. Examinering en diplomering 4. Kwaliteitsborging Slecht Kwaliteitsgebied Voldoende Aspect Gebied 2: Examinering en diplomering 2.1 Exameninstrumentarium* 2.2 Afname en beoordeling* 2.3 Diplomering* Gebied 4: Kwaliteitsborging 4.1 Sturing* 4.2 Beoordeling* 4.3 Verbetering en verankering* 4.4 Dialoog en verantwoording Onvoldoende De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied. Beschouwing Algemeen Tijdens voorgaand onderzoek is geconstateerd dat de examinering en diplomering en de kwaliteitsborging onvoldoende waren. Het gebied examinering en diplomering voldeed niet, omdat niet voldaan was aan het aspect diplomering. Dit voldeed niet, omdat de deugdelijkheid van de besluitvorming met betrekking tot diplomering niet voldoende geverifieerd kon worden. Het gebied kwaliteitsborging was onvoldoende, omdat niet voldaan was aan de aspecten beoordeling en verbetering en verankering. Het aspect beoordeling was onvoldoende, omdat er geen sprake was van een regelmatige, eenduidige waardering van de kwaliteit van het onderwijs, waardoor men niet tot een beredeneerde keuze voor veranderactiviteiten kwam. Impulsen hiervoor kwamen vooral van bovenaf in de organisatie. Onderzoek naar kwaliteitsverbetering mbo AOC Terra pagina 7 van 15

12 De onvoldoende voor verbetering en verankering was gevolg van het feit dat de invoering van het regioleren niet zorgvuldig was gebeurd. Op het moment van invoering was aan een aantal belangrijke randvoorwaarden niet voldaan, hetgeen leidde tot een moeizaam opstart- en uitvoeringsproces van deze curriculumvernieuwing. Hierna lichten we alleen de aspecten toe, die tijdens dit onderzoek opnieuw zijn onderzocht en beoordeeld. Examinering en diplomering De examinering en diplomering beoordelen we als voldoende. Aan alle aspecten is nu voldaan. De diplomering is nu voldoende deugdelijk en geborgd, omdat de besluitvorming op juiste gronden plaatsvindt. De examencommissie houdt voldoende toezicht op de deugdelijkheid van de oordelen. Er zijn nieuwe procedures ontwikkeld voor samenstelling en bewaking van de examendossiers. Daarmee is voorzien in een adequate controle op volledigheid en inhoud van het examendossier. Aangezien we reeds vorig jaar constateerden dat de overige werkzaamheden en verantwoordelijkheden van de examencommissie naar tevredenheid waren georganiseerd is hiermee de diplomering op orde. Kwaliteitsborging De kwaliteitsborging beoordelen we als voldoende. Aan alle aspecten is voldaan. De beoordeling vinden wij nu voldoende. Waar eerst geen sprake was van een regelmatige analyse van de kwaliteit van de opleiding door het team zelf, is dat nu wel het geval. De evaluatie bestaat niet meer alleen uit het checken van de voortgang van de voorgenomen verbeteractiviteiten, maar ook uit een collectieve beschouwing van de staat waarin de opleiding zich bevindt. De uitkomsten hiervan vormen de basis voor de input van het teamplan. Op deze wijze vindt nu dus ook bottom-up gestuurde verbetering plaats waardoor het teamplan nu ook direct gerelateerd is aan opleiding en niveau. De verbetering en verankering beoordelen we nu ook als voldoende. Waar de invoering van het regioleren gepaard ging met vertragingen en onvolledige informatievoorziening, is er nu sprake van een meer planmatige wijze waarop verander- en verbetermaatregelen worden uitgevoerd. Hierdoor zien wij geen risico meer dat de voorgaande situatie zich in de nabije toekomst zal herhalen. Onderzoek naar kwaliteitsverbetering mbo AOC Terra pagina 8 van 15

13 4.2 Groen, grond, infra (Medewerker gemechaniseerd loonbedrijf) Het onderzoek naar kwaliteitsverbetering bij Groen, grond, infra (Medewerker gemechaniseerd loonbedrijf), 97140, niveau 2, locatie Groningen richtte zich op de kwaliteitsborging. Het onderzoek naar kwaliteitsverbetering leidt tot de volgende beoordeling: Kwaliteitsgebied Goed Voldoende Onvoldoende 4. Kwaliteitsborging Slecht Kwaliteitsgebied Voldoende Onvoldoende Aspect Gebied 4: Kwaliteitsborging 4.1 Sturing* 4.2 Beoordeling* 4.3 Verbetering en verankering* 4.4 Dialoog en verantwoording De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied. Beschouwing Algemeen Tijdens het voorgaand onderzoek is geconstateerd dat de kwaliteitsborging onvoldoende was. Het gebied kwaliteitsborging was onvoldoende, omdat niet voldaan was aan de aspecten sturing en beoordeling. Vastgesteld werd dat de sturing te weinig opleidingsspecifiek was. Daarnaast constateerden we dat er geen eenduidige beoordeling was opgemaakt van de gerealiseerde kwaliteit bij deze opleiding. Kwaliteitsborging De kwaliteitsborging bij de opleiding medewerker gemechaniseerd loonbedrijf, crebo 97140, niveau 2, locatie Groningen, is onvoldoende. De problemen die in 2014 bestonden bij de aspecten sturing en beoordeling zijn nog niet verholpen. Sinds het vorige onderzoek zijn er initiatieven bij deze opleiding (en de gehele vestiging) genomen om te komen tot een betere kwaliteitsborging. Er is gestart met een zelfevaluatie en met het opstellenvan teamplannen. De uitkomsten van deze inspanningen hebben naar ons oordeel nog niet geleid tot een gedegen beoordeling van de gerealiseerde kwaliteit (aspect 4.2 beoordeling) en een daarbij aansluitende adequate aansturing van veranderprocessen (aspect 4.1 sturing). Het model dat is gehanteerd bij de zelfevaluatie heeft wel een eerste inventarisatie opgeleverd van opvattingen bij betrokkenen van wat er wel en niet goed gaat binnen de drie opleidingen en de locatie. Er is daarbij niet gedifferentieerd naar de afzonderlijke opleidingen. Bij de beoordeling is geen gebruik gemaakt van de centraal ontwikkelde instrumenten opgenomen in het Kwaliteitshandboek. Er heeft op deze inventarisatie ook geen gedegen analyse plaatsgevonden, leidend tot een samenhangend beeld van de bestaande kwaliteit. Door toevallige omstandigheden is door klachten van ouders een dergelijk beeld wel ontstaan voor Onderzoek naar kwaliteitsverbetering mbo AOC Terra pagina 9 van 15

14 één van de opleidingen. De beschikbaarheid van dat samenhangende beeld voor deze opleiding heeft geresulteerd in een meer specifieke aanpak van het verandertraject bij deze opleiding. De overige thema s in het teamplan hebben betrekking op alle opleidingen en missen een helder geformuleerde aanleiding in bijvoorbeeld de eerste ronde van de zelfevaluatie en evenzeer ontbreekt een operationele en controleerbare uitwerking. De sturing wordt daarbij gecompliceerd doordat er voor dezelfde opleiding in de regel twee teamplannen aanwezig zijn: die van het team Algemeen en die van het vakgerichte team. In een situatie waarin twee teams bij één opleiding zijn betrokken is het van het grootste belang de inspanningen van die teams op elkaar af te stemmen. Datzelfde geldt voor de afstemming op het vestigingsplan en additionele verbeterplannen. Voor het systematisch en samenhangend sturen is het zaak de planvorming te bundelen. Dit vergroot ook de herkenbaarheid op het niveau van de onderwijsteams. 4.3 Natuur en groene ruimte (medewerker buitenruimte) Het onderzoek naar kwaliteitsverbetering bij Natuur en groene ruimte (medewerker buitenruimte), 97531, niveau 2, bbl, locatie Eelde (TerraNext), richtte zich op de examinering en diplomering, de kwaliteitsborging en de wettelijke vereisten. Het onderzoek naar kwaliteitsverbetering leidt tot de volgende beoordeling: Kwaliteitsgebied Goed Voldoende Onvoldoende Slecht 2. Examinering en diplomering 4. Kwaliteitsborging Voldoet Voldoet niet 5.Naleving wettelijke vereisten Kwaliteitsgebied Voldoende Aspect Gebied 2: Examinering en diplomering 2.1 Exameninstrumentarium* 2.2 Afname en beoordeling* 2.3 Diplomering* Gebied 4: Kwaliteitsborging 4.1 Sturing* 4.2 Beoordeling* 4.3 Verbetering en verankering* 4.4 Dialoog en verantwoording Gebied 5: Naleving wettelijke vereisten 5.1 Naleving wettelijke vereisten Onvoldoende De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied. Beschouwing Algemeen Tijdens voorgaand onderzoek is geconstateerd dat de examinering en diplomering en de kwaliteitsborging onvoldoende waren. Bovendien voldeed de opleiding niet aan alle wettelijke vereisten. Onderzoek naar kwaliteitsverbetering mbo AOC Terra pagina 10 van 15

15 Het gebied examinering en diplomering voldeed niet, omdat niet voldaan was aan het aspect diplomering. De deugdelijkheid van de besluitvorming met betrekking tot diplomering kon namelijk niet voldoende worden geverifieerd. Er was geen sprake van een systematische analyse van de examenresultaten en de check op de examendossiers was niet toereikend. De kwaliteitsborging was onvoldoende, omdat aan de normen met betrekking tot de aspecten sturing en beoordeling niet voldaan werd. Er was geen sprake van planvorming op team- en opleidingsniveau. Bovendien vond er onvoldoende systematisch evaluatie plaats binnen de opleiding. Hierdoor was dan ook de effectiviteit van verbeteracties moeilijk in kaart te brengen en waren deze niet duidelijk toe te schrijven aan een specifieke maatregel. Aan de wettelijke vereisten werd niet geheel voldaan voor wat betreft de schoolkosten zoals gesteld in artikel van de WEB. Hierna lichten we de aspecten toe, die tijdens dit onderzoek opnieuw zijn onderzocht en beoordeeld. Examinering en diplomering De examinering en diplomering beoordelen we nu als voldoende. Aan alle aspecten is voldaan. De tekortkomingen zoals die tijdens de staat van de instelling uit 2014 waren geconstateerd, zijn in voldoende mate weggewerkt. Waar voorheen een systematische analyse van de examenresultaten ontbrak, houdt de instelling thans een werkwijze aan waarbij de examencommissie de resultaten van de gemaakte examens evalueert. De uitkomsten van deze evaluatie worden benut voor bijstellingen in het onderwijsprogramma en/of de examinering. Daarnaast is ook de check op de examendossiers verder versterkt. Niet alleen wordt het dossier op volledigheid gecontroleerd, maar ook worden gemaakte examens steekproefsgewijs op niveau gecheckt. In de afname van de proeven zit reeds een check op de kwaliteit van de inhoudelijke beoordeling ingebouwd, omdat een vertegenwoordiger van de examencommissie aanwezig is en zicht houdt op de wijze waarop de beoordelingen tijdens de proeve plaatsvinden. Kwaliteitsborging De kwaliteitsborging beoordelen we als voldoende. Aan alle aspecten is voldaan. We lichten alleen de aspecten toe, die opnieuw zijn onderzocht. De beoordeling vinden wij nu voldoende. Het team heeft een planmatige opzet ingericht om tot een regelmatige, systematische analyse van de kwaliteit van het eigen onderwijs en opleiding te komen. Vijf keer per jaar is er een ontwikkelweek, waarin onder meer een dag is ingeruimd voor een dergelijke evaluatie door het team. Deze evaluatie omvat meer dan enkel een periodieke check op de verbeterpunten die op dat moment aan de orde zijn. De uitkomsten van de evaluatie vormen de basis voor de input van het teamplan. Het plan dat wij hebben gezien getuigt van een kritische reflectie op de gerealiseerde kwaliteit en een gerichte aanpak van vastgestelde problemen. Op deze wijze vindt nu dus ook bottom-up gestuurde, gerichte, verbetering plaats, ter aanvulling op de speerpunten die vanuit de hogere managementlagen in de teamplannen terechtkomen. Door deze opzet zijn verbetermaatregelen passend bij Onderzoek naar kwaliteitsverbetering mbo AOC Terra pagina 11 van 15

16 de opleiding en kan ook de effectiviteit ervan beter in beeld gebracht worden. Hiermee is de sturing ook voldoende. Wettelijke vereisten De opleiding voldoet aan de onderzochte wettelijke eisen uit artikel van de WEB. De geconstateerde tekortkomingen met betrekking tot de schoolkosten zijn weggewerkt, omdat verbruikskosten en excursiegelden van de verplichte schoolnota zijn afgehaald. 4.4 Dierenartsassistent paraveterinair Het onderzoek naar kwaliteitsverbetering bij Dierenartsassistent paraveterinair, 97590, niveau 4, bol, locatie Emmen richtte zich op de kwaliteitsborging. Het onderzoek naar kwaliteitsverbetering leidt tot de volgende beoordeling: Kwaliteitsgebied Goed Voldoende Onvoldoende 4. Kwaliteitsborging Slecht Kwaliteitsgebied Voldoende Onvoldoende Aspect Gebied 4: Kwaliteitsborging 4.1 Sturing* 4.2 Beoordeling* 4.3 Verbetering en verankering* 4.4 Dialoog en verantwoording De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied. Beschouwing Algemeen Tijdens voorgaand onderzoek is geconstateerd dat de kwaliteitsborging onvoldoende was. Het gebied kwaliteitsborging was onvoldoende. De aspecten sturing en beoordeling beoordeelden we als onvoldoende. De sturing was te weinig gericht op de specifieke kenmerken van deze opleiding. Ten aanzien van de beoordeling stelden we vast dat geen duidelijk beeld bestond van de gerealiseerde onderwijskwaliteit. Kwaliteitsborging De kwaliteitsborging bij de opleiding is onvoldoende. De problemen die in 2014 bestonden bij het aspect beoordeling zijn nog niet in voldoende mate verholpen. De sturing werd bij het vorig onderzoek ook als onvoldoende beoordeeld. Op dat punt zien we nu wel voldoende vooruitgang. Tijdens het onderhavige onderzoek is ons gebleken dat op de locatie Emmen een reeks van initiatieven is genomen om de kwaliteit van de opleiding Paraveterinair te verbeteren. Kritische opmerkingen uit het onderzoek in 2014 zijn opgepakt en hebben inmiddels tot betekenisvolle veranderingen in het onderwijsprogramma en de uitvoering van de examinering geleid. Ook in de organisatie zijn veranderingen Onderzoek naar kwaliteitsverbetering mbo AOC Terra pagina 12 van 15

17 doorgevoerd die moeten leiden tot duidelijk belegde verantwoordelijkheid voor de kwaliteit van deze opleiding. Toch is naar ons oordeel een betere inkadering van deze processen in een duidelijk systeem van kwaliteitsborging nodig om een duidelijk effect te kunnne sorteren. Er is voor gekozen om voor deze opleiding het afgelopen jaar geen zelfevaluatie uit te voeren. Dat leidt ertoe dat er geen expliciet en samenhangend beeld bestaat van de gerealiseerde kwaliteit. Juist omdat dit punt ook bij het vorige onderzoek is gesignaleerd was er voldoende aanleiding wel een zelfevaluatie uit te voeren. Het gebrek aan een zelfevaluatie werkt ook door in het teamplan. De voornemens die daarin zijn opgenomen, missen een duidelijke basis in een vastgestelde 0- meting en daarop aansluitende analyse. Toch beoordelen we de sturing positief. Allereerst is er nu anders dan in 2014 wel sprake van een eenduidig belegde verantwoordelijkheid voor de opleiding. De in 2014 genoemde versnippering van verantwoordelijkheden en gebrek aan integrale aansturing is nu verholpen. Het teamplan kan als sturingsinstrument nog aan betekenis winnen door die te baseren op een goede zelfevaluatie. Dat gebrek heeft evenwel geleid tot de onvoldoende voor het aspect beoordeling. Het plan en vooral ook de toelichting die daarop is gegeven, geven wel voldoende vertrouwen in een systematische aanpak van verandertrajecten met duidelijke doelen en termijnen. Dat blijkt vooral uit het feit dat alle aandachtspunten uit het vorige onderzoek zijn opgepakt en vertaald in een gerichte aanpak, waarvan de voortgang goed in beeld wordt gebracht. Onderzoek naar kwaliteitsverbetering mbo AOC Terra pagina 13 van 15

18 Onderzoek naar kwaliteitsverbetering mbo AOC Terra pagina 14 van 15

19 Bijlage Bijlage I Normering kwaliteitsgebieden De normering per gebied is per januari 2015 aangepast (zie het Toezichtkader bve 2012 en het Addendum 2015). De normering heeft betrekking op de toezichtperiode De normen Op basis van het onderzoek spreekt de inspectie oordelen uit waarvoor zij gebruikmaakt van een normering. Deze bestaat uit twee stappen: 1. Een normering per aspect: per aspect wordt een beschrijving gegeven. Indicatoren en portretten zijn daarvoor indicerend en richtinggevend. 2. Een normering per kwaliteitsgebied. Bij het gebied Examinering en diplomering zijn alle aspecten als kernaspect benoemd. Normering Examinering en diplomering Goed Aan alle drie de aspecten is voldaan. De elementen in het portret worden op een uitstekende wijze uitgevoerd. Voldoende Aan alle drie de aspecten is voldaan. Er wordt voor het grootste deel aan de omschrijving van de portretten voldaan, waaronder de essentiële onderdelen. Onvoldoende Aan een of twee aspecten is niet voldaan. Slecht Aan geen van de drie aspecten is voldaan. Voor de normering van het gebied Kwaliteitsborging zijn drie kernaspecten benoemd. De kernaspecten zijn 4.1 Sturing, 4.2 Beoordeling en 4.3 Verbetering en verankering. Normering Kwaliteitsborging Goed Aan alle aspecten is voldaan. De elementen in het portret worden op een uitstekende wijze uitgevoerd. Voldoende Aan alle kernaspecten is voldaan. Er wordt voor het grootste deel aan de omschrijving van de portretten voldaan, waaronder de essentiële onderdelen. Onvoldoende Aan twee of drie aspecten is niet voldaan. Slecht Aan alle vier de aspecten is niet voldaan. Normering Naleving wettelijke vereisten: de instelling of opleiding voldoet niet aan de wettelijke bepalingen indien de inspectie vaststelt dat een van deze bepalingen niet wordt nageleefd. Bij sommige bepalingen vloeit de norm direct uit de wet voort. Voor enkele bepalingen zijn nadere operationaliseringen opgesteld (bijvoorbeeld onderwijstijd). Onderzoek naar kwaliteitsverbetering mbo AOC Terra pagina 15 van 15