ONDERZOEK NAAR KWALITEITSVERBETERING MBO. Profit Opleidingen

Transcriptie

1 ONDERZOEK NAAR KWALITEITSVERBETERING MBO Profit Opleidingen Plaats : Zwolle BRIN nummer : 26TR Onderzoeksnummer : en Datum onderzoek : 5, 9 en 12 februari 2015 en 7 april 2016 Datum vaststelling : 14 juli 2016

2

3 INHOUD 1 Inleiding Conclusie en vervolg Conclusie Vervolgtoezicht Resultaten kwaliteitsborging op instellingsniveau Resultaten opleidingen Pedagogisch Werk (Pedagogisch medewerker 4 jeugdzorg) en Maatschappelijke Zorg (Persoonlijk begeleider specifieke doelgroepen) Bijlage Bijlage I Normering kwaliteitsgebieden... 15

4

5 1 Inleiding In dit rapport staan de uitkomsten van het onderzoek naar kwaliteitsverbetering, dat de Inspectie van het Onderwijs van 5 februari 2015 tot en met 7 april 2016 heeft uitgevoerd bij Profit Opleidingen (hierna: Profit). De inspectie baseert zich op het Toezichtkader bve 2012 en het Addendum 2015 (zie Aanleiding onderzoek naar kwaliteitsverbetering De aanleiding voor het onderzoek naar kwaliteitsverbetering is het vervolgtoezicht, zoals is opgenomen in het rapport van de Staat van de instelling (vastgesteld op 26 november 2013). We hebben de kwaliteitsborging op instellingsniveau onderzocht, omdat tijdens de Staat van de instelling is geconstateerd dat de instelling niet voldeed aan de wettelijke vereiste op het gebied van kwaliteitsborging (WEB, art ). Daarnaast hebben we een onderzoek naar kwaliteitsverbetering uitgevoerd bij de volgende opleidingen. Gebied Onderwijsproces, Kwaliteitsborging (Wettelijke vereisten) Pedagogisch Werk (Pedagogisch medewerker 4 jeugdzorg) Maatschappelijke Zorg (Persoonlijk begeleider specifieke doelgroepen) Gebied Examinering en diplomering Pedagogisch Werk (Pedagogisch medewerker 4 jeugdzorg) Maatschappelijke Zorg (Persoonlijk begeleider specifieke doelgroepen) Leerweg, niveau, locatie leerweg bol, niveau 4, locatie Eiffelstraat 1, Zwolle leerweg bol, niveau 4, locatie Eiffelstraat 1, Zwolle We hebben het onderwijsproces, de examinering en diplomering en de kwaliteitsborging onderzocht, omdat tijdens de Staat van de instelling is geconstateerd dat er sprake was van zwak onderwijs, onvoldoende examenkwaliteit en niet-naleving van de wet op het gebied van kwaliteitsborging (WEB, art ). Om ons een beeld te vormen van de kwaliteitsverbeteringen hebben we informatie over de instelling en opleidingen geanalyseerd. Op locatie zijn onderwijsactiviteiten en bpv-activiteiten geobserveerd, documenten onderzocht en gesprekken gevoerd. Er is onder andere gesproken met studenten, docenten, praktijkopleiders en de directie. Vanuit het belang om op basis van meerdere waarnemingen vast te stellen of de kwaliteit van de examinering in de beroepspraktijk deugdelijk en betrouwbaar verloopt, is het onderzoek aangehouden tot het eerst volgende moment van examinering. Daarna is gesproken met betrokkenen bij de examinering en de examencommissie. In dit rapport starten we met de conclusie van het onderzoek naar kwaliteitsverbetering en geven we aan wat het vervolg is (hoofdstuk 2). Daarna volgt een toelichting op de beoordeling van de kwaliteitsborging op instellingsniveau (hoofdstuk 3). Vervolgens lichten we het onderzoek naar kwaliteitsverbetering op opleidingsniveau toe (hoofdstuk 4). Onderzoek naar kwaliteitsverbetering mbo Profit Opleidingen pagina 5 van 16

6 Onderzoek naar kwaliteitsverbetering mbo Profit Opleidingen pagina 6 van 16

7 2 Conclusie en vervolg In dit hoofdstuk staat de conclusie van het onderzoek naar kwaliteitsverbetering en beschrijven we het vervolg. De toelichting op de beoordeling staat in de hoofdstukken 3 en Conclusie Onderzoek naar kwaliteitsverbetering kwaliteitsborging instellingsniveau We concluderen dat de kwaliteitsborging op instellingsniveau bij Profit voldoende is. Hiermee is voldaan aan de wettelijke vereiste op het gebied van kwaliteitsborging (WEB, art ). Onderzoek naar kwaliteitsverbetering opleidingsniveau per onderzochte opleiding Pedagogisch Werk (Pedagogisch medewerker 4 jeugdzorg), We concluderen dat bij Pedagogisch Werk (Pedagogisch medewerker 4 jeugdzorg), kwaliteitsgebied onderwijsproces, examinering en diplomering, kwaliteitsborging voldoende is. Maatschappelijke Zorg(Persoonlijk begeleider specifieke doelgroepen), We concluderen dat bij Maatschappelijke Zorg(Persoonlijk begeleider specifieke doelgroepen), kwaliteitsgebied onderwijsproces, examinering en diplomering, kwaliteitsborging voldoende is. 2.2 Vervolgtoezicht Vervolg onderzoek naar kwaliteitsverbetering kwaliteitsborging instellingsniveau We voeren geen vervolgtoezicht uit naar de kwaliteitsborging van de instelling, omdat de instelling voldoet aan de wettelijke vereiste (WEB, art ). Vervolgtoezicht naar aanleiding van de onderzochte opleidingen We voeren bij de twee onderzochte opleidingen geen vervolgtoezicht uit, omdat we alle onderzochte kwaliteitsgebieden als voldoende hebben beoordeeld. Onderzoek naar kwaliteitsverbetering mbo Profit Opleidingen pagina 7 van 16

8 Onderzoek naar kwaliteitsverbetering mbo Profit Opleidingen pagina 8 van 16

9 3 Resultaten kwaliteitsborging op instellingsniveau In dit hoofdstuk informeren wij u over de beoordeling van de kwaliteitsborging op instellingsniveau en onderbouwen wij ons oordeel. De normering van het kwaliteitsgebied kwaliteitsborging staat in bijlage I. De kwaliteitsborging van Profit beoordelen we als voldoende. Dit oordeel is gebaseerd op de beoordeling van de onderliggende aspecten. Kwaliteitsgebied Goed Voldoende Onvoldoende 4. Kwaliteitsborging Slecht Aspecten Voldoende Onvoldoende 4.1 Sturing* 4.2 Beoordeling* 4.3 Verbetering en verankering* 4.4 Dialoog en verantwoording De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied. Beschouwing Algemeen Omdat de onderzochte opleidingen onderdeel uitmaken van een kleine niet bekostigde instelling, maken wij geen onderscheid tussen de kwaliteitsborging op instellings- en opleidingsniveau. Tijdens voorgaand onderzoek is geconstateerd dat de kwaliteitsborging onvoldoende was, omdat niet voldaan was aan de aspecten sturing, beoordeling en verbetering en verankering. Alleen deze aspecten zijn opnieuw onderzocht en beoordeeld. De sturing, beoordeling en verbetering en verankering voldeden niet, omdat de geformuleerde kwaliteitsdoelen in onvoldoende mate richting gaven aan de organisatie en de gewenste onderwijskwaliteit. Monitoring en evaluatie van de kwaliteitseisen ontbraken, waardoor tekortkomingen niet tijdig gesignaleerd werden. De kwaliteitscyclus was niet volledig doorlopen waardoor verbetermaatregelen voortkomend uit studentenevaluatie niet ingekaderd zijn in de kwaliteitszorgsystematiek. Hierna lichten we alleen de aspecten toe, die tijdens dit onderzoek opnieuw zijn onderzocht en beoordeeld. Kwaliteitsborging De kwaliteitsborging op instellingsniveau bij Profit is beoordeeld als voldoende. Aan alle aspecten is voldaan. De sturing beoordelen we als voldoende. In navolging van de analyse en het plan van aanpak naar aanleiding van het rapport van de Staat van de Instelling zijn in samenspraak met een onafhankelijk deskundige nieuwe instellingsbrede kwaliteitseisen geformuleerd. Op basis van deze vernieuwde kwaliteitseisen, de missie, visie en kernwaarden van Profit is het Meerjarenplan Profit 2020 geformuleerd. Voorts is dit meerjarenplan uitgewerkt in een jaardoelenplan. Deze documenten zijn ter plaatse ingezien en besproken. Onderzoek naar kwaliteitsverbetering mbo Profit Opleidingen pagina 9 van 16

10 Geconstateerd is dat de doelen specifiek geformuleerd zijn en er sprake is van een cyclische kwaliteitszorgsystematiek die passend is bij de organisatiestructuur van Profit. De beoordeling beoordelen we als voldoende. De huidige systematiek van kwaliteitsborging voorziet in een regelmatige beoordeling van de eigen onderwijskwaliteit. Zowel de staf onderwijs als de examencommissie signaleren mogelijke tekortkomingen tijdig. Op basis van een analyse van de aard van de tekortkoming(en) word(en) passende verbetermaatregelen genomen. Een goed voorbeeld zijn de reviews over de kwaliteit van examinering die in opdracht van de examencommissie door onafhankelijke deskundigen zijn afgenomen. Er is sprake van een deugdelijke en betrouwbare beoordeling waardoor de directie zicht heeft op de kwaliteit van de feitelijke onderwijsuitvoering op de locaties en van de kwaliteit van afname van examinering bij de leerbedrijven. De verbetering en verankering beoordelen we als voldoende. De kwaliteitszorgsystematiek is nu passend bij de organisatiestructuur van Profit. De pcda-cyclus is en wordt in zijn geheel doorlopen. De verbetermaatregelen zijn ingekaderd in de kwaliteitszorgsystematiek, waardoor het zicht op de samenhang tussen de verbetermaatregelen en de kwaliteitsdoelen verbeterd is. De bevoegdheden en verantwoordelijkheden zijn duidelijk belegd. Hierdoor is de samenhang tussen de organisatie-, respectievelijk kwaliteitsdoelen en het persoonlijk ontwikkelingsplan verbeterd. De deskundigheid van zowel de docenten als de leden van de examencommissie wordt op planmatige wijze bevorderd. Zo worden thema s besproken tijdens de docentdagen en wordt collegiale intervisie gestimuleerd. Onderzoek naar kwaliteitsverbetering mbo Profit Opleidingen pagina 10 van 16

11 4. Resultaten opleidingen In dit hoofdstuk lichten wij het resultaat van het kwaliteitsonderzoek bij de opleidingen toe. We geven per gebied aan wat het oordeel is (goed, onvoldoende, voldoende, slecht) en verantwoorden ons over het oordeel op het niveau van de onderliggende aspecten. Pedagogisch Werk (Pedagogisch medewerker 4 jeugdzorg) en Maatschappelijke Zorg (Persoonlijk begeleider specifieke doelgroepen) Het onderzoek naar kwaliteitsverbetering bij Pedagogisch Werk (Pedagogisch medewerker 4 jeugdzorg), 92631, niveau 4, bol, locatie Zwolle en Maatschappelijke Zorg (Persoonlijk begeleider specifieke doelgroepen), 92662, niveau 4, bol, locatie Zwolle richt zich op het onderwijsproces en de examinering en diplomering. Het onderzoek naar kwaliteitsverbetering leidt tot de volgende beoordeling: Kwaliteitsgebied Goed Voldoende Onvoldoende 1. Onderwijsproces 2. Examinering en diplomering Slecht Kwaliteitsgebied Voldoende Aspect Gebied 1: Onderwijsproces Programma 1.1 Samenhang Leren in de beroepspraktijk 1.9 Beroepspraktijkvorming* Gebied 2: Examinering en diplomering 2.1 Exameninstrumentarium* 2.2 Afname en beoordeling* 2.3 Diplomering* Onvoldoende De aspecten met een * zijn kernaspecten, zie bijlage I voor normering per gebied. Beschouwing Algemeen Tijdens voorgaand onderzoek is geconstateerd dat het onderwijsproces en de examinering en diplomering onvoldoende was. We hebben ons binnen deze gebieden alleen gericht op de aspecten, die tijdens voorgaand onderzoek als onvoldoende zijn beoordeeld. De voldoende oordelen hebben we overgenomen. Het onderwijsproces voldeed niet, omdat niet voldaan was aan de aspecten samenhang en beroepspraktijkvorming (bpv). Het aspect samenhang voldeed niet omdat de inhoud van het onderwijsprogramma ontoereikend aansloot op de vereisten uit de vigerende kwalificatiedossiers. Zo ontbrak het ook aan Nederlands en rekenen. Het aspect bpv voldeed niet, omdat zowel de voorbereiding op de bpv als de begeleiding door Profit gebrekkig was. Ook ontbraken concrete praktijkopdrachten. De examinering en diplomering voldeed niet, omdat niet voldaan was aan de aspecten exameninstrumentarium, afname en beoordeling en diplomering. Onderzoek naar kwaliteitsverbetering mbo Profit Opleidingen pagina 11 van 16

12 Het exameninstrumentarium was niet volledig passend bij de vereisen uit het vigerende kwalificatiedossier waardoor houding en vaardigheden ontoereikend geëxamineerd werden. De examenprocessen afname en beoordeling waren niet deugdelijk. Het ontbrak aan een objectieve beoordeling bij de afname van de examens in de beroepspraktijk omdat geen duidelijk onderscheid gemaakt was tussen begeleiden en beoordelen. De examencommissie heeft op onterechte gronden diploma s afgegeven en heeft in onvoldoende mate haar verantwoordelijkheid genomen voor het verstrekken van vrijstellingen. Ook had de examencommissie zich in niet afdoend vergewist over de kwaliteit van examinering. Onderwijsproces Het onderwijsproces beoordelen we als voldoende. Aan alle aspecten is voldaan. We lichten alleen de aspecten toe die opnieuw zijn onderzocht. Het aspect samenhang voldoet omdat inhoud van het vernieuwde onderwijsprogramma in voldoende mate aansluit op de vereisten uit de vigerende kwalificatiedossiers. Zo zijn ook Nederlands, Engels en rekenen aan het programma toegevoegd. Het aspect bpv voldoet, omdat zowel de voorbereiding op de bpv als de begeleiding door Profit aanzienlijk verbeterd is. De studenten worden nu goed voorbereid op de bpv en Profit heeft regelmatig contact met de leerbedrijven over de voortgang van de student. Ook zijn de praktijkopdrachten aangevuld zodat er nu sprake is van een volledige set van praktijkopdrachten (Gids voor de pbv) die passend zijn op de werksituaties van de leerbedrijven. Examinering en diplomering De examinering en diplomering beoordelen we als voldoende. Aan alle aspecten is voldaan. We lichten alleen de aspecten toe die opnieuw zijn onderzocht. Het exameninstrumentarium voldoet, omdat het aansluit op de uitstroomeisen en voldoet aan de toetstechnische eisen. Er is duidelijk onderscheid gemaakt tussen de voortgangstoetsen en de kwalificerende examinering. De kwalificerende examenopdrachten zijn zodanig vormgegeven en voorzien van beoordelingsformulieren dat er sprake is van een passende balans tussen kennis, vaardigheden en houding. De instellingsexamens betreffende de generieke kwalificatievereisten voor Nederlands, Engels en rekenen zijn passend aan het vigerende referentieniveau dan wel het referentieniveau. De examenprocessen van afname en beoordeling zijn voldoende deugdelijk. De examinering van de werkprocessen vindt plaats in de beroepspraktijk. Alleen werkproces 3.1 wordt op de instelling geëxamineerd. De examenopdrachten zijn voorzien van beoordelingsindicatoren en beoordelingslijsten. Profit is zich bewust van het risico ten aanzien van de betrouwbaarheid van examinering bij de kleinere zorginstellingen. Met het doel een gelijke en deskundige beoordeling te waarborgen wordt de examinering afgesloten met een examengesprek. Tijdens dit gesprek verifieert de schoolbeoordelaar (BLG-docent) aan de hand van een protocol met instructies de vakinhoudelijke oordelen van de praktijkbeoordelaar en het verloop van de examens in de beroepspraktijk. Voorts wordt een verslag gemaakt en wordt het verslag gearchiveerd in het examendossier De diplomering is voldoende deugdelijk en geborgd. Onderzoek naar kwaliteitsverbetering mbo Profit Opleidingen pagina 12 van 16

13 De examencommissie is vernieuwd met een onafhankelijke externe voorzitter. Voorts hebben alle leden van de examencommissie deelgenomen aan deskundigheidsbevordering op het gebied van examinering. Vanuit het toegenomen kwaliteitsbewustzijn van de examencommissie zijn passende verbetermaatregelen genomen met het doel het zicht op de afname van de examinering in de beroepspraktijk te verbeteren. Een goed voorbeeld zijn de reviews die de examencommissie door externe deskundigen heeft laten afnemen. De afgenomen reviews bevestigen dat de beoordelingen en besluitvorming naar verwachting verlopen. Zo zijn ook alle examenopdrachten door de examencommissie vastgesteld. De examencommissie besluit op de examenresultaten, afgezet tegen de vereisten uit het kwalificatiedossier, tot het verlenen van vrijstellingen en tot het verstrekken van diploma s. De examencommissie verantwoordt zich aan de directeur. Onderzoek naar kwaliteitsverbetering mbo Profit Opleidingen pagina 13 van 16

14 Onderzoek naar kwaliteitsverbetering mbo Profit Opleidingen pagina 14 van 16

15 Bijlage Bijlage I Normering kwaliteitsgebieden De normering per gebied is per januari 2015 aangepast (zie het Toezichtkader bve 2012 en het Addendum 2015). De normering heeft betrekking op de toezichtperiode De normen Op basis van het onderzoek spreekt de inspectie oordelen uit waarvoor zij gebruikmaakt van een normering. Deze bestaat uit twee stappen: 1. Een normering per aspect: per aspect wordt een beschrijving gegeven. Indicatoren en portretten zijn daarvoor indicerend en richtinggevend. 2. Een normering per kwaliteitsgebied. Voor de normering van het gebied Onderwijsproces zijn drie kernaspecten benoemd. De kernaspecten zijn: aspect 1.3 Didactisch handelen, aspect 1.7 Studieloopbaanbegeleiding en aspect 1.9 Beroepspraktijkvorming. Normering Onderwijsproces Goed Aan acht van de negen aspecten is voldaan. Aan alle kernaspecten is voldaan. De elementen in het portret worden op een uitstekende wijze uitgevoerd. Voldoende Aan zeven van de negen aspecten is voldaan. Aan alle kernaspecten is voldaan. Er wordt voor het grootste deel aan de omschrijving van de portretten van deze indicatoren voldaan, waaronder de essentiële onderdelen. Onvoldoende Aan één of meer kernaspecten is niet voldaan. Aan drie tot acht van de aspecten is niet voldaan. Slecht Aan geen van de aspecten is voldaan. Bij het gebied Examinering en diplomering zijn alle aspecten als kernaspect benoemd. Normering Examinering en diplomering Goed Aan alle drie de aspecten is voldaan. De elementen in het portret worden op een uitstekende wijze uitgevoerd. Voldoende Aan alle drie de aspecten is voldaan. Er wordt voor het grootste deel aan de omschrijving van de portretten voldaan, waaronder de essentiële onderdelen. Onvoldoende Aan een of twee aspecten is niet voldaan. Slecht Aan geen van de drie aspecten is voldaan. Voor de normering van het gebied Kwaliteitsborging zijn drie kernaspecten benoemd. De kernaspecten zijn 4.1 Sturing, 4.2 Beoordeling en 4.3 Verbetering en verankering. Onderzoek naar kwaliteitsverbetering mbo Profit Opleidingen pagina 15 van 16

16 Normering Kwaliteitsborging Goed Aan alle aspecten is voldaan. De elementen in het portret worden op een uitstekende wijze uitgevoerd. Voldoende Aan alle kernaspecten is voldaan. Er wordt voor het grootste deel aan de omschrijving van de portretten voldaan, waaronder de essentiële onderdelen. Onvoldoende Aan twee of drie aspecten is niet voldaan. Slecht Aan alle vier de aspecten is niet voldaan. Onderzoek naar kwaliteitsverbetering mbo Profit Opleidingen pagina 16 van 16