STAAT VAN DE INSTELLING. SVGB Exameninstelling te Utrecht. Februari 2015

Transcriptie

1 STAAT VAN DE INSTELLING SVGB Exameninstelling te Utrecht Februari 2015

2 BRIN: 29ZC Onderzoeksnummer: Onderzoek uitgevoerd in: November 2014 Conceptrapport verzonden op: 13 januari 2015 Rapport vastgesteld te Utrecht op: 23 februari 2015

3 Inhoudsopgave 1 Inleiding Conclusie en vervolgtoezicht Conclusie Toelichting op de beoordeling Oordeel kwaliteitsborging op instellingsniveau Risico s op relevante indicatoren Toelichting Optiek (Opticien) Toelichting Audicien (Audicien) Toelichting Tandtechniek (Tandtechnisch medewerker basistechnieken) Toelichting Tandtechniek (Tandtechnicus prothese) Bijlagen Bijlage I Normeringen kwaliteitsgebieden Bijlage II Beoordeling indicatoren onderzochte instellingsbrede gebied Bijlage III Beoordeling indicatoren opleiding Optiek (Opticien), Beoordeling indicatoren opleiding Audicien (Audicien), Beoordeling indicatoren opleiding Tandtechniek (Tandtechnisch medewerkeer basistechnieken), Beoordeling indicatoren opleiding Tandtechniek (Tandtechnicus prothese),

4

5 1 Inleiding De Inspectie van het Onderwijs voerde in november 2014 een onderzoek uit naar de Staat van de instelling bij SVGB Exameninstelling. SVGB Exameninstelling heeft een licentie om de examinering en diplomering van examens optiek, audicien en tandtechniek uit te voeren. SVGB exameninstelling heeft in 2014 voor circa 250 studenten de examinering en diplomering verzorgd. Het onderzoek heeft tot doel het bepalen van de stand van de kwaliteitsborging, de examinering en diplomering en wettelijke vereisten van de exameninstelling. Daarnaast worden er risico s voor de kwaliteit ingeschat. De Staat van de instelling wordt elke drie jaar opgemaakt en bestaat uit een analyse van gegevens en een kwaliteitsonderzoek bij de exameninstelling. Tijdens het onderzoek zijn gesprekken gevoerd met studenten, docenten en medewerkers en zijn aanvullend documenten onderzocht. Ook maakte een gesprek met de directie deel uit van het onderzoek. De volgende opleidingen zijn onderzocht: Gebied Kwaliteitsborging en Wettelijke vereisten Gebied Examinering en diplomering Optiek (Opticien) Optiek (Opticien) 95181, Audicien (Audicien) 95221, Tandtechniek (Tandtechnisch medewerker basistechnieken) 95232, Tandtechniek (Tandtechnicus prothese) 95181, Audicien (Audicien) 95221, Tandtechniek (Tandtechnisch medewerker basistechnieken) 95232, Tandtechniek (Tandtechnicus prothese) Leerweg, niveau, locatie leerweg bbl niveau 4, locatie St. Laurensdreef 22, Utrecht leerweg bbl niveau 4, locatie St. Laurensdreef 22, Utrecht leerweg bbl niveau 2, locatie St. Laurensdreef 22, Utrecht leerweg bbl niveau 4, locatie St. Laurensdreef 22, Utrecht De resultaten van het onderzoek naar kwaliteitsborging leiden, in combinatie met geconstateerde risico's en de resultaten van de kwaliteitsonderzoeken, tot een risicobepaling voor uw exameninstelling. De omvang van de risico's bepaalt mede het vervolgtoezicht. De inspectie heeft zich bij haar onderzoek gebaseerd op het Toezichtkader bve Dit is te vinden op De normering is als bijlage I toegevoegd aan dit rapport. In hoofdstuk 2 leest u de conclusies waaronder ook het vervolgtoezicht voor de instelling. De resultaten van het onderzoek naar kwaliteitsborging, de examinering en diplomering en de wettelijke vereisten vindt u in hoofdstuk 3. Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 1 van 24

6 Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 2 van 24

7 2 Conclusie en vervolgtoezicht In dit hoofdstuk geven we aan welke conclusie we trekken uit het onderzoek naar de Staat van de instelling en wat het vervolgtoezicht inhoudt. Het vervolgtoezicht is bepaald op basis van het onderzoek naar kwaliteitsborging, het onderzoek naar examinering en diplomering en het onderzoek naar wettelijke vereisten. In het onderzoek geven wij een oordeel over de kwaliteitsborging. We gebruiken daarbij een vierdeling: goed, voldoende, onvoldoende of slecht. Voorts geven wij aan in welke mate er risico s zijn geconstateerd. Daarbij gebruiken we een driedeling: geen risico s, enkele risico s of veel risico s. In de hoofdstukken 3 volgt een nadere onderbouwing van de oordelen. 2.1 Conclusie Op basis van de resultaten uit het onderzoek naar de Staat van de instelling komen wij tot de conclusie dat de kwaliteitsborging bij SVGB Exameninstelling voldoende is. Voorts concluderen we dat er geen risico s in de zin van het toezichtkader zijn voor de kwaliteit van de examinering. Het oordeel dat de kwaliteitsborging voldoende is, gecombineerd met de constatering dat er geen risico s zijn voor de kwaliteit van het onderwijs, leidt er toe dat we geen aanvullend vervolgtoezicht uitvoeren. Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 3 van 24

8 Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 4 van 24

9 3 Toelichting op de beoordeling In dit hoofdstuk geven we een toelichting op de beoordeling. Tevens bespreken we op basis waarvan is bepaald in welke mate er risico s zijn bij de instelling. 3.1 Oordeel kwaliteitsborging op instellingsniveau Het kwaliteitsonderzoek bij SVGB Exameninstelling heeft geleid tot de volgende oordelen: Kwaliteitsgebied Goed Voldoende Onvoldoende 4. Kwaliteitsborging Slecht Hieronder geven we het oordeel van de aspecten van het kwaliteitsgebied kwaliteitsborging weer. Een detaillering van het oordeel vindt u in bijlage II. Daarin is de beoordeling van de onderliggende indicatoren per aspect opgenomen. Gebied 4: Kwaliteitsborging Voldoende Aspect 4.1 Sturing * 4.2 Beoordeling * 4.3 Verbetering en verankering * 4.4 Dialoog en verantwoording De aspecten met een * zijn kernaspecten, zie bijlage 1 voor normering per gebied. Onvoldoende Beschouwing Sinds het schooljaar voert SVGB Exameninstelling de examinering en diplomering uit voor de opleidingen Optiek, Audicien en Tandtechniek. Het aanvankelijk ingezette examenmateriaal is door SVGB Exameninstelling verbeterd en onder haar eigen verantwoordelijkheid ingezet voor de examinering. Door de uitbesteding van examens ligt de verantwoordelijkheid voor examinering en diplomering geheel bij SVGB Exameninstelling. Omdat de kwaliteitsborging van de examinering per uitbestede opleiding op dezelfde wijze is georganiseerd, wordt de kwaliteitsborging hier eenmalig besproken en beoordeeld. Deze beoordeling is vervolgens van toepassing op de vier onderzochte opleidingen. De systematiek van kwaliteitsborging van SVGB Exameninstelling richt zich op de constructie en vaststelling van de examenproducten, de uitvoering van de theorieexamens, de uitvoering van de proeven van bekwaamheid (zowel in het examencentrum als op de werkplek) en op de diplomering. Naast de centrale examencommissie zijn per opleidingscategorie subexamencommissies ingericht. Behalve bij de subexamencommissie Optiek maakt ook een vertegenwoordiger van het beroepenveld deel uit van de commissie. Verder is een toetsvaststellingscommissie en een commissie van beroep ingericht. De kwaliteitsborging is voldoende. SVGB Exameninstelling heeft korte lijnen en een werkend systeem van kwaliteitsborging. De sturing is voldoende. In het jaarplan kenniscentrum SVGB zijn de te behalen doelen voor de exameninstelling benoemd. Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 5 van 24

10 In het werkplan Examinering schooljaar , opgesteld op basis van de evaluatie van de examinering in het schooljaar , zijn door de centrale examencommissie de te behalen (verbeter)resultaten beschreven evenals de te bereiken doelen en de wijze waarop deze gerealiseerd moeten worden. Als aandachtspunt geldt hier dat de activiteiten en verantwoordelijkheden van SVGB Exameninstelling in de documenten, waaronder het jaarplan, duidelijker onderscheiden moeten worden van de activiteiten van de organisaties SVGB Kenniscentrum en de DHTA (Dutch HealthTec Academy, het samenwerkingsverband waar de opleiding van de betrokken studenten plaatsvindt. Ook de beoordeling en verbetering en verankering zijn voldoende. SVGB Exameninstelling evalueert veelvuldig met betrokkenen, ook met behulp van externe deskundigen. De (zelf)evaluatie achteraf, met een beoordeling van de behaalde resultaten en tussenevaluaties in de loop van het schooljaar, leiden waar nodig tot verbeteracties, volgens een adequate systematiek. De verbeteracties zijn inzichtelijk vastgelegd in het werkplan Examinering en vertaald in concrete doelen. De uitgezette verbeteringen worden gemonitord en de betrokkenen weten wat er van hen verlangd wordt. Het aspect dialoog en verantwoording is eveneens voldoende. Via pauzegesprekken wordt de dialoog met de studenten gedurende hun opleiding bij de DHTA gevoerd. Hierbij komt ook de kwaliteit van de examinering ter sprake. De dialoog met het bedrijfsleven is intensief, mede door de grote betrokkenheid van het bedrijfsleven bij de examens. Een tevredenheidsonderzoek bij de leerbedrijven, die nauw bij de examinering betrokken zijn, is nog in uitvoering. 3.2 Risico s op relevante indicatoren Bij het bepalen van de risico s in de zin van het toezichtkader hebben we, in samenhang met de toezichthistorie, gekeken naar de kwaliteit van de examinering, de tevredenheid van studenten, medewerkers en werkgevers en de stabiliteit van organisatie en management Het onderzoek heeft geleid tot de volgende risicobepaling: Mate van risico's Geen Enkele Veel - Kwaliteit examinering. Het risico voor de kwaliteit van de examinering schatten wij in als geen tot gering. De examinering en diplomering is bij de onderzochte opleidingen voldoende. De borging van de kwaliteit van de proeven van bekwaamheid en de theorie-examens is goed georganiseerd en in orde. - Tevredenheid studenten/medewerkers/werkgevers. De risico s naar aanleiding van tevredenheidsonderzoeken kwalificeren wij als geen tot gering. Studenten zijn over het algemeen tevreden over de uitvoering van de proeven van bekwaamheid en de toetsen van de onderzochte opleidingen. Over de tevredenheid van werkgevers zijn ons geen gegevens bekend, maar zij zijn nauw betrokken bij het beleid en de uitvoering van de examinering. Over de tevredenheid van de betrokken medewerkers zijn ons geen gegevens bekend. Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 6 van 24

11 - Stabiliteit organisatie en management. Het risico van de stabiliteit van de organisatie schatten we in als geen tot gering. SVGB Exameninstelling is pas sinds het schooljaar daadwerkelijk operationeel. De bij de examinering betrokken personen zijn daarentegen al langdurig in dienst bij de andere organisatieonderdelen. Wij kunnen echter de invloed van de korting op de subsidiëring van KBB SVGB en de economische crisis op de stabiliteit van SVGB Exameninstelling niet inschatten. Samenvattend Het management geeft, op basis van haar visie op de vormgeving van de examinering, adequaat sturing aan de ontwikkeling van zowel het exameninstrumentarium als aan de borging van de kwaliteit. Wij concluderen dat er geen risico s zijn. De onderzochte opleidingen hebben wij als voldoende beoordeeld en dat geldt ook voor de kwaliteitsborging. 3.3 Toelichting Optiek (Opticien) Het kwaliteitsonderzoek bij Optiek (Opticien), 93651, niveau 4, locatie Utrecht heeft geleid tot de volgende oordelen: Kwaliteitsgebied Goed Voldoende Onvoldoende Slecht 2. Examinering en diplomering 4. Kwaliteitsborging Voldoet Voldoet niet 5.Naleving wettelijke vereisten Het kwaliteitsonderzoek heeft geleid tot het oordeel voldoende voor de onderzochte kwaliteitsgebieden. Dat betekent dat de inspectie geen aanleiding heeft vervolgonderzoek uit te voeren of afspraken met de directie te maken voor deze opleiding. Oordeel per aspect Hieronder geven we het oordeel over de aspecten van de drie kwaliteitsgebieden weer. In bijlage III is de beoordeling van de onderliggende indicatoren van de betreffende aspecten per kwaliteitsgebieden opgenomen. Kwaliteitsgebied Voldoende Aspect Gebied 2: Examinering en diplomering 2.1 Exameninstrumentarium* 2.2 Afname en beoordeling* 2.3 Diplomering* Gebied 4: Kwaliteitsborging 4.1 Sturing* 4.2 Beoordeling* 4.3 Verbetering en verankering* 4.4 Dialoog en verantwoording Gebied 5: Naleving wettelijke vereisten 5.1 Naleving wettelijke vereisten De aspecten met een * zijn kernaspecten, zie bijlage 1 voor normering per gebied. Onvoldoende Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 7 van 24

12 Beschouwing Algemeen SVGB Exameninstelling is sinds twee jaar operationeel als exameninstelling. Men hecht een groot belang aan de inrichting en de uitvoering van de examinering, met inbreng van het beroepenveld. De inrichting van een doelmatige examenorganisatie, met een belangrijke rol voor de subexamencommissie optiek, heeft daarbij centraal gestaan. Examinering en diplomering Het exameninstrumentarium, de afname en beoordeling en de diplomering zijn voldoende. De exameninstrumenten voor het beroepsgerichte deel zijn zelf ontwikkeld. Het totale beroepsgerichte exameninstrumentarium voor deze opleiding bestaat, naast drie theorie-examens, uit proeven van bekwaamheid (pvb s) voor de vier kerntaken. Tezamen geven deze examenonderdelen voldoende dekking en alle examenonderdelen moeten minimaal voldoende zijn. De beoordelingsvoorschriften zijn adequaat en ook de transparantie voldoet. De pvb voor kerntaak 1 (Refractie) wordt afgenomen op de locatie van SVGB Exameninstelling. De beoordeling gebeurt door twee assessoren, waarvan een uit de praktijk en een schoolassessor (vanuit DHTA). De andere pvb s worden afgenomen op de werkplek van de studenten. De beoordeling gebeurt hierbij door een assessor van SVGB Exameninstelling en de praktijkopleider. De assessor is bij een deel van de uitvoering van de examinering aanwezig en stelt na een eindgesprek met de student samen met de praktijkopleider het eindresultaat vast. Voorafgaand aan de examinering wordt de praktijkopleider geïnstrueerd door SVGB Exameninstelling. De door SVGB Exameninstelling ingezette assessoren zijn afkomstig uit de praktijk en worden nader geschoold door SVGB Exameninstelling. De (sub)examencommissie optiek ziet toe op een betrouwbare afname en beoordeling. Zij draagt zorg voor instructie van assessoren en praktijkopleiders. De commissie evalueert verder de uitgevoerde pvb s, met inbreng van de assessoren, en analyseert de bevindingen en resultaten en past waar nodig de examenproducten en de gang van zaken aan. Ook vinden er bijwoningen plaats van pvb s in de gesimuleerde situatie bij SVGB Exameninstelling, waarvan de bevindingen in vergaderingen van de subexamencommissie worden besproken. Een structurelere opzet van de steekproefsgewijze bijwoning verdient evenwel de aandacht. De resultaten van de diverse examenonderdelen worden nauwgezet door SVGB Exameninstelling verwerkt en geregistreerd. Op grond van deze informatie komt de examencommissie tot een gedegen diplomabesluit. Nederlands De examens voor lezen, luisteren en schrijven worden ingekocht bij leverancier ICE. Deze examens worden ongewijzigd ingezet en zijn eerder door ons als voldoende beoordeeld. De examens voor spreken en gesprekken voeren zijn zelf ontwikkeld en voldoen niet. In het beoordelingsmodel zijn diverse criteria onvoldoende uitgewerkt en leiden daardoor in onvoldoende mate tot een objectieve, betrouwbare beoordeling. De waardering voor Nederlands weegt nog niet mee in het oordeel over het exameninstrumentarium. Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 8 van 24

13 Engels De examens voor lezen en luisteren worden ingekocht bij leverancier ICE. Deze examens worden ongewijzigd ingezet en zijn eerder door ons als voldoende beoordeeld. De examens voor schrijven, spreken en gesprekken voeren zijn zelf ontwikkeld. Het examen voor schrijven voldoet; dat geldt niet voor de examens voor spreken en gesprekken voeren. De beoordelingscriteria stemmen ten dele onvoldoende overeen met de ERK-beoordelingscriteria. Kwaliteitsborging De kwaliteitsborging is voldoende. Gezien de omvang van SVGB Exameninstelling is een onderscheid tussen kwaliteitsborging op instellingsniveau en opleidingsniveau niet aan de orde. De beoordeling van de kwaliteitsborging van de opleiding valt samen met de beoordeling van de kwaliteitsborging op instellingsniveau en is in hoofdstuk 3.1 beschreven. Wettelijke vereisten De opleiding voldoet aan de onderzochte wettelijke eisen. 3.4 Toelichting Audicien (Audicien) Het kwaliteitsonderzoek bij Audicien (Audicien), 95181, niveau 4, locatie Utrecht heeft geleid tot de volgende oordelen: Kwaliteitsgebied Goed Voldoende Onvoldoende Slecht 2. Examinering en diplomering 4. Kwaliteitsborging Voldoet Voldoet niet 5.Naleving wettelijke vereisten Het kwaliteitsonderzoek heeft geleid tot het oordeel voldoende voor de onderzochte kwaliteitsgebieden. Dat betekent dat de inspectie geen aanleiding heeft vervolgonderzoek uit te voeren of afspraken met de directie te maken voor deze opleiding. Oordeel per aspect Hieronder geven we het oordeel over de aspecten van de drie kwaliteitsgebieden weer. In bijlage III is de beoordeling van de onderliggende indicatoren van de betreffende aspecten per kwaliteitsgebieden opgenomen. Kwaliteitsgebied Voldoende Onvoldoende Aspect Gebied 2: Examinering en diplomering 2.1 Exameninstrumentarium* 2.2 Afname en beoordeling* 2.3 Diplomering* Gebied 4: Kwaliteitsborging 4.1 Sturing* 4.2 Beoordeling* 4.3 Verbetering en verankering* 4.4 Dialoog en verantwoording Gebied 5: Naleving wettelijke vereisten 5.1 Naleving wettelijke vereisten De aspecten met een * zijn kernaspecten, zie bijlage 1 voor normering per gebied. Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 9 van 24

14 Beschouwing Algemeen SVGB Exameninstelling is sinds twee jaar operationeel als exameninstelling. Men hecht een groot belang aan de inrichting en de uitvoering van de examinering, met inbreng van het beroepenveld. De inrichting van een doelmatige examenorganisatie, met een belangrijke rol voor de subexamencommissie audicien, heeft daarbij centraal gestaan. Examinering en diplomering Het exameninstrumentarium, de afname en beoordeling en de diplomering zijn voldoende. De exameninstrumenten voor het beroepsgerichte deel zijn zelf ontwikkeld. Het totale beroepsgerichte exameninstrumentarium voor de vier kerntaken van deze opleiding bestaat, naast theorie-examens, uit twee proeven van bekwaamheid (pvb s) en een praktijkopdracht. Een zestal opdrachten voor de eerste pvb (Audicien ondersteunende werkzaamheden) worden in simulatie bij DHTA uitgevoerd met beoordeling door een assessor. De andere vier opdrachten van deze pvb vinden plaats in het leerbedrijf, de praktijkopleider is hier de beoordelaar. Daarnaast is er een praktijkopdracht Akoestisch aanpassen van oorstukjes, met beoordeling door een assessor. De afname van de afsluitende pvb, met een reflectiegesprek, vindt geheel in het leerbedrijf plaats; de beoordeling gebeurt door een assessor. Tezamen geven deze examenonderdelen voldoende dekking en alle afzonderlijke examenonderdelen moeten minimaal voldoende zijn. De beoordelingsvoorschriften zijn adequaat en ook de transparantie voldoet. Als verbeterpunt geldt dat de consistentie van examen- en toetsnamen in de diverse documenten, evenals de verwijzing naar de werkprocessen aandacht verdient. De door SVGB Exameninstelling ingezette assessoren zijn afkomstig uit de praktijk en worden nader geschoold door SVGB Exameninstelling. De (sub)examencommissie audicien, waar ook een deskundige vertegenwoordiger uit de beroepspraktijk deel van uitmaakt, ziet toe op een betrouwbare afname en beoordeling. Zij draagt zorg voor instructie van assessoren en praktijkopleiders. De commissie evalueert verder de uitgevoerde pvb s, met inbreng van de assessoren, en analyseert de bevindingen en resultaten en past waar nodig de examenproducten en de gang van zaken aan. Een uitbreiding van het toezicht op de beoordeling, zoals door een steekproefsgewijze bijwoning van de examens, verdient evenwel de aandacht. De resultaten van de diverse examenonderdelen worden nauwgezet door SVGB Exameninstelling verwerkt en geregistreerd. Op grond van deze informatie komt de examencommissie tot een gedegen diplomabesluit. Nederlands De examens voor lezen, luisteren en schrijven worden ingekocht bij leverancier ICE. Deze examens worden ongewijzigd ingezet en zijn eerder door ons als voldoende beoordeeld. De examens voor spreken en gesprekken voeren zijn zelf ontwikkeld en voldoen niet. In het beoordelingsmodel zijn diverse criteria onvoldoende uitgewerkt en leiden daardoor in onvoldoende mate tot een objectieve, betrouwbare beoordeling. De waardering voor Nederlands weegt nog niet mee in het oordeel over het exameninstrumentarium. Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 10 van 24

15 Engels De examens voor lezen en luisteren worden ingekocht bij leverancier ICE. Deze examens worden ongewijzigd ingezet en zijn eerder door ons als voldoende beoordeeld. De examens voor schrijven, spreken en gesprekken voeren zijn zelf ontwikkeld. Het examen voor schrijven voldoet; dat geldt niet voor de examens voor spreken en gesprekken voeren. De beoordelingscriteria stemmen ten dele onvoldoende overeen met de ERK-beoordelingscriteria. Ook de cesuur voldoet niet omdat een kandidaat die voor belangrijke criteria als verstaanbaar en te begrijpen een onvoldoende scoort, toch kan slagen. Kwaliteitsborging De kwaliteitsborging is voldoende. Gezien de omvang van SVGB Exameninstelling is een onderscheid tussen kwaliteitsborging op instellingsniveau en opleidingsniveau niet aan de orde. De beoordeling van de kwaliteitsborging van de opleiding valt samen met de beoordeling van de kwaliteitsborging op instellingsniveau en is in hoofdstuk 3.1 beschreven. Wettelijke vereisten De opleiding voldoet aan de onderzochte wettelijke eisen. 3.5 Toelichting Tandtechniek (Tandtechnisch medewerker basistechnieken) Het kwaliteitsonderzoek bij Tandtechniek (Tandtechnisch medewerker basistechnieken), 95221, niveau 2, locatie Utrecht heeft geleid tot de volgende oordelen: Kwaliteitsgebied Goed Voldoende Onvoldoende Slecht 2. Examinering en diplomering 4. Kwaliteitsborging Voldoet Voldoet niet 5.Naleving wettelijke vereisten Het kwaliteitsonderzoek heeft geleid tot het oordeel voldoende voor de onderzochte kwaliteitsgebieden. Dat betekent dat de inspectie geen aanleiding heeft vervolgonderzoek uit te voeren of afspraken met de directie te maken voor deze opleiding. Oordeel per aspect Hieronder geven we het oordeel over de aspecten van de drie kwaliteitsgebieden weer. In bijlage III is de beoordeling van de onderliggende indicatoren van de betreffende aspecten per kwaliteitsgebieden opgenomen. Kwaliteitsgebied Voldoende Aspect Gebied 2: Examinering en diplomering 2.1 Exameninstrumentarium* 2.2 Afname en beoordeling* 2.3 Diplomering* Gebied 4: Kwaliteitsborging 4.1 Sturing* 4.2 Beoordeling* 4.3 Verbetering en verankering* Onvoldoende Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 11 van 24

16 Kwaliteitsgebied Voldoende Aspect 4.4 Dialoog en verantwoording Gebied 5: Naleving wettelijke vereisten 5.1 Naleving wettelijke vereisten De aspecten met een * zijn kernaspecten, zie bijlage 1 voor normering per gebied. Onvoldoende Beschouwing Algemeen SVGB Exameninstelling is sinds twee jaar operationeel als exameninstelling. Men hecht een groot belang aan de inrichting en de uitvoering van de examinering, met inbreng van het beroepenveld. De inrichting van een doelmatige examenorganisatie, met een belangrijke rol voor de subexamencommissie tandtechniek, heeft daarbij centraal gestaan. Examinering en diplomering Het exameninstrumentarium, de afname en beoordeling en de diplomering zijn voldoende. De exameninstrumenten voor het beroepsgerichte deel zijn zelf ontwikkeld. Het totale beroepsgerichte exameninstrumentarium voor deze opleiding bestaat, naast een achttal theorie-examens, uit proeven van bekwaamheid (pvb s) voor de drie kerntaken. Twee van deze proeven kennen zowel een uit te voeren praktijkopdracht op de werkplek als een min of meer identieke praktijkopdracht die in simulatie bij SVGB Exameninstelling plaatsvindt. In het eerste geval vindt de beoordeling plaats door de praktijkopleider, in het tweede geval door twee assessoren van SVGB Exameninstelling. De gekozen beoordelingssystematiek draagt bij aan de betrouwbaarheid van de examinering. Tezamen geven deze examenonderdelen voldoende dekking en alle examenonderdelen moeten minimaal voldoende zijn. De beoordelingsvoorschriften zijn adequaat en ook de transparantie voldoet. Bij de in 2014 gediplomeerde kandidaten was er sprake van studenten waarvan de beroepsgerichte examinering nog onder verantwoordelijkheid van het betrokken roc heeft plaatsgevonden; alleen de generieke examinering moest aanvullend nog plaatsvinden bij SVGB Exameninstelling. Wij hebben geconstateerd dat bij recentere, nog niet gediplomeerde kandidaten de door SVGB Exameninstelling ontwikkelde examenproducten reeds op adequate wijze zijn ingezet. De door SVGB Exameninstelling ingezette assessoren zijn afkomstig uit de praktijk en worden nader geschoold door SVGB Exameninstelling. De (sub)examencommissie tandtechniek, waar ook een deskundige vertegenwoordiger uit de beroepspraktijk deel van uitmaakt, ziet toe op een betrouwbare afname en beoordeling. Zij draagt zorg voor instructie van assessoren en praktijkopleiders. De commissie evalueert verder de uitgevoerde pvb s, met inbreng van de assessoren, en analyseert de bevindingen en resultaten en past waar nodig de examenproducten en de gang van zaken aan. Ook vinden er bijwoningen plaats van de pvb s in de gesimuleerde situatie bij SVGB Exameninstelling, waarvan de schriftelijke verslagen in vergaderingen van de subexamencommissie worden besproken. Een structurelere opzet van de steekproefsgewijze bijwoning verdient evenwel de aandacht. De resultaten van de diverse examenonderdelen worden nauwgezet door SVGB Exameninstelling verwerkt en geregistreerd. Op grond van deze informatie komt de examencommissie tot een gedegen diplomabesluit. Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 12 van 24

17 Nederlands De examens voor lezen, luisteren en schrijven worden ingekocht bij leverancier ICE. Deze examens worden ongewijzigd ingezet en zijn eerder door ons als voldoende beoordeeld. De examens voor spreken en gesprekken voeren zijn zelf ontwikkeld en voldoen niet. In het beoordelingsmodel zijn diverse criteria onvoldoende uitgewerkt en leiden daardoor in onvoldoende mate tot een objectieve, betrouwbare beoordeling. De waardering voor Nederlands weegt nog niet mee in het oordeel over het exameninstrumentarium. Kwaliteitsborging De kwaliteitsborging is voldoende. Gezien de omvang van SVGB Exameninstelling is een onderscheid tussen kwaliteitsborging op instellingsniveau en opleidingsniveau niet aan de orde. De beoordeling van de kwaliteitsborging van de opleiding valt samen met de beoordeling van de kwaliteitsborging op instellingsniveau en is in hoofdstuk 3.1 beschreven. Wettelijke vereisten De opleiding voldoet aan de onderzochte wettelijke eisen. 3.6 Toelichting Tandtechniek (Tandtechnicus prothese) Het kwaliteitsonderzoek bij Tandtechniek (Tandtechnicus prothese), 95232, niveau 4, locatie Utrecht heeft geleid tot de volgende oordelen: Kwaliteitsgebied Goed Voldoende Onvoldoende Slecht 2. Examinering en diplomering 4. Kwaliteitsborging Voldoet Voldoet niet 5.Naleving wettelijke vereisten Het kwaliteitsonderzoek heeft geleid tot het oordeel voldoende voor de onderzochte kwaliteitsgebieden. Dat betekent dat de inspectie geen aanleiding heeft vervolgonderzoek uit te voeren of afspraken met de directie te maken voor deze opleiding. Oordeel per aspect Hieronder geven we het oordeel over de aspecten van de drie kwaliteitsgebieden weer. In bijlage III is de beoordeling van de onderliggende indicatoren van de betreffende aspecten per kwaliteitsgebieden opgenomen. Kwaliteitsgebied Voldoende Aspect Gebied 2: Examinering en diplomering 2.1 Exameninstrumentarium* 2.2 Afname en beoordeling* 2.3 Diplomering* Gebied 4: Kwaliteitsborging 4.1 Sturing* 4.2 Beoordeling* 4.3 Verbetering en verankering* 4.4 Dialoog en verantwoording Onvoldoende Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 13 van 24

18 Kwaliteitsgebied Voldoende Aspect Gebied 5: Naleving wettelijke vereisten 5.1 Naleving wettelijke vereisten De aspecten met een * zijn kernaspecten, zie bijlage 1 voor normering per gebied. Onvoldoende Beschouwing Algemeen SVGB Exameninstelling is sinds twee jaar operationeel als exameninstelling. Men hecht een groot belang aan de inrichting en de uitvoering van de examinering, met inbreng van het beroepenveld. De inrichting van een doelmatige examenorganisatie, met een belangrijke rol voor de subexamencommissie tandtechniek, heeft daarbij centraal gestaan. Examinering en diplomering Het exameninstrumentarium, de afname en beoordeling en de diplomering zijn voldoende. De exameninstrumenten voor het beroepsgerichte deel zijn zelf ontwikkeld. Het totale beroepsgerichte exameninstrumentarium voor deze opleiding bestaat, naast een tiental theorie-examens, uit proeven van bekwaamheid (pvb s) voor de vier kerntaken. Deze proeven kennen zowel een uit te voeren praktijkopdracht op de werkplek als een min of meer identieke praktijkopdracht die in simulatie bij SVGB Exameninstelling plaatsvindt. In het eerste geval vindt de beoordeling plaats door de praktijkopleider, in het tweede geval door twee assessoren van SVGB Exameninstelling. Ook is er nog een patiëntencasus in het kader van de proeve voor kerntaak 6. De te vervaardigen documentatie bij deze casus wordt door een beoordelaar van SVGB Exameninstelling beoordeeld. De gekozen beoordelingssystematiek draagt bij aan de betrouwbaarheid van de examinering. Tezamen geven deze examenonderdelen voldoende dekking en alle examenonderdelen moeten minimaal voldoende zijn. De beoordelingsvoorschriften zijn adequaat en ook de transparantie voldoet. Omdat de examinering reeds start in het eerste leerjaar was er in 2014 sprake van gediplomeerden die alleen voor de beroepsgerichte examinering in het laatste leerjaar (kerntaak zes) gebruik hebben gemaakt van het hiervoor beschreven examenmateriaal. De beroepsgerichte examinering voor de andere kerntaken heeft nog plaatsgevonden onder de verantwoordelijkheid van het betrokken roc. Wij hebben geconstateerd dat het meest recente examenmateriaal, dat door SVGB Exameninstelling voor deze kerntaken ontwikkeld is, reeds op adequate ingezet is ingezet bij nog niet gediplomeerde kandidaten. De door SVGB Exameninstelling ingezette assessoren zijn afkomstig uit de praktijk en worden nader geïnstrueerd. De (sub)examencommissie tandtechniek, waar ook een deskundige uit de beroepspraktijk deel van uitmaakt, ziet toe op een betrouwbare afname en beoordeling. Zij draagt zorg voor instructie van assessoren en praktijkopleiders. De commissie evalueert verder de uitgevoerde pvb s, met inbreng van de assessoren, en analyseert de bevindingen en past waar nodig de examenproducten en de gang van zaken aan. Ook vinden er bijwoningen plaats van de pvb s in de gesimuleerde situatie bij SVGB Exameninstelling, waarvan de schriftelijke verslagen in vergaderingen van de subexamencommissie worden besproken. Een structurelere opzet van de steekproefsgewijze bijwoning verdient evenwel de aandacht. De resultaten van de diverse examenonderdelen worden nauwgezet door SVGB Exameninstelling verwerkt en geregistreerd. Op grond van deze informatie komt de examencommissie tot een gedegen diplomabesluit. Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 14 van 24

19 Nederlands De examens voor lezen, luisteren en schrijven worden ingekocht bij leverancier ICE. Deze examens worden ongewijzigd ingezet en zijn eerder door ons als voldoende beoordeeld. De examens voor spreken en gesprekken voeren zijn zelf ontwikkeld en voldoen echter niet. In het beoordelingsmodel zijn diverse criteria onvoldoende uitgewerkt en leiden daardoor in onvoldoende mate tot een objectieve, betrouwbare beoordeling. De waardering voor Nederlands weegt nog niet mee in het oordeel over het exameninstrumentarium. Engels De examens voor lezen en luisteren worden ingekocht bij leverancier ICE. Deze examens worden ongewijzigd ingezet en zijn eerder door ons als voldoende beoordeeld. De examens voor schrijven, spreken en gesprekken voeren zijn zelf ontwikkeld. Het examen voor schrijven voldoet; dat geldt niet voor de examens voor spreken en gesprekken voeren. De beoordelingscriteria stemmen ten dele onvoldoende overeen met de ERK-beoordelingscriteria. Kwaliteitsborging De kwaliteitsborging is voldoende. Gezien de omvang van SVGB Exameninstelling is een onderscheid tussen kwaliteitsborging op instellingsniveau en opleidingsniveau niet aan de orde. De beoordeling van de kwaliteitsborging van de opleiding valt samen met de beoordeling van de kwaliteitsborging op instellingsniveau en is in hoofdstuk 3.1 beschreven. Wettelijke vereisten De opleiding voldoet aan de onderzochte wettelijke eisen. Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 15 van 24

20 Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 16 van 24

21 Bijlagen Bijlage I Normeringen kwaliteitsgebieden De normen Op basis van het onderzoek spreekt de inspectie oordelen uit waarvoor zij gebruik maakt van een normering. Deze bestaat uit: 1. Een normering per indicator: wanneer wordt voldaan aan de indicator? Hiervoor gebruikt de inspectie portretten: de aangetroffen situatie voldoet aan de indicator indien deze over het geheel genomen voldoet aan de beschrijving in het portret. Het gaat hier om een weging van het geheel met hantering van toleranties. 2. Een normering per aspect. 3. Een normering per kwaliteitsgebied. Bij het gebied Examinering en diplomering zijn alle aspecten als kernaspect aangegeven. Normering Examinering en diplomering Goed Aan alle standaarden is voldaan. De elementen in het portret worden op een uitstekende wijze uitgevoerd. Voldoende Aan alle standaarden is voldaan. Er wordt voor het grootste deel aan de omschrijving van de portretten van deze indicatoren voldaan, waaronder de essentiële onderdelen. Onvoldoende Aan één standaard is niet voldaan. Slecht Aan twee of drie standaarden is niet voldaan. Voor de normering van het gebied Kwaliteitsborging zijn drie kernaspecten benoemd. De kernaspecten zijn 4.1 Sturing, 4.2 Beoordeling en 4.3 Verbetering en verankering. Deze kernaspecten moeten alle drie voldoende zijn om een voldoende beoordeling te krijgen. Bij één of meer onvoldoende kernaspecten is de kwaliteitsborging onvoldoende. De borging van de kwaliteit van de examinering dient voldoende te zijn, om tot een voldoende beoordeling van de kwaliteitsborging te komen. Normering Kwaliteitsborging Goed Aan alle aspecten is voldaan. Aan alle indicatoren is voldaan. De elementen in het portret worden op een uitstekende wijze uitgevoerd. Voldoende Aan alle kernaspecten is voldaan. Aan alle indicatoren van deze aspecten is voldaan. Er wordt voor het grootste deel aan de omschrijving van de portretten van deze indicatoren voldaan, waaronder de essentiële onderdelen. Onvoldoende Aan twee aspecten is niet voldaan. Aan één of twee kernaspecten is niet voldaan Slecht Aan drie of vier aspecten is niet voldaan. Normering van het gebied Naleving wettelijke vereisten: de instelling of opleiding voldoet niet aan de wettelijke bepalingen indien de inspectie vaststelt dat één van deze bepalingen niet wordt nageleefd. Bij sommige bepalingen vloeit de norm direct uit de wet voort. Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 17 van 24

22 Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 18 van 24

23 Bijlage II Beoordeling indicatoren onderzochte instellingsbrede gebied Gebied 4: Kwaliteitsborging Voldoende Onvoldoende Aspecten Indicatoren 4.1 Sturing * Plannen Informatie Continuïteit 4.2 Beoordeling * Monitoring Evaluatie 4.3 Verbeteringen Verbeteraanpak verankering * Deskundigheidsbevordering Verankering 4.4 Dialoog en Intern verantwoording Extern De aspecten met een * zijn kernaspecten, zie bijlage 1 voor normering per gebied Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 19 van 24

24 Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 20 van 24

25 Bijlage III Beoordeling indicatoren opleiding Optiek (Opticien), Gebied 2: Examinering en diplomering Voldoende Onvoldoende Aspecten Indicatoren 2.1 Examenin Onderscheid tussen strumentarium* ontwikkelgerichte toetsen en examinering Dekking van het kwalificatiedossier Cesuur Beoordelingswijze Transparantie 2.2 Afname en Authentieke afname beoordeling* Betrouwbaarheid 2.3 Diplomering* Besluitvorming diplomering Verantwoordelijkheid examencommissie Gebied 4: Kwaliteitsborging Voldoende Onvoldoende Aspecten Indicatoren 4.1 Sturing * Plannen Informatie Continuïteit 4.2 Beoordeling * Monitoring Evaluatie 4.3 Verbeteringen Verbeteraanpak verankering * Deskundigheidsbevordering Verankering 4.4 Dialoog en Intern verantwoording Extern Gebied 5: Naleving wettelijke vereisten Voldoet Voldoet niet Aspecten Indicatoren 5.1 Naleving wettelijke vereisten Naleving wettelijke vereisten Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 21 van 24

26 Beoordeling indicatoren opleiding Audicien (Audicien), Gebied 2: Examinering en diplomering Voldoende Onvoldoende Aspecten Indicatoren 2.1 Examenin Onderscheid tussen strumentarium* ontwikkelgerichte toetsen en examinering Dekking van het kwalificatiedossier Cesuur Beoordelingswijze Transparantie 2.2 Afname en Authentieke afname beoordeling* Betrouwbaarheid 2.3 Diplomering* Besluitvorming diplomering Verantwoordelijkheid examencommissie Gebied 4: Kwaliteitsborging Voldoende Onvoldoende Aspecten Indicatoren 4.1 Sturing * Plannen Informatie Continuïteit 4.2 Beoordeling * Monitoring Evaluatie 4.3 Verbeteringen Verbeteraanpak verankering * Deskundigheidsbevordering Verankering 4.4 Dialoog en Intern verantwoording Extern Gebied 5: Naleving wettelijke vereisten Voldoet Voldoet niet Aspecten Indicatoren 5.1 Naleving wettelijke vereisten Naleving wettelijke vereisten Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 22 van 24

27 Beoordeling indicatoren opleiding Tandtechniek (Tandtechnisch medewerkeer basistechnieken), Gebied 2: Examinering en diplomering Voldoende Onvoldoende Aspecten Indicatoren 2.1 Examenin Onderscheid tussen strumentarium* ontwikkelgerichte toetsen en examinering Dekking van het kwalificatiedossier Cesuur Beoordelingswijze Transparantie 2.2 Afname en Authentieke afname beoordeling* Betrouwbaarheid 2.3 Diplomering* Besluitvorming diplomering Verantwoordelijkheid examencommissie Gebied 4: Kwaliteitsborging Voldoende Onvoldoende Aspecten Indicatoren 4.1 Sturing * Plannen Informatie Continuïteit 4.2 Beoordeling * Monitoring Evaluatie 4.3 Verbeteringen Verbeteraanpak verankering * Deskundigheidsbevordering Verankering 4.4 Dialoog en Intern verantwoording Extern Gebied 5: Naleving wettelijke vereisten Voldoet Voldoet niet Aspecten Indicatoren 5.1 Naleving wettelijke vereisten Naleving wettelijke vereisten Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 23 van 24

28 Beoordeling indicatoren opleiding Tandtechniek (Tandtechnicus prothese), Gebied 2: Examinering en diplomering Voldoende Onvoldoende Aspecten Indicatoren 2.1 Examenin Onderscheid tussen strumentarium* ontwikkelgerichte toetsen en examinering Dekking van het kwalificatiedossier Cesuur Beoordelingswijze Transparantie 2.2 Afname en Authentieke afname beoordeling* Betrouwbaarheid 2.3 Diplomering* Besluitvorming diplomering Verantwoordelijkheid examencommissie Gebied 4: Kwaliteitsborging Voldoende Onvoldoende Aspecten Indicatoren 4.1 Sturing * Plannen Informatie Continuïteit 4.2 Beoordeling * Monitoring Evaluatie 4.3 Verbeteringen Verbeteraanpak verankering * Deskundigheidsbevordering Verankering 4.4 Dialoog en Intern verantwoording Extern Gebied 5: Naleving wettelijke vereisten Voldoet Voldoet niet Aspecten Indicatoren 5.1 Naleving wettelijke vereisten Naleving wettelijke vereisten Rapport Staat van de exameninstelling instelling mbo SVGB Exameninstelling pagina 24 van 24