Jaarverslag Examinering

Transcriptie

1 Jaarverslag Examinering Verslagjaar: 2015 Onderwijscluster: CIOS Goes-Breda 1

2 Inhoudsopgave jaarverslag 1. Terugblik organisatieaspecten examencommissie Gegevens examencommissie Samenstelling examencommissie verslagjaar Hoofdtaak examencommissie Organisatiestructuur en gedelegeerde taken Beschikbare middelen examencommissie verslagjaar Vergadermomenten verslagjaar Terugblik kernactiviteiten examinering verslagjaar Terugblik borging van de kwaliteit van de examinering Gestelde kwaliteitsdoelen examinering verslagjaar Uitgevoerde activiteiten om de kwaliteit van de examinering te monitoren en te bewaken Conclusies ten aanzien van de kwaliteitsdoelen Conclusies ten aanzien van de kwaliteit van de examinering - totaal Vooruit kijken: verbeteringen

3 Inleiding In 2015 is het proces van professionalisering van de examinering op CIOS Goes Breda voortgezet. De uitvoering van de zelfevaluatie- en het verbeterplan hebben voortdurend aandacht gekregen. Kwaliteitsverbetering op clusterniveau Het herziene Scalda Handboek Examinering werd opgeleverd in december Het handboek wordt toegepast vanaf voor de cohorten die gestart zijn in Aan het Scalda Handboek is een drietal CIOS-specifieke bijlagen toegevoegd. Ook in 2015 zijn er inspanningen verricht om de deskundigheid van de medewerkers en praktijkbegeleiders, op het gebied van toetsconstructie, te verhogen. Dit betreft vooral de formatieve toetsing aangezien voor de Proeven van Bekwaamheid (summatief) landelijk ontwikkelde producten gebruikt worden. De betrokkenheid van het werkveld bij de examinering is groot. De bestaande brancheplatforms en werkveldadviescommissie waarin gesproken wordt over de inhoud en de examinering van de opleiding kwamen in 2015 één of meerdere keren bij elkaar. Het initiatief van CIOS-NL om landelijke Proeven van Bekwaamheid (PvB s) volgens het landelijke examenprofiel te ontwikkelen blijft een succes. Zowel werkveld als inspectie geven aan dat het degelijke producten zijn. De PvB s worden jaarlijks bijgesteld door een landelijke vaststellingscommissie waarin ook het werkveld is vertegenwoordigd. Vanuit CIOS Goes Breda is Nels Rijvers nauw betrokken als deelnemer in de constructiegroep Ook in 2015 werden alle toegepaste PvB s op instellingsniveau vastgesteld. Kwaliteitsverbetering en de PDCA-cyclus: Alle stappen die de examencommissie CIOS Goes-Breda neemt om te zorgen voor goede examinering komen aan de orde: van het examenplan, de inkoop van examens tot het diplomeren en borgen van de kwaliteit. Er wordt hierbij gebruik gemaakt van de procesarchitectuur examinering en het handboek examinering van Scalda Ronald Klomp Directeur CIOS Goes Breda 3

4 1. Terugblik organisatieaspecten examencommissie 1.1. Gegevens examencommissie Onderwijscluster/opleiding(en): CIOS Goes Breda Periode waarop dit verslag betrekking heeft: 2015 Status van het verslag (concept/definitief) Jaarverslag vastgesteld door definitief examencommissie Jaarverslag vastgesteld per datum 13 april Samenstelling examencommissie verslagjaar 2015 Voorzitter: Clusterdirecteur, Ronald Klomp Secretaris: Stafdocent, Jan Eversdijk Lid: Teamleider CIOS, Ferenc Weisz Lid: Teamleider CIOS, Nels Rijvers Extern: Vertegenwoordiger private sector Dies van de Velde Extern: Vertegenwoordiger publiek sector Marja Noordhoek 1.3. Hoofdtaak examencommissie De Examencommissie CIOS Goes Breda is verantwoordelijk voor alle examenprocessen bij het onderwijscluster. De dagelijkse gang van zaken met betrekking tot examinering wordt behartigd door de teamleider (tevens lid examencommissie) en de secretaris van de examencommissie. De zaken waarover zij kunnen beslissen, zijn beschreven in het handboek examinering. De betreffende teamleider legt de voorgenomen besluiten voor aan de vergadering van de examencommissie. Toetsplannen: De toetsplannen en PTA s van CIOS Goes Breda worden na vaststelling in de examencommissie gepubliceerd op N@tschool/Infonet Afnameplanning Het uitgangspunt bij de toetsplanning zijn de toetsplannen en de STOER. Publicatie ook op N@tschool/Infonet Toetscorrectie De beoordeling van gemaakt werk geschiedt aan de hand van de vastgestelde beoordeling- of correctieformulieren. Verwerking resultaten Na correctie/beoordeling worden de examenmaterialen (Kerntaakboekjes) aangeleverd op het examenbureau. De resultaten worden na interne vaststelling digitaal opgeslagen in KRD. De overige examenmaterialen (processen verbaal, examenopdrachten, antwoordmodellen, gemaakt werk enz.) worden gearchiveerd. Vaststellen examenresultaten Deze taak is in voorbereiding gedelegeerd aan de teamleider en de secretaris van de examencommissie. De teamleider legt het voornemen tot vaststellen van de resultaten en de diplomering voor in de eerstvolgende vergadering van de examencommissie. 4

5 1.4. Organisatiestructuur en gedelegeerde taken Werkzaamheden examenbureau Voor advies en ondersteuning op examinering heeft CIOS Goes Breda een examenbureau ingericht. Het administratief ondersteunende personeel ondersteunt bij het proces van constructie tot vaststelling, de uitvoering van de toetsen en archivering. De onderwijskundig medewerkers van het examenbureau vervullen hoofdzakelijk werkzaamheden m.b.t. vaststelling, uitvoering van steekproeven, planning van toetsing, en toezicht bij toets afname. De onderwijskundige medewerkers van alle examenbureaus van Scalda hebben in de vorm van het Scalda Netwerk Examinering een gezamenlijk overleg (ca. 6 keer per jaar). Binnen dit netwerk is in 2015 verder gewerkt aan het verbeteren van het Handboek Examinering. Daarnaast worden knelpunten m.b.t. examinering, waar de verschillende colleges tegenaan lopen, besproken. Werkzaamheden Vaststellingscommissie De vaststellingscommissie, bestaande uit Henri Smulders en Jan Eversdijk, beoordeelt de examens en adviseert vervolgens de examencommissie m.b.t. de vaststelling. In 2015 heeft de examencommissie weer besloten de exameninstrumenten in te kopen. De vaststellingscommissie heeft vervolgens een positief advies gegeven voor de vaststelling van het in gekochte instrumentarium. Daarnaast heeft de vaststellingscommissie in opdracht van de examencommissie per periode tussen de 15-25% van de formatieve toetsen aan een screening onderworpen op vorm en inhoud. Het vastgestelde examen (PVB)wordt met alle daarbij behorende stukken gearchiveerd door het examenbureau. Uitvoering PvB s CIOS Goes-Breda heeft ervoor gekozen om de PvB s uit te voeren in een contextrijke omgeving. In de meeste gevallen worden de PvB s derhalve afgenomen in het werkveld (op de stage). Stagebegeleiders worden door middel van persoonlijk contact tijdens stage bezoeken en tijdens studiedagen geïnformeerd over hun rol in het beoordelingsproces. Waar dat niet mogelijk is worden PvB s op school georganiseerd 1.5. Beschikbare middelen examencommissie verslagjaar 2015 De examencommissei heeft geen eigen financiële middelen 1.6. Vergadermomenten verslagjaar 2015 De examencommissie plant 6x per jaar. In 2015 hebben de vergaderingen plaatsgevonden op de volgende data: 28 januari; 18 maart; 13 mei; 15 juni; 15 juli; 18 november 5

6 2. Terugblik kernactiviteiten examinering verslagjaar 2015 Thema Aantal Opmerking Aantal studenten per (voltijd, deeltijd, examendeelnemers) Aantal studenten per (voltijd, deeltijd, examendeelnemers) Aantal actieve opleidingen in het afgelopen schooljaar Aantal vastgestelde examenplannen in het afgelopen schooljaar Aantal door de vaststellingscommissie vastgestelde beroepsgerichte examens Aantal vastgestelde bekostigde diploma s 290 Aantal vastgestelde niet bekostigde diploma s 1 5 N2, N3, N4, MBO-plus en MBO Dans 1 17 Alle door het CIOS ingezette Landelijke PvB s werden ook op schoolniveau vastgesteld Aantal vastgestelde certificaten(eindtermen) of certificeerbare eenheden. Aantal deelnemers dat via EVC is gediplomeerd. Aantal studenten met toegekende vrijstellingen beroepsgerichte onderdelen Aantal studenten met toegekende vrijstellingen generieke onderdelen? Hierover zijn momenteel geen exacte gegevens bekend 0 Als gevolg van een besluit op Scalda niveau vonden geen EVC-procedures plaats op CIOS Goes-Breda. 0 Er werden geen vrijstellingen verleend ten aanzien van beroepsgerichte onderdelen. 0 Er werden geen vrijstellingen verleend ten aanzien van generieke onderdelen. Aantal behandelde klachten en bezwaren 3 Een student deed een verzoek om in aanmerking te komen voor extra herexamengelegenheden. Dit verzoek is afgewezen. Een student diende een bezwaar in tegen het besluit van de voortgangsvergadering. Dit bezwaar is diverse contacten afgehandeld. Diverse kleine verzoeken werden door de secretaris tussentijds afgehandeld Aantal beroepszaken 0 In het schooljaar 2015 zijn er geen beroepszaken geweest. Aantal meldingen van onregelmatigheden tijdens examen 7 De examencommissie heeft haar besluiten schriftelijk medegedeeld aan de kandidaten 6

7 Aantal vastgestelde diploma s gedurende de laatste jaren Crebo nr Competentiegericht opleidingen * Sport- en bewegingsbegeleider Sport-en n.v.t. n.v.t bewegingsbegeleider * Sport- en bewegingsleider Sport- en 57 bewegingsleider 91401/91402/ Sport- en n.v.t /91404 bewegingscoördinator Totaal

8 3. Terugblik borging van de kwaliteit van de examinering Examenproces Het Handboek Examinering van Scalda vormt de basis van de examenorganisatie. Binnen het Netwerk Examinering van Scalda worden op grond van evaluaties, jaarlijks de beschreven procedures bijgesteld. Eén keer per jaar (in mei) worden de wijzigingen doorgevoerd in het Handboek Examinering voor CIOS Goes Breda en worden aanpassingen in de STOER doorgevoerd. Na vaststelling van de nieuwe versie van het handboek in het Management Team (MToverleg) en de examencommissie CIOS Goes Breda, wordt de nieuwe versie op de website en Infonet van het cluster gepubliceerd. Kwaliteitsverbetering en de PDCA-cyclus: De PDCA-cyclus wordt gebruikt om de kwaliteit van examinering te verbeteren en te borgen. Binnen CIOS Goes-Breda wordt van het volgende model gebruik gemaakt voor het borgen van de examenprocessen. Construeren en vaststellen van de PvB s vindt op landelijk niveau plaats Jaarlijks worden de verschillende onderdelen van het examenproces geëvalueerd (b.v. enquêtes en steekproeven). Op basis hiervan wordt geanalyseerd welke verbetering er kunnen worden doorgevoerd. Exameninstrumentarium Het uitgangspunt van CIOS Goes Breda is om gebruik te maken van producten uit gecertificeerde examenbanken. Het initiatief van CIOS-NL om landelijke PvB s volgens het landelijke examenprofiel te ontwikkelen heeft succes gehad. De PvB s zijn geïmplementeerd en worden naar aanleiding van de ervaringen jaarlijks bijgesteld. De PvB s zijn vastgesteld door een landelijke vaststellingscommissie waarin ook het werkveld is vertegenwoordigd. De betreffende PvB s zijn, conform de eisen, ook op CIOS-niveau vastgesteld Met betrekking tot de ontwikkelingsgerichte toetsen is veel aandacht besteed aan de competenties rondom toetsconstructie en beoordeling. De kwaliteit van deze toetsen 8

9 wordt steekproefsgewijs gecontroleerd door de vaststellingscommissie. Geconcludeerd kan worden dat het proces van toetsconstructie goed verloopt. Vertrouwen beroepenveld Voor het hele CIOS Goes Breda geldt dat de BPV docenten regelmatig contact met leerbedrijven hebben. Per deelnemer zijn er, gedurende het 3 e en 4 e leerjaar, jaarlijks minimaal 2 bezoeken op de leerbedrijven. Tijdens de bezoeken wordt gesproken over de examinering, de voortgang van de deelnemer, nieuwe ontwikkelingen etc. Daarnaast is er telefonisch en contact. CIOS Goes Breda enquêteert 1x per twee jaar het beroepenveld. De meting wordt structureel opgenomen in het meetplan als onderdeel van de PDCA jaarkalender. In BPV-enquête van 2013 was de gemiddelde score voor de kwaliteit van de examinering binnen de CIOS-opleiding? 6,8 In 2015 werd een nieuwe BPV-enquête uitgevoerd onder de leerbedrijven waar BPV plaatsvond voor de profielen. Daarin zijn o.a. vragen gesteld over de kennis en vaardigheden van de studenten, stage informatie en deskundigheid van de begeleiding. De gemiddelde tevredenheid kwam hierbij uit op een 8,1. Voor de teams publiek en privaat is een specificatie van de resultaten uitgewerkt welke is besproken in de teams. Uit deze enquête kwam o.a. naar voren dat er een wisselende behoefte is aan scholing voor assessoren (beoordelaars op de stage) Diverse samenwerkingscontracten met branches (KNGU, KNVB, KNLTB, KNGF, KNKB), de brancheplatforms en de werkveldvertegenwoordiging in de examencommissie zijn tevens bewijslast voor de betrokkenheid van het werkveld. Tevens wordt iedere twee jaar een BPV-begeleiders dag op CIOS Goes Breda gehouden. Tijdens deze dag worden BPV-begeleiders bij gesproken over de laatste ontwikkelingen, wordt feedback gevraagd vanuit de BPV-begeleiders op de inhoud van de opleiding en de wijze van examinering etc. Daarnaast worden er workshops en trainingen aangeboden op het gebied van competentiegericht leren en de laatste trends. Deskundigheid betrokken Er zijn specifieke scholingen geweest voor alle betrokkenen bij het examineringsproces. CIOS Goes Breda sluit aan bij het Scalda-competentiemanagement. De competenties voor beoordelaars, constructeurs en vaststellers zijn opgenomen in het handboek examinering. Het opgezette scholingsprogramma is getoetst aan deze competenties. Er wordt een overzicht bijgehouden van aanwezige competenties van medewerkers die betrokken zijn bij het examineringproces. Tevens wordt bijgehouden bij welke medewerkers sprake is van certificering. Indien de aanwezige competenties als onvoldoende worden aangemerkt (door signalen van vaststellingscommissie en in functioneringsgesprekken) dan wordt in het POP van de medewerker een ontwikkelingstraject opgesteld. Dat kan scholing zijn maar ook begeleiding van het construeren en beoordelen van formatieve en ontwikkelingsgerichte toetsen door een deskundige uit het cluster. Aan het beroepenveld wordt met enige regelmaat scholing aangeboden om beoordelingen op de werkvloer meer objectief te maken. Met het kenniscentrum Calibris werd enkele jaren geleden een digitale module ontwikkeld. Het is al jarenlang een 9

10 gewoonte dat vakbekwame beroepsbeoefenaars ook een diploma behalen om beter toegerust te zijn voor het begeleiden, opleiden en beoordelen van leerlingen in hun bedrijf. Dit maakt ook onderdeel uit van de accreditatie als leerbedrijf. In de sport-branche is de kwaliteit van de assessoren in de BPV een aandachtspunt mede omdat binnen de relatief nieuwe branche nog veel gewerkt wordt met vrijwillig kader. De vraag is dan ook of in alle gevallen de praktijkbegeleiders voldoende bekwaam deskundig en objectief zijn om te beoordelen? Daarom is er veel aandacht voor de betrouwbaarheid en objectiviteit van de beoordelaars. Aangezien de kwaliteit van de beoordeling door de praktijkbegeleiders op dit moment te weinig kan worden geborgd is gekozen voor een eindverantwoordelijk assessor vanuit het onderwijs indien de beoordeling op de BPV plaatsvindt. De beoordeling wordt besproken met de praktijkbegeleider. De eindverantwoordelijkheid blijft echter bij de school. Hiermee borgen we dat de leerlingen op een betrouwbaar oordeel kan rekenen en kan er tevens het 6-ogen principe worden gehanteerd. Daarnaast is er gekozen voor dat bepaalde kerntaken meerdere beoordelingsmomenten kennen waardoor ook weer sprake is van een betrouwbaarder en objectiever oordeel en het hanteren van het 4-ogen principe. Zo worden bijvoorbeeld de CGI gesprekken van kerntaak 3 door een onafhankelijke docent afgenomen. Een docent die de student niet in de klas heeft gehad. Indien de examinering niet uitvoerbaar is in de BPV wordt gekozen voor een gesimuleerde situatie, waarbij ook externe assessoren worden ingeschakeld. Uiteraard is de deskundigheidsbevordering van de praktijkbegeleiders/externe assessoren een doorlopend speerpunt binnen examinering. Overzicht cursussen in het kader van deskundigheidsbevordering Deze opsomming bevat nu nog alle activiteiten vanaf De cursus basisbegrippen, toetsconstructie incl. wet- en regelgeving, KCE, inspectie kaders etc. Voor (beginnende) docenten, instructeurs en assistenten een scholing die is verzorgd door Cito. Competentiegericht opleiden 1. Het competentiegericht opleiden wat is dat? (kennis en visie) 2. De docent van mentor naar studiecoach (coaching en reflectie) 3. De docent als ontwerper van het leerproces (coöperatief leren) 4. De docent als beoordelaar van competenties (PVB s, etc) 5. De BPV begeleider als beoordelaar 6. Omgaan met de digitale leeromgeving Voor alle docenten op het CIOS verzorgd door onderwijskundigen van het CIOS, RPCZ en CITO De cursus vaststellingsbeleid Voor leden en aankomende leden van de vaststelling commissies was er een verplichte scholing over vaststellingsbeleid. Deze cursus is gegeven door CITO. Ontwikkelen van PvB s. Onder begeleiding van een intern deskundige en de CITO zijn docenten geschoold m.b.t. de constructie van PvB s Praktijkbegeleiders cursus 10

11 In samenwerking met verschillende sportbonden en/of ROC's organiseerde de Academie voor Sportkader (ASK) trainingen 'Praktijkbegeleider in de Sport.' Alle praktijkbegeleiders werden hiervoor aangeschreven in overleg met Calibris. Praktijkopleiders cursus Calibris en ASK verzorgden praktijkopleiders cursussen. Een aantal docenten is hiervoor gecertificeerd en verzorgen op BPV-begeleiders dagen de praktijkbegeleiders trainingen. Digitale cursus Calibris In samenwerking met Calibris werd een cursus voor praktijkbegeleiders ontwikkeld en 3x uitgevoerd. BPV-begeleiders bijeenkomsten Op de tweejaarlijkse praktijkbegeleiders dag is een workshop beoordelen in de BPV aangeboden. Assessoren trainingen Een cursus om de huidige examinatoren te scholen als assessor. In 2014 zijn verschillende opfris momenten aangeboden tijdens interne scholingsdagen. Omgaan met en gebruik maken van het digitale platform voor docenten, studenten en andere betrokkenen. Verder zijn er ROC-breed projecten met als doel kennis te verwerven en te delen. Eén van deze z.g. kennisgroepen ging specifiek over de examinering (beoordelen) binnen het nieuwe onderwijs. CIOS participeert in deze werkgroep. Criterium gericht interview Docenten zijn geschoold in het houden van CGI gesprekken. Op de studiedagen 2012 zijn aan de hand van opgenomen gesprekken met leerlingen de docenten een dag lang geschoold. In 2013 en 2014 is gewerkt met teams van twee docenten bij de CGI gesprekken, zodat men elkaar kon bijsturen met betrekking tot vorm en inhoud van deze gesprekken. Bijscholingen toetsconstructie Tijdens de studiedagen van 2014 werd onder leiding van ICE een interne bijscholing toetsconstructie voor formatieve toetsen georganiseerd. Alle aanwezige docenten hebben aan deze scholing deelgenomen. Tijdens de studiedagen van 2015 is een praktische bijscholing gegeven onder leiding van Ferenc Weisz en Jan Eversdijk (examencommissie) die vooral gericht was op de vormgeving en vraagstelling bij formatieve toetsen. Tevredenheid deelnemers Uit de resultaten van JOB 2014 is op te maken dat de deelnemers over de toetsing in het algemeen een positie beeld hebben. Met een score van 3,9 (op 5-puntsschaal) als clustergemiddelde scoort het cluster hiermee wat hoger dan het SCALDA-gemiddelde. Op alle vijf de kernpunten van de toetsing examinering scoorde het cluster als volgt: 11

12 TOETSING CIOS Basis Breda CIOS Basis Goes CIOS privaat CIOS publiek CIOS totaal Toetsrooster op tijd? 4,2 4,5 4,0 4,4 4,3 4,3 Toets stof op tijd? 3,6 4,1 4,0 3,8 3,9 3,9 Uitslag toets op tijd? 3,4 3,7 3,4 3,9 3,7 3,6 Sluiten toetsen aan op les? 3,9 4,2 4,2 3,9 3,9 4,0 Worden lln gelijk beoordeeld? 3,8 4,0 3,4 4,0 3,9 3,9 GEMIDDELD 3,8 4,1 3,8 4,0 3,9 3,9 Over de beoordeling van de BPV/stage zijn onze deelnemers met een gemiddelde score van 3,9 (in 2012: 3,9) ook prima tevreden: STAGE/BPV (BOL) CIOS Basis Breda CIOS Basis Goes MBOdans MBOdans CIOS privaat CIOS publiek CIOS totaal Goed voorbereid op stage? 3,7 3,8 3,6 3,4 3,8 3,7 Moeite om stageplek te vinden? 4,0 3,8 4,0 3,9 4,0 4,0 Helpt school bij zoeken stageplek? 3,9 3,3 3,2 3,6 4,0 3,7 Leer je genoeg op stage? 3,9 4,0 3,8 4,3 4,3 4,1 Sluit de theorie school aan bij werk? 5,0 5,0 5,0 5,0 5,0 5,0 Tevreden over begeleiding vanuit school? 3,5 3,5 3,5 3,1 3,8 3,6 Tevreden over begeleiding bedrijf? 3,8 3,8 4,0 4,0 4,1 3,9 Genoeg contact schoolbedrijf? 3,4 3,2 3,1 2,8 3,6 3,4 Tevreden over manier stagebeoordeling? 3,8 3,9 4,1 3,9 3,9 3,9 GEMIDDELD 3,9 3,8 3,8 3,8 4,1 3,9 Examenkwaliteit De werkwijze van de examencommissie wordt gecontroleerd aan de hand van checklists. Deze checklists bevatten de verschillende taken waar de examencommissie volgens het handboek examinering verantwoordelijk voor zijn. In februari/maart van ieder leerjaar worden op deze manier alle examineringswerkzaamheden geëvalueerd. Na de tweede toetsperiode wordt deze tussentijdse evaluatie opgeleverd. Eventuele aanpassingen/verbeteringen kunnen hierdoor al tijdens de volgende periode worden doorgevoerd. 12

13 13

14 3.1 Gestelde kwaliteitsdoelen examinering verslagjaar 2015 Kwaliteitsdoel 1. Verbeteracties Aspect 2.1 Exameninstrumentarium Duidelijker aangeven wat plaats en rol is van instellingsexamens talen en rekenen 2. Verbeteracties Aspect 2.1 Exameninstrumentarium en Verbeteracties Aspect 2.2 Afname en Beoordeling Het scholen en instrueren van (externe) beoordelaars verdient (en krijgt) voortdurend aandacht 3. Verbeteracties Aspect 2.3 Diplomering Aandacht voor resultaten analyses 4. A3 2015: Verbeterplan opstellen voor n.a.v. ICE onderzoek m.b.t. examinering 5. A3 2015: Het rendement van de opleidingen is hoger dan de inspectienormen aangeven 6. Indicatoren Alle examenkandidaten moeten op de hoogte zijn van wat plaats en rol is van instellingsexamens talen en rekenen Tijdens stagebezoeken wordt altijd enige aandacht besteed aan begeleiding en beoordeling (o.a. wijzigingen in PvB s) Dit is besproken in MT en teamleiders hebben eerste analyse gemaakt Dit wordt geïntegreerd in het kwaliteitsplan examinering Inspectienorm 14

15 3.2 Uitgevoerde activiteiten om de kwaliteit van de examinering en de diplomering te monitoren en te bewaken Ondernomen activiteiten (monitoren, bewaken en evalueren van de kwaliteit) Doel activiteit 1. Jaarlijkse evaluatie met medewerkers examenbureau Bijstelling van het (administratieve) proces rondom examinering en diplomering. 2. Enquêtes tijdens toetsen Zicht krijgen op de waardering van onze studenten t.a.v. het proces van toets afname, alsmede de kwaliteit van (formatieve) toetsen 3. Steekproeven VCIE bij formatieve toetsen Kwaliteitsverbetering t.a.v. vormgeving en inhoud van formatieve toetsen 4. JOB enquête (twee jaarlijks) Zicht krijgen op de waardering van onze studenten op het gebied van toetsing en examinering 5. BPV enquête (twee jaarlijks) Zicht krijgen op de waardering van onze leerbedrijven op het gebied van examinering 6. 15

16 3.3 Conclusies ten aanzien van de kwaliteitsdoelen Kwaliteitsdoel Indicatoren In hoeverre behaald? Waar blijkt dit uit? 1. Aangeven wat plaats en rol is van instellingsexamens talen en rekenen 2. Het scholen en instrueren van (externe) beoordelaars verdient (en krijgt) voortdurend aandacht 3. Aandacht voor resultaten analyses 4. Verbeterplan opstellen voor n.a.v. ICE onderzoek m.b.t. examinering 5. Het rendement van de opleidingen is hoger dan de inspectienormen aangeven??? 6. Alle examenkandidaten moeten op de hoogte zijn van wat plaats en rol is van instellingsexamens talen en rekenen Tijdens stagebezoeken wordt altijd enige aandacht besteed aan begeleiding en beoordeling (o.a. wijzigingen in PvB s) Dit wordt geïntegreerd in het kwaliteitsplan examinering Inspectienorm Vrijwel geheel behaald Bij de profielen worden jaarlijks twee stagebezoeken afgelegd per student, hierbij is ruimte voor toelichting van PvB s en de afnamen hiervan. Enigszins Afgelopen jaren geen vragen/verzoeken van studenten hieromtrent ontvangen Er geen bezwaren ontvangen over de afname of beoordeling van PvB s Er zijn geen grootschalige analyses uitgevoerd. Wel wordt regelmatig geanalyseerd wat de resultaten zijn van de Centrale Examens Talen en Rekenen. 16

17 3.4 Conclusies ten aanzien van de kwaliteit van de examinering - totaal - Kwaliteitsaspect In hoeverre van voldoende kwaliteit? Waar blijkt dit uit? 1. Exameninstrumentarium Het uitgangspunt van CIOS Goes Breda is om zoveel mogelijk gebruik te maken van producten uit gecertificeerde examenbanken. Het initiatief van CIOS-NL om landelijke PvB s volgens het landelijke examenprofiel te ontwikkelen heeft succes gehad. De PvB s zijn geïmplementeerd en worden naar aanleiding van de ervaringen jaarlijks bijgesteld. De PvB s zijn vastgesteld door een landelijke vaststellingscommissie waarin ook het werkveld is vertegenwoordigd. De betreffende PvB s zijn, conform de eisen, ook op CIOS-niveau vastgesteld Met betrekking tot de ontwikkelingsgerichte toetsen is veel aandacht besteed aan de competenties rondom toets constructie en beoordeling. De kwaliteit van deze toetsen wordt steekproefsgewijs gecontroleerd door de vaststellingscommissie. Geconcludeerd kan worden dat het proces van toets constructie goed verloopt. 2. Afname en beoordeling Voor het hele CIOS Goes Breda geldt dat de BPV docenten veel contacten met leerbedrijven hebben. Per deelnemer zijn er jaarlijks minimaal 2 bezoeken op de leerbedrijven. Tijdens de bezoeken wordt gesproken over de examinering, de voortgang van de deelnemer, nieuwe ontwikkelingen etc. Daarnaast is er telefonisch en contact. In 2015 werd een nieuwe BPV-enquête uitgevoerd, waarin o.a. vragen zijn gesteld over de kennis en vaardigheden van de studenten, stage informatie en deskundigheid van de begeleiding. De gemiddelde tevredenheid kwam hierbij uit op een 8,1. 17

18 3. Diplomering De kwaliteit van het proces rondom diplomering is ruim voldoende. Tijdens het proces van diploma vaststelling wordt gestreefd naar een grote mate van nauwkeurigheid, waarbij het examenbureau, teamleiders, studiecoaches en administratie elkaar wederzijds ondersteunen. Na de examenvergadering wordt structureel een revisievergadering gehouden om onvolkomenheden weg te werken. In principe werken we met drie diplomerings-momenten per schooljaar: - Eind van het reguliere schooljaar - Na de zomervakantie (vervroegde herexamens/zomerstages) - Bij de jaarafsluiting (herexamens, bijzondere trajecten) Bij wijze van uitzondering worden diploma s tussentijds vastgesteld en uitgereikt (andere opleiding, werk etc.) Er zijn geen klachten ontvangen over het proces van diplomering 18

19 4. Audit Inspectie In het voorjaar van 2014 heeft er een inspectie onderzoek naar de staat van de instelling plaatsgevonden. Hieronder is het eindoordeel van de inspectie weergegeven. Voor het volledige rapport wordt verwezen naar de bijlage. Interne audit De meeste recente interne audit vanuit het Keurmerk CIOS NL vond plaats op De indrukken van deze auditoren over ons examenproces waren destijds overwegend positief. In 2015 heeft geen interne audit plaatsgevonden. Deze is ingepland voor mei

20 5. Vooruit kijken: verbeteringen De keuze om met de landelijk ontwikkelde en vastgestelde Proeves van Bekwaamheid te werken blijkt nog steeds een hele goede te zijn geweest. De kwaliteit van deze producten is erg goed en vanuit het werkveld wordt overwegend positief gereageerd op deze uniforme producten. Met betrekking tot de kwaliteit van de examentoetsen is een extra inspanning van het Onderwijsteam en de profieldocenten gewenst (dit proces is eind 2015 in gang gezet en krijgt zijn beslag in het voorjaar van 2016). Alle examentoetsen zullen op dat moment herzien zijn. Uit de BPV-enquête kan voorzichtig worden geconcludeerd dat de scholing van externe assessoren (BPV-begeleiders) in 2016 een aandachtspunt moet zijn (zie kwaliteitsplan BPV ). Niet alleen intensief bezoek door CIOS-docenten, die uitleg geven over toepassing van de PvB s ed. maar wellicht kan ook in samenwerking van SB-B een scholingsaanbod worden gecreëerd. 20

21 Bijlage I Inspectierapport Kwaliteit examinering bij CIOS

22 22

23 23

24 24

25 25

26 26