1. Inleiding. rekenen. vond. examinering. van zaken. Fase 1 - nog geen activiteiten m.b.t. kwaliteitsverbetering. Fase 2. Fase 3.

Transcriptie

1 JAARVERSLAG EXAMINERING MBO Inleiding Het schooljaar kenmerkt zich met name door de inzet van verschillende verbeteracties. Het vertalen van de uitkomsten van de PvB-monitor en het aanscherpen van regelingen nemen daarbij een voorname plaats in. Mede door de PvB-monitor is dit jaar naast de examenregeling CKS een aparte instructie voor assessoren ontwikkeld. Bovendien is het handboek examinering CKS gereed gekomen. Daarnaast is er veel tijd besteed aan het kiezen en ontwikkelen van exameninstrumenten voor talen en rekenen. Het schooljaar werd uiteraard ook gekenmerkt door het inspectiebezoek dat dit jaar plaats vond. Met name de teleurstellende resultaten ten aanzien van de ingekochte producten van De groene standaard spelen hierbij een rol. Nagenoegg alle AOC s zijn met dezelfde of vergelijkbare resultaten geconfronteerd. Dit heeft De groene standaard in overleg met de inspectie en AOC s aangezet tot het maken van vernieuwde producten. De nieuwste examenstandaarden van De groene standaard zijn door de inspectie goedgekeurd. 2. Kwaliteitsdoelstelling De kwaliteit van de examinering in Wellantcollege wordt weergegeven in 8 aandachtsgebieden. Deze aandachtsgebieden komen overeen met de door de inspectie gehanteerde standaarden. Binnen Wellantcollege worden de volgendee 4 fasen onderscheiden: Fase 1 - nog geen activiteiten m.b.t. kwaliteitsverbetering examinering - kwaliteit is individuelee verantwoordelijkheid docent Fase 2 - beginnend beleid - start implementatie procedures rond toetsing/ examinering Fase 3 - beleid m.b.t. kwaliteitsverbetering examinering begint vorm te krijgen - implementatie procedures komt op gang Fase 4 - actieve betrokkenheid alle docenten bij kwaliteitsverbetering toetsing - systematische evaluatiee en bijstelling examinering 3. Externe audit door bureau Phasis voorjaar 2009 In maart/april 2009 heeft bureau Phasis een externe audit uitgevoerd m.b.t. kwaliteit examinering. De exameninstrumenten zijn niet onderzocht. Deze zijn afkomstig van De groene standaard en voorlopig goedgekeurd door de inspectie. Wellantcollege heeft hiermee de resultaten van het vorige schooljaar vrijwel geëvenaard en voldaan aan de eigen kwaliteitsdoelstelling. Resultaten externe audit bureau Phasiss ,50 3,00 Score (ramge 1-5) 2,50 2,00 1,50 1,00 0, Vertrouwen beroepenveld 2. Tevredenheid deelnemer 3. Deskundigheid betrokkenen bij examinering 4. Exameninstrumenten inhoudelijk: n.v.t. 5. Exameninstrumenten toetstechnisch: n.v.t Kwaliteitsstandaarden 6. Transparantie examineringsprocessen 7B 7. Borging examineringsprocessen 8. Wettelijke vereisten examinering Deze resultaten geven de stand van zaken aan het einde van het schooljaar weer. De kwaliteitsdoelstelling voor schooljaar is: alle standaarden in fase 3 of hoger. Pagina 1 van 10

2 4. Acties die zijn uitgezet Naar aanleiding van de resultaten van de audit door bureau Phasis en de uitkomst van de PvB- Ook zijn een aantal regeling naar aanleiding van deze onderzoeken aangescherpt. Daarnaast is er in dit jaar speciale aandacht geweest voor de volgende onderwerpen: - Instructie voor assessoren Er is in dit schooljaar, naast de examenregeling CKS, een aparte instructie gemaakt voor monitor hebben er met name binnen de vestigingen gerichte verbeteracties plaatsgevonden. assessoren. Hierin wordt voor assessoren onderwijs en bedrijfsleven, het verloop van een proeve beschreven vanuit hun beoordelaarrol. De instructie heeft tevens een belangrijke rol gespeeld bij het informeren van de assessoren over de iets gewijzigde beoordeling van proeven op basis van de aangepaste examenstandaarden. - Opleiding assessoren Ten behoeve van de afname van proeven zijn er zowel docenten als mensen uit het bedrijfsleven geschoold als assessor. Het assessorenregister liet per januari 2010 de volgende aantallen zien: ORGANISATIE NIVEAU ASS. in OPL. OPGELEID ASS. GECERT. ASS. Totaal Bedrijfsleven pvb allround Wellantcollege Andere organisaties pvb allround pvb allround Totaal Uit vergelijk met de gegevens t.o.v blijkt, dat het aantal assessoren iets is gedaald. Dit is vooral te verklaren door natuurlijk verloop. Het aantal assessoren in opleiding is sterk gedaaldd en het aantal gecertificeerd assessoren is evenredig sterk gestegen. - PvB tool De met 4 AOC s in het Westen van het land 1 ontwikkelde PvB-tool is voorzien van steedss meer functionaliteiten. Hierdoor verloop het voorbereiden en afnemen van proeven meer gestroomlijnd. Doordat rollen zijn gekoppeld aan bepaaldee fasen, vindt ook een betere kwaliteitsborging plaats dan voorheen het geval was. - Handboek examinering CKS Eind 2009 is het handboek examinering CKS gereed gekomen. Het handboek is samengesteld aan de hand van het actieplan examinering van de AOC Raad met als doel om de kwaliteit van de examinering en borging ervan te omschrijven. Het handboek CKS is bestemd voor het management, de examencommissiess en als mogelijk naslagwerk voor docenten. Daarnaast is het een instrument dat gebruikt kan worden ten behoeve van externe verantwoording. Het handboek wil een leidraad zijn voor alle betrokkenen bij de examens en is een instrument voor kwaliteitszorg. Het is een hulpmiddel om de kwaliteit van de examinering te bewaken en zo nodig te verbeteren. Het handboek is opgebouwd m.b.v. de zeven kwaliteitsstandaarden zoals deze door Wellantcollege en de inspectie worden gehanteerd. Ieder hoofdstuk begint met één van de zeven standaarden. Vervolgens wordt de wijze waarop Wellantcollege dit heeft geregeld en geborgd uitgelegd. In het handboek zijn o.a. een procedurereeks met bijbehorende werkinstructiess en instrumenten opgenomen. 1 Westelijk Front Pagina 2 van 10

3 - Kwalificatie-eisen talen, rekenen en (wettelijke) beroepsvereisten Dit schooljaar is voortvarend gewerkt aan een overzicht waarin voor de cohorten t/m alle vereisten voor Nederlands, moderne vreemde talen, rekenen en (wettelijke) beroepsvereisten per cohort en per opleiding is weergegeven. Het initiatief ervoor is genomen door Wellantcollege. Voor de uitwerking en kwaliteitscheck is samenwerking gezocht met de eerder genoemdee vier AOC s in het westen van het land. In juni 2010 was het document klaar en via de AOC Raad aangeboden aan alle AOC s. 5. Inspectieonderzoek Op 9 februari 2010 heeft de inspectie onderzoek gedaan naar de kwaliteit van de examinering bij Wellantcollege. In het rapport van d.d. 28 april 2009 wordt geconcludeerd dat de examinering van een aantal opleidingen voldoende is. Het gaat hierbij om de volgende opleidingen: KS Bedrijfsleider/manager veehouderij, (11031), BOL; 2. Bedrijfsleider/beheerderr dierverzorging, (11034), BOL. De inspectie concludeert verder dat de examinering van de volgende opleidingen van onvoldoende kwaliteit is: KS Middenkaderfunctionaris bloemen- teelt (Vakbekwaam medewerker bedekte teelt), (97110), BBL; en tuinbranche, (11033), BOL; CKS 2. Vakfunctionaris bedektee 3. Vakbekwaam medewerker natuur en leefomgeving (Vakbekwaam medewerker groenvoorziening), (97252), BBL; 4. Vakbekwaam medewerker natuur en leefomgeving (Vakbekwaam medewerker hoveniersbedrijf), (97253), BBL; 5. Bloembinder (Eerste bloembinder), (97290), BOL; 6. Dierverzorging 3/4 (Dierverzorger melkvee), (97363), BOL; 7. Assistent medewerker voedsel en leefomgeving (Assistentt plantenteelt), (97474), BBL. De opleiding Middenkaderfunctionaris bloemen- en tuincentrumbranche is als onvoldoende beoordeeld omdat de exameninstrumentenn van de deelkwalificaties Voorlichten en Managen verkoop niet voldeden aan de uitstroomeisen. De examentoetsenn zijn hierop aangepast. Bij de genoemde competentiegerichte opleidingen 2 t/m 6 zijn de ingekochte producten van De groene standaard als onvoldoende beoordeeld. De vernieuwde producten zijn hierop aangepast. Bij de opleiding Assistent medewerker voedsel en leefomgeving is de examinering van Nederlands binnen de proeve van bekwaamheid als onvoldoende aangemerkt. Er wordt nu via separatee examentoetsen Nederlands bepaald of deelnemers aan de vereisten voldoen. In haar rapport meldt de inspectie dat de onvoldoende beoordeling aanleiding is om de examinering van de betreffendee opleidingen in opnieuw te onderzoeken. 6. Proeven van bekwaamheid De proeven van bekwaamheid worden afgeleid van examenstandaarden afkomstig van Stichting De groene standaard. Wellantcollege participeert in deze stichting. Aan het einde van het schooljaar is door Stichting De groene standaard gemeld dat de aan de inspectie voorgelegde gewijzigde examenstandaardenn naar alle waarschijnlijkheid goedgekeurd zullen worden. Er zijn in het schooljaar in totaal 2513 proeven van bekwaamheid afgenomen. Bij elke proeve heeft een evaluatie plaatsgevonden en is de tevredenheid gemeten bij deelnemer, assessor bedrijfsleven en assessor onderwijs. Er zijn 2452 proeven behaald; een slagingspercentagee van 96,8%. Grafische weergave: Zie blad 4 t/m 9. Pagina 3 van 10

4 Grafieken evaluatie onder deelnemers bij 2513 proeven 1. Hoe is de proeve van bekwaamheid door de school voorbereid? 8 75, 7 10,9 8,6 4,7 Goed (%) 2. Hoe heb jij je op de proeve kunnen voorbereiden? 8 71,8 16,2 7,7 4,3 Goed (%) 3. Hoe vind je dat deze proeve is verlopen? 8 75,3 16,8 4,0 3,9 Goed (%) 4. Wat is je oordeel over de aandacht die de beoordelaars jou gaven? 66,5 28,2 1,4 Goed (%) 5. Wat vind je van de inhoud van het gesprek binnen de proeve? 8 75,3 19,7 1,1 Goed (%) Pagina 4 van 10

5 Grafieken tevredenheidsonderzoek onder deelnemers bij 2513 proeven 1. Het tijdstip waarop bekend werd dat de proeve zou worden afgenomen? Tevreden (%); 65,9 Matig tevreden (%); 6,6 Ontevreden (%); 4,8 Zeer tevreden (%); 22,8 2. De informatie die je over de proeve hebt gekregen? Tevreden (%); 68,7 Matig tevreden (%); 10,9 Ontevreden (%); 5,0 Zeer tevreden (%); 15,3 3. Verband tussen beschreven kritische beroepssituatie en de werkelijkheid? Tevreden (%); 79,9 Matig tevreden (%); 4,,2 Ontevreden (%); 4,2 Zeer tevreden (%); 11,6 4. De manier waarop de beoordeling tot stand komt (observeren+gesprek)? Tevreden (%); 72,0 Matig tevreden (%); 1,6 Ontevreden (%); 3,9 Zeer tevreden (%); 22,4 5. De deskundigheid van de beoordelaars? Tevreden (%); 62,5 Matig tevreden (%); 0,6 Ontevreden (%); 3,9 Zeer tevreden (%); 33,0 Pagina 5 van 10

6 Grafieken evaluatie onder beoordelaars bedrijfsleven bij 2513 proeven 1. Hoe is de proeve van bekwaamheid door de school voorbereid? ,3 10,2 Goed (%) 5,5 5,0 2. Wat vindt u van uw betrokkenheid bij de voorbereiding van deze proeve? ,7 8,9 Goed (%) 5,3 4,1 3. Hoe vindt u dat dezee proeve is verlopen? ,6 16,5 Goed (%) 1,9 3,9 4. Hoe voldoet de instructie voor de beoordeling? ,8 8,4 Goed (%) 2,8 4,0 5. Hoe verliep het criteriumgericht interview binnen de proeve? ,1 11,1 Goed (%) 0,9 Pagina 6 van 10

7 Grafieken tevredenheidsonderzoek onder beoordelaars bedrijfsleven bij 2513 proeven 1. Het tijdstip waarop u gevraagd bent als beoordelaar? Tevreden (%); 74,3 Matig tevreden (%); 3,3 Ontevreden (%); 4,4 Zeer tevreden (%); 17,9 2. De informatie die u vooraf over de proeve hebt gekregen? Tevreden (%); 74,8 Matig tevreden (%); 8,3 Ontevreden (%); 4,6 Zeer tevreden (%); 12,2 3. Verband tussen beschreven kritische beroepssituatie en de werkelijkheid? Tevreden (%); 81,9 Matig tevreden (%); 3,1 Ontevreden (%); 4,0 Zeer tevreden (%); 11,0 4. De manier waarop de beoordeling tott stand komt (observeren+gesprek)? Tevreden (%); 75,,5 Matig tevreden (%); 1,0 Ontevreden (%); Zeer tevreden (%); 19,7 5. Uw opgebouwde deskundigheid om een proeve te kunnen beoordelen? Tevreden (%); 83,5 Matig tevreden (%); 1,8 Ontevreden (%); Zeer tevreden (%); 11,0 Pagina 7 van 10

8 Grafieken evaluatie onder beoordelaars onderwijs bij 2513 proeven 1. Hoe is de proeve van bekwaamheid door de school voorbereid? 9 8 9,4 81,5 4,9 4,2 Goed (%) 2. Wat vindt u van uw betrokkenheid bij de voorbereiding van deze proeve? ,2 82,2 2,7 Goed (%) 3. Hoe vindt u dat deze proeve is verlopen? ,7 81,5 2,0 Goed (%) 4. Hoe voldoet de instructie voor de beoordeling? ,4 86,3 1,5 Goed (%) 5. Hoe verliep het criteriumgericht interview binnen de proeve? ,1 84,0 1,1 Goed (%) Pagina 8 van 10

9 Grafieken tevredenheidsonderzoek onder beoordelaars onderwijs bij 2513 proeven 1. Het tijdstip waarop u gevraagd bent als beoordelaar? Tevreden (%); 83,2 Matig tevreden (%); 1,3 Ontevreden (%); 4,0 Zeer tevreden (%); 11,6 2. De informatie die u vooraf over de proeve hebt gekregen? Tevreden (%); 80,3 Matig tevreden (%); 3,0 Ontevreden (%); 4,0 Zeer tevreden (%); 12,7 3. Verband tussen beschreven kritische beroepssituatie en de werkelijkheid? Tevreden (%); 80,2 Matig tevreden (%); 1,9 Ontevreden (%); Zeer tevreden (%); 14,2 4. De manier waarop de beoordeling tot stand komt (observeren+gesprek)? Tevreden (%); 81,7 Matig tevreden (%); 1,4 Ontevreden (%); Zeer tevreden (%); 13,1 5. Uw opgebouwde deskundigheid om een proeve te kunnen beoordelen? Tevreden (%); 84,2 Matig tevreden (%); 0,3 Ontevreden (%); Zeer tevreden (%); 11,7 Pagina 9 van 10

10 Analyse resultaten evaluatie en meting tevredenheid proeven Bovenstaande grafieken m.b.t. evaluatie en meting tevredenheid laten hoge scores zien. De combinatie van zeer goed + + goed bij de evaluatiee en zeer evreden + tevreden bij de tevredenheidmeting laat percentages zien die variëren van 84 tot 95,9%. Uit verdere analyse van de resultaten bij de evaluatie blijkt dat de voorbereiding in zijn algemeenheid het laagst scoort. Bij het tevredenheidonderzoek scoort het aandachtsgebied rond het late tijdstip van de informatieverstrekking en de informatie zelf het laagst. Blijkens de analyse van de evaluatie was men met name tevreden over de inhoud en het verloop van het criteriumgericht interview. Bij het tevredenheidonderzoek scoorde de deskundigheid van de beoordeling het hoogst. Uit een analyse gemaakt van alle opmerkingen, waarbij ook (apart) is gekeken naar de opmerkingen bij niet behaalde proeven, zijn de volgende aandachtspunten afgeleid: - Het bekend maken aan deelnemers en assessoren wanneer de proeve plaatsvindt dient in een vroegtijdig stadium plaats te vinden. - Het administratieve deel van de proevee wordt door assessoren onderwijs als omvangrijk en omslachtig ervaren. - Het informeren van deelnemers over de proeve van bekwaamheid en het voorbereiden van de deelnemers op de proeve laat te wensen over. - De criteria waaraan een deelnemer dient te voldoen zijn vooraf niet altijd helder. Deze aandachtspunten uit de analyses vormen in het schooljaar de basis voor verdere verbetering. 7. Contacten met examencommissies locaties In bijeenkomsten van het platform examinering MBO op , , , , en zijn examensecretarissen die hun regio vertegenwoordigen op de hoogte gehouden van alle ontwikkelingen m.b.t. examinering. Ook is hen daar gevraagd om de locaties binnen hun regio op de hoogte te houden en zijn ervaringen uitgewisseld. 8. Klachten / bezwaar en beroep Ten aanzien van de gang van zaken rondom examinering MBO op de locaties zijn geen klachten gemeld en zijn er geen bezwaren bij de CEC ingediend. Hierdoor is ook de Commissie van Beroep niet actief geweest. Pagina 10 van 10