Workshop 4: Kwalitatieve toetsing van werkplekleren. Valkuilen en kansen Bernard Veldkamp, Peter van Dijk, Sebastiaan de Klerk
Wat is een goed praktijk examen?
Praktijkexamens = Fun
Praktijkexamens zijn complex
Praktijkexamens zijn complex want ze proberen latente vaardigheden te meten.
Latente vaardigheid Test for measuring body height I bump my head quite often For school pictures I was always asked to stand in the first row In bed, I often suffer from cold feet When walking down the stairs, I often take two steps at a time I think I would do well in a basket ball team As a police officer, I would not make much of an impression In most cars I sit uncomfortably I literally look up to most of my friends
Minimaliseer je meetfout
Meetfout = bias + variantie
Tel de dolfijnen
Minimaliseer je meetfout Duidelijke omschrijving van je doelen Training Rubrix Veel waarnemingen
Kwaliteit
RCEC beoordelingskader 1. Doel en gebruik 2. Kwaliteit van het materiaal 3. Representativiteit 4. Betrouwbaarheid 5. Cesuur en handhaving 6. Afname en beveiliging
Kwaliteitscriteria Standaardisatie gelijke kansen voor elke kandidaat Representativiteit uitslag generaliseerbaar en exatrapoleerbaar Beoordelaarsbetrouwbaarheid herhaalbare zak/slaagbeslissing
1 - Praktijkexamen: afgesproken werkzaamheden Randvoorwaarden werkzaamheden, kritieke situaties, beroepsproducten en beoordelaars Afspraken werkzaamheden, planning, afnamecondities, beoordeling Procesbeschrijving: uitvoering, beoordeling, evaluatie Instrumentarium: beoordelingsformulier, cesuur, afsprakenform. Examenniveau bereikt Leerbedrijf Inwerkperiode Praktijktoets uitvoering werkprocessen beroepsproducten, observaties uitvoering/werkgedrag Bewijslast Beoordeling proces/werkgedrag beroepsproducten Uitslag
2-Praktijkexamen: opdrachten Examenniveau bereikt Leerbedrijf Inwerkperiode Praktijktoets uitvoering opdracht(en) beroepsproducten, observaties uitvoering Bewijslast Beoordeling competenties OF beroepsproducten proces Uitslag CGI Toelichting op werkzaamheden Bewijslast Beoordeling verantwoording Uitslag
3-Praktijkexamen: Portfolio- en praktijkassessment Leerbedrijf Onderwijsinstelling Examenniveau bereikt Inwerkperiode Praktijktoets uitvoering portfolio-opdrachten beroepsproducten Portfolio Portfolio-assessment beheersing wp s wel/niet aangetoond Leerbedrijf Uitslag Beoordeling - portfolio - werkplekbezoek - CGI Bewijslast Praktijkassessment - werkplekbezoek - CGI Ontbrekende bewijslast
Aandachtspunten (praktijk)examinering Standaardisatie overeenkomst in taken, context, uitvoering en beoordelingsproces Representativiteit dekking taakdomein, inhoud/complexiteit van taken, variatie in taken en contexten Beoordelaarsbetrouwbaarheid ervaring en training beoordelaars, aantal beoordelaars, kwaliteit beoordelingsinstrumentarium, beoordelaarsinstructie
Praktijkexamen in gesimuleerde beroepspraktijk Praktijkexamen in de gesimuleerde beroepspraktijk heeft een aantal voordelen ten opzichte van examinering in de BPV Voorbeeld van een praktijkexamen in een gesimuleerde beroepscontext: http://youtu.be/od2w3v-juzy
Praktijkexamen in gesimuleerde beroepspraktijk Standaardisatie Taken Context Uitvoering Beoordelingsproces
Praktijkexamen in gesimuleerde beroepspraktijk Representativiteit Taakdomein Complexiteit Variatie
Praktijkexamen in gesimuleerde beroepspraktijk Beoordelaarsbetrouwbaarheid Ervaring en training beoordelaars Aantal beoordelaars Kwaliteit beoordelaarsinstrumentarium en instructies
Praktijkexamen in gesimuleerde beroepspraktijk Standaardisatie Representativiteit Beoordelaarsbetrouwbaarheid Generaliseerbaarheid & Extrapoleerbaarheid Validiteit
Discussiestelling 1 Praktijkexaminering in de BPV kan niet voldoen aan de kwaliteitscriteria voor examinering; daarom moeten we af van praktijkexamens in de BPV
Discussiestelling 2 Praktijkexaminering in de BPV is dé garantie voor authenticiteit en daar kan geen enkele andere examineringsmethode tegenop; daarom kunnen we niet zonder praktijkexamens in de BPV
Discussiestelling 3 Het is onmogelijk / wel degelijk mogelijk om de kwaliteit van praktijkexaminering in de BPV te verantwoorden
Discussiestelling 4 Het is onmogelijk / wel degelijk mogelijk om met goed getrainde beoordelaars de kwaliteit van praktijkexaminering in de BPV te borgen