PMO Workshop Programmatisch toetsen, hoe doe je dat?

Transcriptie

1 PMO Workshop Programmatisch toetsen, hoe doe je dat? Situatie bij A-KO Sylvia Heeneman

2 Studieprogramma Arts-Klinisch Onderzoeker

3 SAM Programmatisch toetsen : toetsing van alle competenties in portfolio A-KOfolio Alle ECTS/Fase MED DESK ORG

4 Toetsing van competentieontwikkeling met A-KOfolio * * * Jaar * * * * * * * * * * * # # # # A-KOfolio C C C

5 Informatie over competentie-ontwikkeling uit het hele palet van toetstaken en feedback Instrumenten # * Communicator Med. Desk. Academicus.

6 Beoordeling van het A-KOfolio 2 e counseloradvies Eigen counseloradvies Gesprekken 2-5 per Fase gesprek gesprek A-KOfolio gesprek gesprek 1 counselor bereidt verschillende A-KOfolio s voor Bespreken in Plenair counselor overleg (PCO) Feedback en Beoordelingsadvies van PCO Onafhankelijke beoordelingscommissie (ABC) Beoordeling (Fase 1 O/V/G; Fase 4 O/V/G/U) Als onvoldoende: remediering

7 Binnen opleiding ook verschil in context Fase 1-2 > Faculteit, blokken, beperkte flexibiliteit in curriculum Fase 3-4 > Ziekenhuis, werkplek-leren en toetsen, meer zelfsturing van leren mogelijk

8 Programmatisch toetsen in Fase 1-2 Kennistoetsen (blokken: eind, in-blok), VGT, opdrachten (klinisch onderzoeker, patiënt-arts-maatschappij), skills, communicatie > in portfolio Peer-feedback > in portfolio - Onderwijsgroepen: 360 feedback formulieren - Opdrachten, samenwerking: open narratieve feedback formulieren Uitdaging > studenten ervaren toetsen (mn bloktoetsen als high stake (Heeneman et al, Med Educ 2015; Schut et al, Med Educ 2018, in press) Inbedding VGT in portfolio > goede resultaten, leerwaarde (Heeneman et al, Med Teach 2017)

9 Uitdaging Fase 1-2 > navigeren Loslaten harde knip Fase 1 > 2 en Fase 3 > 4. - Remediëren competenties in volgende Fase mogelijk Kennistoetsen Fase 1-2, meer agency - geen herkansingen, 2 e poging bij tegenvallend resultaat op basis van analyse (keuze) - Een onvoldoende geen ramp, meegenomen bij portfolio beoordeling Afstemming > adviezen (counselors), en beoordeling - Holistisch: nodig - Transparantie: uitdaging - Vignetten gemaakt ( beslisscenario s )

10 Programmatisch toetsen in Fase 3-4 MA-A-KO = MA-GEN qua coschappen en werkplek-evaluaties en feedback Voor elk coschap > start-document met leerdoelen Per coschap > werkplek-evaluaties - KKBs, Field notes, Case-based discussions, 360 feedback, VGTs, Computerized Case-based Testing CCTs, evaluatie werkplekbegeleider - Kwantitatieve en kwalitatieve informatie > portfolio

11 Portfolio > Werkplek evaluaties en feedback: Overzicht kwantitatieve informatie in de tijd

12 Portfolio > Overzicht narratieve informatie/ feedback

13 Programmatisch toetsen in Fase 3-4 > navigeren.. Verplichting aantallen formulieren (bv KKBs - kan minder volgens studenten Geven betekenisvolle feedback door staf - > tijd/aandacht/training nodig - > zit progressie in In A-KO in coschappen: analyse en reflectie uitgebreider dan MA-GEN (voortzetting zoals gebeurd in Fase 1-2) - > ook hier balans nodig.

14 Analyse en reflectie n.a.v. Feedback en informatie Begeleiding door mentor, voor zelfsturen van leren is enige sturing nodig Leerzaam volgens studenten (Heeneman et al, Med Educ 2015), maar - Tijdsintensief - Teveel? - Gevaar Rituele dans.. Balans - Nodig voor zelfsturen van leren - Nodig voor zelfontwikkeling/ keuzes maken - Betekenisvol zijn voor de student

15 Ontwikkeling mapping tool in portfolio Als alternatief voor essay type reflectie Basis mind-, conceptmap format Parallel met de reflectie cyclus Doel: meer to the point, makkelijker te volgen Opvolging van leerdoelen Koppelen aan competenties Van Berlo et al, Tijdsch Hoger Onderw 2015

16 Specifieke aanleiding Laat zien hoe er aan het LD gewerkt is Laat zien wat er bereikt is Gebruikt tekstpijlen om aspecten aan compententies toe te wijzen Laat voortgang zien a.d.h.v. FB (KKBs) Laat ook zien waar nog aan gewerkt kan worden

17 Programmatisch toetsen: Hoe doe je dat..? Context > onderwijs faculteit vs werkplekleren Portfolio > verzamelen informatie, voldoende narratieve informatie Lange lijnen van onderwijs en toetsen (zo min mogelijk zak-slaag beslissingen voor 1 toets) Enige vorm van analyse en reflectie voor leren van de toets en feedbackinformatie Mentor Implementatie kost tijd, in bestaand curriculum: geef het tijd Programmatisch toetsen vraagt (onderwijs/docent) tijd