Assessments in de HU. Hannah Wielenga Onderdeel Judith Kortas u

Transcriptie

1 Assessments in de HU Hannah Wielenga Onderdeel Judith Kortas u

2 Programma (tot 12.30u) Een criteriumgericht interview (oefenen) Informatie - met focus op: Competentiegerichte assessments Videobeelden assessmentsessie IA Verschillende interpretaties van het begrip assessment Formulier Kenmerken van assessments Checklist Waaraan denken bij het ontwerpen van assessments? Advisering assessmentontwikkeling en training assessoren 2

3 Criteriumgericht interview (CGI) wie heeft zelf wel eens een CGI ondergaan? wie heeft al ervaring met het afnemen van CGI s? wie is bekend met interviewtechnieken? vorm drietallen zo gemengd mogelijk 3

4 Criteriumgericht Interview Oefening in drietal A, B en C A = kandidaat B en C zijn assessor A kiest een criterium (z.o.z.) waarop hij/zij wordt ondervraagd in een CGI van 10 min. door B en C A noteert het gekozen criterium voor B en C 4

5 A kiest een criterium uit: Je wordt gevraagd om in een CGI aannemelijk te maken dat je als competente HU-docent: aansluit bij de persoonlijke interesse van studenten, of rekening houdt met verschillen tussen je studenten, of controleert of je studenten de leerdoelen hebben behaald, of alle studenten bij je les betrekt, of studenten leert samenwerken, of studenten voldoende structuur biedt, of studenten constructieve feedback geeft, of (een eigen criterium) 5

6 werkwijze ( min.) 3 min. A kiest een criterium noteert het voor B/C B en C overleggen kort over: te stellen vragen bij het criterium te hanteren werkwijze: stellen we allebei vragen, of neemt een van de twee het voortouw, of observeert een van de twee gebruik van interviewmethodiek (STARR-methodiek, LSD, etc) wie bewaakt de tijd (10 min). 10 min CGI 6

7 Terugblik op CGI 4 min. eerst in je drietal wat ging goed (TOPS) wat kan beter (TIPS) en verder (?/!) plenair Wat leert je deze korte oefening? welke vragen roept dit op t.a.v. assessments? 7

8 Programma (tot 12.30u) Welkom, programma Een criteriumgericht interview (oefenen) Informatie - met focus op: Competentiegerichte assessments Videobeelden assessmentsessie IA Verschillende interpretaties van het begrip assessment Formulier Kenmerken van assessments Checklist Waaraan denken bij het ontwerpen van assessments? Advisering assessmentontwikkeling en training assessoren 8

9 Toetsing en assessment Term assessment = toetsing en/of vaststellen In de Engelstalige literatuur van oorsprong: synoniem voor elke vorm van toetsing en beoordeling meten van prestatie standaardtoetsen o.a. voor vergelijken van leerlingprestaties 9

10 toetsing = assessment? Andere focus: Gericht op Van toetsing METEN en beoordelen competentiegericht assessment WAARDEREN en beoordelen 10

11 toetsing = assessment? Andere focus: toetsing Gericht op METEN en beoordelen Van Leeruitkomsten (kennis, houding, vaardigheden) competentiegericht assessment WAARDEREN 1) en beoordelen Professioneel handelen in (beroeps-)context 1) Sadler, D.R. (2013). Making competent judgments of competence. In: S. Blömeke, e.a. (red.) Modeling and measuring competencies in Higher Education: Tasks and Challenges. Rotterdam: Sense Publishers (p ) 11

12 toetsing = assessment? Andere focus: toetsing competentiegericht assessment Gericht op METEN en beoordelen ANALYTISCH WAARDEREN 1) en beoordelen IN SAMENHANG Van Leeruitkomsten (kennis, houding, vaardigheden) Professioneel handelen in (beroeps-)context 1) Sadler, D.R. (2013). Making competent judgments of competence. In: S. Blömeke, e.a. (red.) Modeling and measuring competencies in Higher Education: Tasks and Challenges. Rotterdam: Sense Publishers (p ) 12

13 Doel van competentietoetsing Bij het toetsen van competenties gaat het om het tot stand brengen van een oordeel over adequaat professioneel handelen in uiteenlopende (beroeps-)contexten Van Berkel, A. (2012). Kritische reflectie op competentietoetsen in het hbo. In: Onderwijsinnovatie, juni, p

14 Competentietoetsing geeft zicht op de mate waarin een student: kennis, vaardigheden en houdingen kan integreren in adequaat professioneel handelen in een beroepsrelevante situatie; dit professioneel gedrag flexibel kan aanpassen in verschillende beroepssituaties, ofwel bewuste beheersing van de competenties vertoont; zicht heeft op de mate van ontwikkeling van een competentie en in staat is deze doelgericht verder te ontwikkelen. M.a.w.: of er sprake is van duurzame competentiebeheersing. Gulikers, J. & Van Benthum, N. (2014). Toetsen van competenties. In: H. van Berkel, A. Bax, & D. Joosten-ten Brinke, (red.). Toetsen in het hoger onderwijs. Houten: Bohn Stafleu van Loghum (p ) 14

15 Meten of waarderen (1) Het scoren in een assessment is niet zozeer een vorm van meten maar eerder een proces van redeneren, waarderen en beslissen. De assessoren (experts) zijn informatieverwerkers: interpreteren, zoeken relevante informatie, integreren in beoordeling en beslissen Govaerts, M.J.B. (2011). Climbing the pyramid. Towards understanding performance assessments. Maastricht: Universiteit (proefschrift) (p. 95 e.v.) 15

16 Meten of waarderen (2) Competenties niet zoveel mogelijk uiteenrafelen maar: Beperkt aantal karakteristieken zoeken (je hebt immers gedeelde taal nodig) Afvinklijsten voldoen niet Het gaat om contextualised judgments : je neemt de context mee in de waardering/beoordeling Sadler (2013) In: Blömeke, e.a., ibid 16

17 Beslissing: Zien we het deze persoon doen in de praktijk? (Ja of nee) Aangeven wat wél is aangetoond van adequaat professioneel handelen 17

18 Toetspiramide Miller 18

19 Vaardigheid of competentie? Personen zijn vaardig als ze in staat zijn om efficiënt en doelgericht geleerde procedures uit te voeren Personen zijn competent als ze kunnen omgaan met slecht-gedefiniëerde problemen in complexe situaties Straetmans (2014) in: Van Berkel e.a. (red.) Toetsen in het hoger onderwijs. Houten: Bohn Stafleu van Loghum (p. 188) 19

20 Voorbeeld Vaardig t.a.v. beademen van dummy Competent in bepalen van ziektebeeld en wel of niet kunstmatig moeten beademen in de ambulance Straetmans (2014) ibid 20

21 Competentie situaties zichtbaar handelen effect onzichtbaar handelingsrepertoire kennis van zaken beroepsopvatting verantwoordelijkheid beroepshouding kwaliteiten motivatie inspiratie unieke persoonlijkheid 21

22 Assessment Startbekwaam (laatste 5 ec aan einde bacheloropleiding Instituut Archimedes) Twee assessoren: 1 van HU (Beoordelaar Begeleider) 1 uit werkveld (gecertificeerd!) Dagdeel Portfolio Presentatie Criteriumgericht Interview (CGI) Beoordeling (VD/NVD) 22

23 Videobeelden assessment Lerarenopleiding (2e graads docent natk) Compilatie (ca. 11 min.) Presentatie door student Overleg assessoren (wat al gezien, wat nog bevragen?) Criteriumgericht Interview Overleg assessoren gericht op beoordeling Rapportage van oordeel en feedback aan student 23

24 Programma (tot 12.30u) Welkom, programma Een criteriumgericht interview (oefenen) Informatie - focus op: Competentiegerichte assessments Videobeelden assessmentsessie IA Verschillende interpretaties van het begrip assessment Formulier Kenmerken van assessments Checklist Waaraan denken bij het ontwerpen van assessments? Advisering assessmentontwikkeling en training assessoren 24

25 Kenmerken van assessments Formulier met 11 punten Twee kolommen twee uitersten op een continuum Niet: links is fout, rechts is goed Gaat om doelen van het assessment Bewustwording van keuzes en mogelijke gevolgen voor de opleiding/student Wat is minder/meer wenselijk 25

26 Formulier Kenmerken van assessments In duo s (2x7 min.): Interview elkaar a.d.h.v. het formulier: Welke kenmerken zijn van toepassing op jullie assessment? Plenaire terugkoppeling 26

27 Assessments in de HU: niet alleen een mondelinge toets summatief inzetten (aan het eind van het leerproces), maar ook de formatieve en duurzame functie benutten (ten behoeve van leerprocessen), daarbij peers inschakelen, leerwegonafhankelijk maken en koppelen aan leren in de beroepspraktijk (leren participeren professionele identiteit ontwikkelen) 27

28 Checklist Waaraan denken bij het ontwerpen van een assessment? eindkwalificaties opleiding toetsbeleid toetsprogramma rol en vorm van assessment Organiseerbaarheid (om mee te nemen) 28

29 Voor advies bij assessmentontwikkeling en training van assessoren Bureau Assessment & Validering Instituut Archimedes In gesprek met Expertisecentrum Docent HBO Voorlopig: eerst een oriënterend gesprek met Berber Visser 29

30 Advisering en training Advies Oriënterend: wat is precies onze behoefte? Adviesgesprekken in ontwikkelfase: hoe willen we toetsen, welke rol willen we assessment laten spelen, hoe hangt dat samen met andere vormen van toetsing, wat betekent dat voor ontwikkelwerk en organisatie, 30

31 Advisering en training Training CGI: als (extra) toetsvorm bij een (bestaand) beoordelingskader bij bv. een beroepsproduct, focus op vraagtechnieken 2 dagdelen Basistraining assessoren: indien een assessment wordt ingezet om de competentieontwikkeling (beroepsbekwaamheid) van studenten integratief te toetsen op basis van een al ontwikkeld competentieprofiel met gedragsindicatoren o 4 dagdelen + 1 dagdeel certificering o PILOT BLENDED VARIANT (8-10 u zelfstudie + 1 dag training + 1 dagdeel certificering) 31

32 Advisering en training Training, evt. ook Training assessmentrapportage schrijven Training valideren van EVC (eerder/elders verworven competenties) Training voor reeds gecertificeerde assessoren die in een andere context assessment af gaan nemen 32

33 Van harte aanbevolen: Berkel, A. van, (2017) De assessmentdriehoek voor leerwegonafhankelijk toetsen en begeleiden. In: OnderwijsInnovatie, juni (p.17-25) Sinke, G.J. (2009) Aan de slag met assessment. Toetsen en beoordelen in een competentiegerichte leeromgeving. Nuenen: Onderwijsadviesbureau M.A.F. Dekkers Berkel, H. van, Bax, A., & Joosten-ten Brinke, D. (red.). Toetsen in het hoger onderwijs. Houten: Bohn Stafleu van Loghum 33

34 34

35 Opbrengst van vanochtend? En graag formuliertje invullen voor Judith 35