7 maart 2018 Welkom! Leerwegonafhankelijk beoordelen in flexibel onderwijs Bijdrage themabijeenkomst over leerwegonafhankelijk toetsen en validering Dominique Sluijsmans Zuyd Hogeschool Lectoraat Professioneel Beoordelen @dommarag
Bron: https://www.rijksoverheid.nl/onderwerpen/hoger-onderwijs/experimenten-om-deeltijdonderwijsflexibeler-te-maken/pilots-flexibilisering
Hoe definieert u flexibilisering? Waar zit dat (en waar wellicht nog helemaal niet)?
Wat is de vraag waar u op dit moment een antwoord op zoekt?
3/8/2018
Hoe kijk ik aan tegen flexibel onderwijs?
3/8/2018
3/8/2018
Doel van mijn bijdrage Vijf bouwstenen aanreiken om (formatief) beoordelen binnen flexibel onderwijs vorm te geven Uitgangspunt is dat beoordelen vooral een ontwerpvraagstuk is
3/8/2018
3/8/2018
3/8/2018
Formatief beoordelen studenten en docenten gebruiken bewijs van leren om het leren of het onderwijs aan te passen en zo tegemoet te komen aan actuele leerbehoeften van studenten in relatie tot verwachte leeruitkomsten
doel van FB is de betrokkenheid van studenten bij hun leren te vergroten en hun zelfregulatievaardigheden te versterken
formatief beoordelen is een cyclisch en interactief proces Waar werkt de student naar toe? FEEDUP Hoe komt de student naar de gewenste situatie? FEEDFORWARD Waar staat de student nu? FEEDBACK
waar werkt de student naar toe? FEEDUP waar staat de student nu? FEEDBACK hoe komt de student naar de gewenste situatie? FEEDFORWARD docent 1. verhelderen van leerdoelen en delen van criteria voor succes 2. realiseren van effectieve discussies en activiteiten die bewijs leveren voor leren 3. terugkoppeling geven gericht op verder leren medestudent 2. begrijpen en delen van leerdoelen en criteria 4. activeren van studenten als belangrijke informatiebronnen voor elkaar PEER FEEDBACK student 2. begrijpen van leerdoelen en criteria 5. activeren van studenten in het stimuleren van eigenaarschap over het eigen leren ZELFREGULATIE Wiliam, D. (2011). Embedded formative assessment. Solution Tree Press.
formatief beoordelen is gericht op (zelf leren) leren met als doel kennis en vaardigheden op te bouwen (mislukken mag en moet zelfs) summatief beoordelen is gericht op presteren met als doel aan te tonen dat studenten leeruitkomsten hebben behaald Meer info over dit onderscheid? Bekijk interessante presentatie van Daisy Christodoulou op https://www.youtube.com/watch?v=qlpaaldaqqy Of lees haar boek Making Good Progress
toetscultuur feedbackcultuur = van toetsgericht denken en handelen naar doelgericht werken en handelen van het geven van informatiearme cijfers naar het geven van motiverende en informatierijke feedup, feedback en feedforward van individueel denken en handelen naar collectief denken en handelen vanuit gemeenschappelijke visie over toetsing
1. Professie Wat zijn de doelen/ leeruitkomsten die studenten dienen te behalen? Wat is je visie op leren en beoordelen om die doelen te bereiken?
3/8/2018
Pyramide van Miller Beoordelen in onvoorspelbare situaties op de werkplek (performance on the job) Beoordelen in realistische, voorspelbare situaties Toepassing van kennis in contextrijke situaties (casussen, opdrachten) Kennistoetsen (open/gesloten, VGT)
3/8/2018
Bonte mix aan bewijsmateriaal formeel informeel elk toetsmoment levert zinvolle informatie op!
er staat niks op het spel er staat veel op het spel één datapunt gericht op informatie en feedback meerdere datapunten gericht op diagnose, bijsturing en voorspelling veel datapunten gericht op zware beslissing over leeruitkomst
De kwaliteit van de beoordelingstaak (context) bepaalt de kwaliteit van het bewijsmateriaal!
VRAAK-criteria Variatie: zijn leeruitkomsten in verschillende situaties aangetoond? Relevantie: zegt het bewijsmateriaal daadwerkelijk iets over de beheersing van de leeruitkomst? Actualiteit: zegt het bewijsmateriaal iets zegt over het huidige niveau van de student? Authenticiteit: is het bewijsmateriaal ook echt door de student uitgevoerd? Kwantiteit: hoe lang en ook hoe intensief heeft de student ervaring opgedaan?
2. Programma Welke bewijs verzamelt de student om te bepalen of de leeruitkomsten zijn behaald? Hoe verhoudt het aangeleverd bewijs zich tot elkaar?
3/8/2018
3/8/2018
Uitgangspunt Feedback kunnen geven en ontvangen zijn complexe professionele vaardigheden
FEEDBACK ALS DIALOOG
er staat niks op het spel er staat veel op het spel één datapunt gericht op informatie en feedback meerdere datapunten gericht op diagnose, bijsturing en voorspelling veel datapunten gericht op zware beslissing over leeruitkomst
3/8/2018
3. Beoordelaar Hoe zorg je dat je de goede begeleiders en beoordelaars inzet om tot een verantwoord oordeel te komen?
in beoordelen altijd sprake van een cyclisch proces Waar werkt de student naar toe? FEEDUP Hoe komt de student naar de gewenste situatie? FEEDFORWARD Waar staat de student nu? FEEDBACK
waar werkt de student naar toe? waar staat de student nu? hoe komt de student naar de gewenste situatie? FEEDUP FEEDBACK FEEDFORWARD docent 1. verhelderen van leerdoelen en delen van criteria voor succes 2. realiseren van effectieve discussies en activiteiten die bewijs leveren voor leren 3. terugkoppeling geven gericht op verder leren medestudent 2. begrijpen en delen van leerdoelen en criteria 4. activeren van studenten als belangrijke informatiebronnen voor elkaar student 2. begrijpen van leerdoelen en criteria 5. activeren van studenten in het stimuleren van eigenaarschap over het eigen leren Willam, D. (2013) Cijfers geven werkt niet. Meppel: Ten Brink Uitgevers.
3/8/2018
3/8/2018
4. Student Welke verantwoordelijkheid kun je studenten geven in het beoordelingsproces?
Conceptueel model voor het ontwerp van beoordelen in het hbo (gebaseerd op Andriessen, Sluijsmans, Snel & Jacobs, 2017)
1. Wat is de visie van de opleiding op de beroepsbekwame de student? 2. Aan de hand van welke prestaties (processen en producten) kan de beroepsbekwaamheid worden vastgesteld? 3. Welke beroepsopdrachten leiden tot de gewenste prestaties? 4. Wat moeten examinatoren kennen en kunnen om de prestaties te kunnen beoordelen? 5. In hoeverre komen examinatoren tot één oordeel? 6. In hoeverre is het beoordelingsmodel logisch afgeleid vanuit de vereisten aan de beroepsbekwaamheid en de gevraagde prestaties? 7. In hoeverre is het beoordelingsmodel ondersteunend bij het komen tot een valide, betrouwbaar, transparant en integraal oordeel? 8. In hoeverre zijn de randvoorwaarden aanwezig voor een goed functioneren van het (individueel) programma? Andriessen, Sluijsmans, Snel & Jacobs (2017)
3/8/2018
5. Kwaliteitscultuur Hoe weet je dat je de juiste zaken beoordeelt en dat je dat op een verantwoorde wijze doet? Hoe werk je daarin met collega s samen?
3/8/2018
Dank! dominique.sluijsmans@zuyd.nl @dommarag www.toetsrevolutie.nl
Vragen?
Referenties The curricular spider web: Akker, J. van den (2003). Curriculum perspectives: An introduction. In J. van den Akker, W. Kuiper & U. Hameyer (Eds.), Curriculum landscapes and trends (pp. 1-10). Dordrecht: Kluwer Academic Publishers. Zie ook http://curriculumontwerp.slo.nl/spinnenweb The six building blocks for grow and change. Based on Nieuwenhuis, M. A. The Art of Management (the-art.nl), 978-90-806665-1-1, 2003-2010 (only in Dutch). Vijf fasen van implementatie Diephuis, R., & Kasteren, R. van (2004). Van ontwerp naar ontwikkeling. Utrecht: Schoolmanagers_VO. Assessment programs. Van der Vleuten, C. P., & Schuwirth, L. W. (2005). Assessing professional competence: from methods to programmes. Medical Education, 39(3), 309-317. https://www.youtube.com/watch?v=qpkk512krnc Feedbackculture Rijt van der J., Bossche van den, P., Wiel, M., De Maeyer, S., Gijselaers, W.H., & Segers, M.S.R. (2013). Asking for help: A relational perspective on help seeking in the workplace. Vocations and Learning: Studies in vocational and professional education, Volume 6 (2), 259-279. Böse, M., & Gijselaers, W.H. (2013). Why supervisors should promote feedback-seeking behaviour in medical residency. Medical Teacher, 35(11), e1573 e1583. Duurzaam beoordelen Sluijsmans, D.M.A. (2008). Betrokken bij beoordelen (lectorale rede). Nijmegen: Hogeschool van Arnhem en Nijmegen. https://www.han.nl/start/corporate/nieuws/nieuws/dominique-sluijsmansaanv/_attachments/boekje-intreerede-dominique-sluijsmans.pdf