PLATFORM LEREN VAN TOETSEN De leerwaarde van toetsen, op weg naar een feedbackcultuur Martijn Leenknecht (HZ University of Applied Sciences)
Ik ben werkzaam als
Ik ken Platform Leren van Toetsen
Mijn lievelingskleur is
Kwaliteit?
Kortom: Het doel bepaalt wanneer iets van kwaliteit is
Wat is jullie doel met toetsen?
Wat is voor jou het belangrijkste doel?
Doelen van toetsen & beoordelen Externe verantwoording Ontwikkeling van de student
Welke kwaliteitscriteria hanteren jullie?
Doelen van toetsen & beoordelen & kwaliteitscriteria Externe verantwoording Leereffect student Aanpassing begeleiding Validiteit Betrouwbaarheid Ontwikkeling van de student
De leerwaarde van toetsen
De leerwaarde van toetsen is relevant bij
DRIE EFFECTEN VAN TOETSEN voor-effect ware-effect toets na-effect Struyven, K., Dochy, F., & Janssens, S. (2003). Students' perceptions about new modes of assessment in higher education: A review. In M. Segers, F. Dochy, & Cascallar E. (Eds.), Optimising new modes of assessment: In search of qualities and standards (pp. 171-224). Dordrecht: Kluwer Academic Publishers.
INZAGEMOMENT Bezocht Ja 22 Nee 154 Prestatiedoelen (1-6) Leerdoelen (1-6) 4.64 4.67 4.63 4.14 Totaal 4.63 4.21 t (175) = 5.800, p < 0.000 t (174) = 2.039, p = 0.043 Van Laar, W., Van Nifterik, A., & Cousijnsen, M. (2015). Het inzage-moment als feedbackmoment. Bachelorthesis in opdracht van Platform Leren van Toetsen.
VERPLICHTE REFLECTIE & EERST FEEDBACK, DAN CIJFER 2011-12: geen interventie 2012-13: reflecties op feedback 2013-14: verbeterde procedure reflecties cijfers pas verstrekt bij inleveren reflectie Jackson, M., & Marks, L. (2015). Improving the effectiveness of feedback by use of assessed reflections and withholding of grades. Assessment & Evaluation in Higher Education, 1-16. doi:10.1080/02602938.2015.1030588
EERST REFLECTIE, DAN CIJFER Heeft ook iets behavioristisch. o De reflectieopdracht is een straf of het cijfer is de belonging o Beperkte keuzevrijheid student: de procedure bepaalt wanneer en op welke manier de student de feedback leest en verwerkt o Impliciete machtsverhouding docent-student (docent heeft de macht over wanneer de student het cijfer krijgt) Irwin, B., Hepplestone, S., Holden, G., Parkin, H. J., & Thorpe, L. (2013). Engaging students with feedback through adaptive release. Innovations in Education and Teaching International, 50, 51-61. doi:10.1080/14703297.2012.748333
ZELF BEOORDELING TER VERGELIJKING Essay Feedback Checklist Zelfbeoordeling (stelt specifieke feedbackvragen aan docent) Vergelijking met docentbeoordeling Feedbackvragen rondom grootste discrepanties Wakefield, C., Adie, J., Pitt, E., & Owens, T. (2014). Feeding forward from summative assessment: The Essay Feedback Checklist as a learning tool. Assessment & Evaluation in Higher Education, 39, 253-262. doi:10,1080/02602938.2013.822845
Feedbackcultuur
De verantwoordelijkheid voor het gebruik van feedback ligt bij
WAT IS EEN FEEDBACKCULTUUR? Dialoog Continuïteit Samenwerking Van der Linden, M. (2017). Feedback geven in het onderwijs: kwalitatief onderzoek naar verschillende aspecten van Feedbackcultuur. Bachelorthesis in opdracht van Platform Leren van Toetsen.
Information does not become feedback unless it is provided within a system that can use that information to affect future performance Dylan Wiliam (2011)
WAT IS EEN FEEDBACKCULTUUR? Feedback is geen gunst van de docent Dialoog Gezamenlijk betekenisgeven aan feedback Van der Linden, M. (2017). Feedback geven in het onderwijs: kwalitatief onderzoek naar verschillende aspecten van Feedbackcultuur. Bachelorthesis in opdracht van Platform Leren van Toetsen.
WAT IS EEN FEEDBACKCULTUUR? Continuiteit gericht op ontwikkeling doorlopende lijn Van der Linden, M. (2017). Feedback geven in het onderwijs: kwalitatief onderzoek naar verschillende aspecten van Feedbackcultuur. Bachelorthesis in opdracht van Platform Leren van Toetsen.
WAT VOOR FEEDBACK GEVEN DOCENTEN? ONDERZOEK FONTYS ONDERZOEK PLATFORM LEREN VAN TOETSEN Lerarenopleiding biologie Opleiding Verpleegkunde HZ University of Applied Sciences 8 conceptversie van opdracht actieonderzoek 299 feedbackopmerkingen 20 concept- en 20 definitieve versies van startdocument scriptie 389 feedbackopmerkingen Arts, J. G., Jaspers, M., & Joosten-Ten Brinke, D. (2016). A case study on written comments as a form of feedback in teacher education: so much to gain. European Journal of Teacher Education, 1-15. doi:10.1080/02619768.2015.1116513 Van der Stok, M. (2015). Feedback, feedup, feedforward: feedbackanalyse in het hoger onderwijs. Niet gepubliceerde bachelorthesis Erasmus Universiteit Rotterdam.
WAT VOOR FEEDBACK GEVEN DOCENTEN? ONDERZOEK FONTYS ONDERZOEK PLATFORM LEREN VAN TOETSEN concept definitief 12,0 Feed-up 22,0 15,8 88,0 Feed-back 42,2 53,3 0 Feed-forward 3,8 2,4 Non-feedback 32,1 28,3 Arts, J. G., Jaspers, M., & Joosten-Ten Brinke, D. (2016). A case study on written comments as a form of feedback in teacher education: so much to gain. European Journal of Teacher Education, 1-15. doi:10.1080/02619768.2015.1116513 Van der Stok, M. (2015). Feedback, feedup, feedforward: feedbackanalyse in het hoger onderwijs. Niet gepubliceerde bachelorthesis Erasmus Universiteit Rotterdam.
Hughes, G., Smith, H., & Creese, B. (2015). Not seeing the wood for the trees: developing a feedback analysis tool to explore feed forward in modularized programmes. Assessment & Evaluation in Higher Education, 40, 1079-1094. doi:10.1080/02602938.2014.969193
WAT IS EEN FEEDBACKCULTUUR? Continuiteit gericht op ontwikkeling doorlopende lijn Van der Linden, M. (2017). Feedback geven in het onderwijs: kwalitatief onderzoek naar verschillende aspecten van Feedbackcultuur. Bachelorthesis in opdracht van Platform Leren van Toetsen.
WAT IS EEN FEEDBACKCULTUUR? Samenwerking Student - docent Studenten onderling Binnen docententeam Van der Linden, M. (2017). Feedback geven in het onderwijs: kwalitatief onderzoek naar verschillende aspecten van Feedbackcultuur. Bachelorthesis in opdracht van Platform Leren van Toetsen.
Toetscultuur Nadruk op het halen van toetsen Valide en betrouwbaar toetsen cruciaal Toetsen staat los van onderwijs Toetsen is het sluitstuk/ stopt leren Toetsen is een momentopname Voorbereiden en maken van toetsen veroorzaakt veel stress Docent bepaalt Docent als professional centraal Feedbackcultuur Nadruk op ontwikkeling student Feedback cruciaal Toetsen en onderwijs zijn één Toetsen is start van leren Programmatisch toetsen: veel toetsmomenten die samen leiden tot summatief oordeel Toetsen en het gebruik van feedback is vanzelfsprekendheid Student wordt betrokken bij toetsen en mag meebeslissen. Dialoog tussen docent en studenten, waardoor de student gevoel van autonomie heeft. Samenwerking in team centraal PLATFORM LEREN VAN TOETSEN
INDUSTRIEEL PRODUCT ONTWERPEN HR Proces naar het eindproduct toe is leidend in de beoordeling Beoordeling op basis van reflectie op leerproces
LOGISTICS ENGINEERING HZ Studenten geven periodiek feedback aan docententeam Reflectie op hoe onderwijs en toetsing bijdraagt aan ontwikkeling student
LEESTIP Leenknecht, M. J. M., & Kooij, S. E. (2017). Leren van Toetsen: Ontwikkelen als doel. HO Management, apr. 2017, 4-7.