FEEDBACK GEVEN? OVERTREED DE REGELS! 4 oktober 2016 Facta studiedag Toetsen en examineren in het HO
Feedback is one of the more instructionally powerful and least understood features in instructional design Cohen (1985)
Feedforward Strategie om het doelniveau te bereiken Feed-up Huidige niveau Feed-back Kloof tussen de huidige prestatie en het doelniveau Doelniveau Black & Wiliam, 1998 Hattie & Timperley, 2007
FEEDBACKREGELS SCHRIJF OP: één feedbackregel om goede feedback te geven VERFROMMEL JE PAPIER TOT EEN PROP: gooi je prop naar voren
ATTRIBUTIE
Stabiel Intern Ik kan dit ook niet Veranderbaar Ik heb daar te weinig aan gedacht in de eerste versie Extern We hebben niet genoeg begeleiding gekregen De opdrachtbeschrijv ing was onduidelijk
REACTIES OP FEEDBACK Standaard ongewijzigd Verhogen inzet om standaard alsnog te bereiken Standaard wordt verworpen Standaard wordt naar beneden bijgesteld Standaard ongewijzigd: feedback wordt genegeerd Geen verdere actie Doel is om aangepaste standaard te bereiken Geen verdere actie Wanneer doel en gewenste niveau duidelijk zijn en het vertrouwen in succes hoog is Wanneer het vertrouwen in succes laag is Wanneer standaard niet kan worden bereikt, of wanneer de student de (hogere) standaard niet wil bereiken Wanneer het vertrouwen in succes (te) laag is Kluger, A. N., & DeNisi, A. (1996). The effects of feedback interventions on performance: a historical review: A meta-analysis, and a preliminary feedback intervention theory. Psychological Bullitin, 119, 254-284.
VIER NIVEAUS VAN FEEDBACK Feedback op: zelf proces taak zelf-regulatie Hattie, J., & Timperley, H. (2007). The power of feedback. Review of Educational Research, 77, 81-112. doi:10.3102/003465430298487
OBJECTIVITEIT
GEBRUIK CRITERIA? Beoordelingscriteria onbekend? >> vergelijken Jones en collega s (2014; 2015): Studenten zijn in staat om kwalitatief goede beoordelingen te geven op basis van vergelijken De vergelijkende oordelen zijn beter dan de oordelen gebaseerd op criteria Zie ook https://lerenvantoetsen.com/2016/01/07/de-kracht-van-beoordelingscriteria-deels-ontkracht/
Anais Nin
INTERPRETATIE VAN FEEDBACK Böhm, I. (2016). De interpretative van feedback, feedup, en feedforward en feedbackpercepties in het hbo. Niet gepubliceerde masterthesis Universiteit Utrecht.
DOCENT & STUDENT PERCEPTIES VAN FEEDBACK 194 studenten 26 docenten School of the Built Environment, Liverpool John Moores University Vragenlijst over feedback Mulliner, E., & Tucker, M. (2015). Feedback on feedback practice: perceptions of students and academics. Assessment & Evaluation in Higher Education, 1-23. doi:10.1080/02602938.2015.1103365
POSITIEVE VERSUS NEGATIEVE FEEDBACK
DE FEEDBACKSANDWICH Positief negatief positief Waarom het niet werkt Geloofwaardigheid van positieve feedback neemt af Grotere nadruk op negativiteit feedback Eenzijdige feedback met controlerende stijl Zie https://hbr.org/2013/04/the-sandwich-approach-undermin&cm_sp=article-_-links-_-end%20of%20page%20recirculation
FINAL VOCABULARY Positief & negatief goed zo! prima gedaan! dat kan je beter Niet goed! Biedt geen ruimte voor actie Zie https://lerenvantoetsen.com/2016/05/24/het-belang-van-balans-tussen-positieve-en-negatieve-feedback-eenonderwijsmythe/
TOON & INHOUD Paul Watzlawick (communicatiewetenschapper): Inhoudsniveau Betrekkingsniveau Zie https://lerenvantoetsen.com/2016/05/24/het-belang-van-balans-tussen-positieve-en-negatieve-feedback-eenonderwijsmythe/
DOEL VAN DE FEEDBACK
WAT VOOR FEEDBACK GEVEN DOCENTEN? ONDERZOEK FONTYS ONDERZOEK PLATFORM LEREN VAN TOETSEN Lerarenopleiding biologie Opleiding Verpleegkunde HZ University of Applied Sciences 8 conceptversie van opdracht actieonderzoek 299 feedbackopmerkingen 20 concept- en 20 definitieve versies van startdocument scriptie 389 feedbackopmerkingen Arts, J. G., Jaspers, M., & Joosten-Ten Brinke, D. (2016). A case study on written comments as a form of feedback in teacher education: so much to gain. European Journal of Teacher Education, 1-15. doi:10.1080/02619768.2015.1116513 Van der Stok, M. (2015). Feedback, feedup, feedforward: feedbackanalyse in het hoger onderwijs. Niet gepubliceerde bachelorthesis Erasmus Universiteit Rotterdam.
WAT VOOR FEEDBACK GEVEN DOCENTEN? ONDERZOEK FONTYS ONDERZOEK PLATFORM LEREN VAN TOETSEN concept definitief 12,0 Feed-up 22,0 15,8 88,0 Feed-back 42,2 53,3 0 Feed-forward 3,8 2,4 Non-feedback 32,1 28,3 Arts, J. G., Jaspers, M., & Joosten-Ten Brinke, D. (2016). A case study on written comments as a form of feedback in teacher education: so much to gain. European Journal of Teacher Education, 1-15. doi:10.1080/02619768.2015.1116513 Van der Stok, M. (2015). Feedback, feedup, feedforward: feedbackanalyse in het hoger onderwijs. Niet gepubliceerde bachelorthesis Erasmus Universiteit Rotterdam.
Hughes, G., Smith, H., & Crees, B. (2015). Not seeing the wood for the trees: developing a feedback analysis tool to explore feed forward in modularized programmes. Assessment & Evaluation in Higher Education, 40, 1079-1094. doi:10.1080/02602938.2014.969193
Information does not become feedback unless it is provided within a system that can use that information to affect future performance Dylan Wiliam (2011)
PARADIGMASHIFT FEEDBACK = informatie geven informatie verwerken monoloog dialoog vertellen waar de student staat in zijn ontwikkeling vermogen ontwikkelen om eigen leren te monitoren, evalueren en reguleren cognitivistische kijk sociaal-constructivistische kijk Ajjawi, R., & Boud, D. (2015). Researching feedback dialogue: An interactional analysis approach. Assessment & Evaluation in Higher Education, 1-14. doi:10.1080/02602938.2015.1102863
Engagement with feedback facilitates effective feed-forward into future assignments (Jackson & Marks, 2015)
DE OPLOSSING..? Rust studenten toe om betrokken te zijn werk aan hun toetsdeskundigheid Geef aan wat de functie van feedback is, zodat de student beter begrijpt waar de feedback op gericht is en zo de meerwaarde van de feedback ervaart. Maak kenbaar aan de student wanneer je feedback geeft, zodat de student zich bewust is van de feedback en deze herkent. Laat als docent zien (modelleer) hoe je feedback gebruikt om tot verbetering van een prestatie te komen. Moedig het gebruiken van feedback door de student aan door met de student terug te blikken op prestaties waarbij de gegeven feedback is toegepast. Gebruik zelfevaluatie als beoordelingsvorm, waardoor de student een beter begrip van beoordelingscriteria ontwikkelt en feedback meer betekenis krijgt in het licht van de beoordelingscriteria. O Donovan, B., Rust, C., & Price, M. (2015). A scholarly approach to solving the feedback dilemma in practice. Assessment & Evaluation in Higher Education. doi:10.1080/02602938.2015.1052774
DE OPLOSSING..? Maak feedback relevant en het gebruik er van noodzakelijk Draag zorg dat feedback relevant en doelgericht is, door de student inzicht te geven in de meerwaarde van feedback, gelegenheid te geven feedback toe te passen in zijn leerproces en de ondersteuning te bieden om de blind spots zichtbaar te maken Geef feedback bij voorkeur tijdens het leerproces zodat de student tijdig zijn prestatie kan bijsturen en verbeteren. Zorg voor dialoog in het leerproces en een goede relatie met de student om de student meer te betrekken bij feedback en hem deze te laten begrijpen. Houd de feedback beperkt en verwijs naar goede voorbeelden en bronnen die de student helpen zijn prestatie te verbeteren. Waardeer prestaties niet zozeer met cijfers maar met feedback, zodat de student zich vooral focust op feedback in plaats van op het cijfer. Geef meer mondelinge feedback dan schriftelijke, omdat mondelinge feedback effectiever is en je in korte tijd meer kunt zeggen dan schrijven. O Donovan, B., Rust, C., & Price, M. (2015). A scholarly approach to solving the feedback dilemma in practice. Assessment & Evaluation in Higher Education. doi:10.1080/02602938.2015.1052774
STUDENTEN BETREKKEN Elly Vermunt (Zuyd Hogeschool) Zie https://lerenvantoetsen.com/2015/09/02/to etsen-doe-je-samen-met-studenten/
VERPLICHTE REFLECTIE & EERST FEEDBACK, DAN CIJFER 2011-12: geen interventie 2012-13: reflecties op feedback 2013-14: verbeterde procedure reflecties cijfers pas verstrekt bij inleveren reflectie Jackson, M., & Marks, L. (2015). Improving the effectiveness of feedback by use of assessed reflections and withholding of grades. Assessment & Evaluation in Higher Education, 1-16. doi:10.1080/02602938.2015.1030588
ZELF BEOORDELING TER VERGELIJKING Essay Feedback Checklist Zelfbeoordeling (stelt waar gewenst specifieke feedbackvragen aan docent) Vergelijking met docentbeoordeling Feedbackvragen rondom grootste discrepanties Wakefield, C., Adie, J., Pitt, E., & Owens, T. (2014). Feeding forward from summative assessment: The Essay Feedback Checklist as a learning tool. Assessment & Evaluation in Higher Education, 39, 253-262. doi:10,1080/02602938.2013.822845
CASUS BOUWKUNDE & ENGINEERING HZ Portfolio: Voortgang op competentieontwikkeling Reflectie op gebruik feedback Competentieontwikkeltoets Zie ook https://lerenvantoetsen.com/2014/11/18/leren-van-feedback-gaat-niet-vanzelf/
Hoe ga je er zelf voor zorgen dat een volgende keer dat je feedback geeft of ontvangt de feedbackontvanger hier optimaal van leert?
Blog, nieuwsbrief en contact : www.lerenvantoetsen.com