Projecten objectief beoordelen Nieuwjaarsbijeenkomst 23 januari 2014 Esther Gouweloos Erika Rob Dorinde Winkelaar
Stellingen Ook voor projecten moet je een toetsmatrijs maken In een project toets je geen kennis, maar alleen vaardigheden en houding Projecten beoordeel je vooral met je onderbuikgevoel Bij projecten zijn meelifters onvermijdelijk
Projecten? Verschillende beroepsproducten en toetsvormen
LEERDOELEN
Voorbeeld projectopdracht Lokalenprobleem op De Haagse Hogeschool
PITCHES 1 MINUUT
Leerdoelen 1. gedrag: Wat moeten studenten met de leerstof kunnen doen? Actiewerkwoorden! 2. de inhoud: Op welke inhoud moet de student de beschreven activiteit kunnen toepassen? 3. voorwaarden: Onder welke condities moet de student het gedrag vertonen? 4. norm: Welke minimumprestatie vind je nog succesvol?
Leerdoelen in projecten Adviesrapport schrijven Samenwerken Inhoudelijke leerdoelen Proces leerdoelen Probleem analyseren Klantgericht werken
Leerdoelen - projecten Less is more
Voorbeeld toetsmatrijs project Naam onderwijseenheid Project A Jaar opleiding Jaar 2 Soort toets Projectopdracht Leerdoelen/onderwerpen Competentieprofiel Toetsvormen Totaal & Competentie Niveau Probleemanalyse Adviesrapport Presentatie Portfolio weging 1. De student kan een probleemanalyse opstellen 2. De student kan een adviesrapport opstellen 3. De student kan zijn adviesrapport vertalen in een presentatie 2 2 20% 20% 2 2 40% 40% 3 2 10% 10% 4. De student kan samenwerken 5 2 20% 20% 5. De student kan klantgericht werken 7 2 10% 10% Totaal 20% 40% 20% 20% 100%
Toetsmatrijs project Toetsmatrijs = blauwdruk Wat ga je hoe toetsen en met welke onderlinge weging? Leerdoelen (niveau) Toetsvormen Weging per leerdoel en per toetsvorm/deelcijfer Individuele beoordelingen en/of groepsbeoordelingen Meelifters Onderleggers: beoordelingsformulier per toetsvorm
BEOORDELINGSFORMULIER
Beoordelingsformulier Voor elke toets van het project een beoordelingsformulier: transparantie! Veel variatie mogelijk: van kort lijstje tot prachtig ontworpen formulier met plaatjes en kleurtjes
Beoordelingscriteria Afgeleid van de leerdoelen van het project Specifiek gedrag van de succesvolle student Onderscheid tussen adequaat en niet-adequaat gedrag Voorwaarden Vuistregel: maximaal 10 criteria
Voorbeeld: presentatie Leerdoel Criteria O V G De student kan een adviesrapport presenteren Logische opbouw Aantrekkelijk Overtuigend X X X De student kan klantgericht werken Aansluiten bij doelgroep X
Van leerdoelen naar criteria Leerdoel: De student kan samenwerken Criteria: Actief luisteren Omgaan met kritiek Afspraken nakomen Verantwoordelijkheid nemen
Schaalverdelingen Criterium 1 1 2 3 10 Criterium 1 o v g Criterium 2 Criterium 2 Criterium 1 - - - + + + Criterium 2 Criterium 1 Criterium 3 Criterium 2
Weging Relatie met leerdoelen (relevantie) Complexiteit, zelfstandigheid, moeilijkheidsgraad Van oordelen op criteria, naar deelcijfers, naar totaaloordeel
Voorbeeld: Adviesrapport Criteria 0-1-2 Weging Aantal punten Toelichting Logische opbouw 2 1X 2 Prima opbouw Onderbouwd met argumenten/onderzoek Volgens juiste onderzoeksmethode(s) 1 2X 2 Weinig onderbouwing 0 1X 0 Te kleine N, weinig data Goed advies 1 1X 1 Advies volgt logisch uit resultaten, maar is geen volledig antwoord op onderzoeksvraag Totaal 5
BEOORDELEN IN DE PRAKTIJK
Beoordelingsprocedure: wie beoordeelt? Begeleidend docent Tweede docent (tweede lezer) Meerdere docenten (waaronder evt. begeleider) Opdrachtgever(s) Forum van deskundigen Docenten en studenten (co-assessment) Medestudenten (peer-assessment) De student zelf (self-assessment)
Voorbeeld: samenwerken - peerreview Samenwerken Onvoldoende Voldoende Goed Afstemming Afspraken nakomen Feedback geven Stemt eigen taken niet af met groepsleden Komt gemaakte afspraken niet na Geeft geen feedback / geeft niet constructieve feedback Stemt eigen taken af met groepsleden Komt gemaakte afspraken na Geeft feedback Neemt initiatief in het verdelen van taken Komt gemaakte afspraken snel na Geeft constructieve feedback
Beoordelingsprocedures: wie beoordeelt? Begeleiden beoordelen Betrouwbaarheid: meerdere ogen Onderlinge verdeling Wie heeft het laatste woord? Wettelijke kaders (wie is aangewezen als examinator) Haalbaarheid
Valkuilen bij het beoordelen van projecten
Beoordelaarsinstructies Gemeenschappelijk beeld van gewenst gedrag: criteria en niveau Gebruik beoordelingsformulier: hele/halve punten
Dus: projecten objectief beoordelen 1. Duidelijke leerdoelen (inhoud/proces) 2. Geschikte toetsvormen (producten/opdrachten) 3. Toetsmatrijs projecten (blauwdruk project) 4. Beoordelingscriteria per toetsvorm (transparantie) 5. Individuele beoordelingen en/of groepsbeoordelingen 6. Van scores naar cijfer (weging) 7. Beoordelaars aanwijzen 8. Beoordelaarsinstructies
Terug naar de stellingen Ook voor projecten moet je een toetsmatrijs maken In een project toets je geen kennis, maar alleen vaardigheden \ en houding Projecten beoordeel je vooral met je onderbuikgevoel Bij projecten zijn meelifters onvermijdelijk
VRAGEN? toetsen@hhs.nl Inloopspreekuur: elke dinsdag en woensdag 15.00-16.00 uur in Ovaal 4.05/2 Special: Hoe beoordeel je projecten? 17 april 2014 15.00-17.00 uur