Evalueren bij afstuderen OOF Bachelortoets
Intro
Voorbeeld Teams van studenten (Onderzoeks-)project Aangeleverd door externen uit het vakgebied Begeleid door docenten en externe opdrachtgevers Rapporteren conclusies/ product Paper Presentatie voor medestudenten, externen en docenten
Voorbeeld Herkent u aspecten uit deze toets? MMA Maar ook: VPK, SW, CH, SPIZ, SO, VD Welke competenties kan u beoordelen met dergelijke toets?
Voorbeeld MMA Kritische ingesteldheid Flexibiliteit Nauwkeurigheid Professionaliteit Leergierigheid Goede omgang met feedback Timemanagement Planningsvaardigheden Samenwerkingsvaardigheden Schrijfvaardigheden
Project - inhoud TOETSVORM Scriptie - afstudeerwerk Overalltoets Project - sfstudeerproject Portfolio Stage(verslag) 1 2 3 Eindtoets Bachelor Inhoud, niveau, integratie tijd
Verloop workshop Intro Voorbeeld Kader Project Work (shop) World café Kader Theoretisch kader Assessment instrument (Work) Shop Voorbeeld Vragen
Kader
Project - aanleiding Bachelor Toets Bologna (1999) NVAO visitatie- en accreditatie Kwaliteitsvolle toetsing= Bewijslast voor eindniveau EQF (2008) Decreet op kwalificatiestructuur (2009) Domeinspecifieke leerresultatenkaders Nieuw visitatie- en accreditatiekader (2010) standaard 3
Project - aanleiding Assessmentinstrumenten van voor eindevaluatie (divergent assessment): Verschillende opleidingen (TI, IZSP, ) Verschillende vormen en procedures Verschillende (beroepsspecifieke) focus Verschillende context Gelijkaardige evaluatiecriteria/ standaarden
Project - Algemene competenties Denk- en redeneervaardigheid Verwerven en verwerken van informatie Kritische reflectie Projectmatig werken Creativiteit Uitvoeren eenvoudige leidinggevende taken Communiceren Levenslang leren
Project - Algemeen beroepsgerichte competenties Teamgericht werken Oplossingsgericht werken Maatschappelijke verantwoordelijkheid samenhangend met de beroepspraktijk
Project - doelstellingen Gevalideerde à associatiebreed inzetbaar Set evaluatiecriteriaà kwaliteit: betrouwbaarheid/ transparantie Minimumcriteria à concretisering van niveau 6 Uitbreidingscriteria à differentiatie Sjabloon à toetsinstrument
Project - timing WP1: Kaders WP2: Ontwerp WP3: Validering WP5: Disseminatie WP4: Implementatie Intern Intern Adviesraad Adviesraad Adviesraad seminarie seminarie
Work
World Café 3 groepen 3 thema s 1 toets (SPIZ) Bruikbaarheid criteria Eindniveau Scoren Per thema: Argumenten Zorgen Condities voor goede praktijk Doorschuiven en verder borduren
World Café toets bruikbaarheid criteria Argumenten Transparant Correct Objectief Zorgen Verschillende interpretatie Contextspecificiteit Globaal oordeel moet mogelijk blijven
Kader
Project divergent assessment à Evaluatiecriteria/ standaarden Resultaten van studenten Expertise van assessoren Proces van beoordelen
Assessment design Ra-ng purpose(s) Ra-ng form/ scale Procedures Ratee performance Rater Exper-se Performance theory Beliefs Mood Affect Goals Rater Informa-on Processing Private judgement Organiza-onal context Norm, values Accountability Feedback culture Resources (-me, training, ) Public decision making Score Feedback Model of performance assessment process (adapted by M. Govaerts, 2011 from DeNisi, 1996)
Project - Evaluatiecriteria Holistisch Analytisch Zorgen Verschillende interpretatie à Contextspecificiteit à Globaal oordeel moet mogelijk blijven ß
Project - Evaluatiecriteria Een goed evaluatiecriterium is: Betrouwbaar Valide Transparant Gelinkt aan competenties (~gelinkt aan evaluatievorm) Niet te algemeen, niet te specifiek geformuleerd Overlapt niet met andere criteria Plaatsen in beoordelingsrooster: kwaliteit verhoogt
Project gebruik evaluatiecriteria Gevalideerde à associatiebreed inzetbaar Set evaluatiecriteriaà kwaliteit: betrouwbaarheid/ transparantie Minimumcriteria à concretisering van niveau 6 Uitbreidingscriteria à differentiatie Sjabloon à toetsinstrument Flexibel gebruik Selectie criteria Semi- generieke criteria Bijkomende beroepsspecifieke criteria
Project gebruik evaluatiecriteria Structuur opmaken Criteria opvragen Inventaris Criteria Criteria labelen Inventaris Competenties Opgevraagde criteria AC/ABC Literatuur AC/ ABC Inventaris toetsvormen Differentiatie per toetsvorm
Project - sharepoint http://intra.khleuven.be/onderzoekinnovatie/projecten/gnt/ PWO_OOFBATO_12/Pages/Default.aspx
Shop
Structuur Generieke competenties à Schalen à Criteria à Toetsvormen/niveau
Structuur Generieke competenties à Schalen AC1 Denk- en redeneervaardigheid AC2 Verwerven en verwerken van informatie AC3 Kritische reflectie à Criteria AC4 Projectmatig werken à Toetsvormen/niveau AC5 Creativiteit AC6 Uitvoeren eenvoudige leidinggevende taken AC7 Communiceren AC8 Levenslang leren ABC1 Teamgericht werken ABC2 Oplossingsgericht werken ABC3 Maatschappelijke verantwoordelijkheid samenhangend met beroepspraktijk
Structuur Generieke competenties à Schalen à Criteria De student kan relevante gegevens verzamelen, selecteren en structureren De student kan de verworven à Toetsvormen/niveau informatie kritisch verwerken en beschrijven
Structuur Generieke competenties à Schalen à Criteria à Toetsvormen/niveau Probleemstelling formuleren Bronnen selecteren Gestructureerd kader schetsen
Structuur Generieke competenties à Schalen à Criteria à Toetsvormen/niveau
Het vermogen tot het verwerven en verwerken van informatie à De student kan relevante gegevens verzamelen, selecteren en structureren à Probleemstelling formuleren
Oefening 2 documenten SPIZ - MMA Opdrachtbeschrijving Evaluatiecriteria à Gelijkenissen?
Basis Uitbreiding Scriptie Project De probleemstelling wordt duidelijk omschreven De belangrijkste bronnen worden geselecteerd en er wordt correct naar verwezen Recente ontwikkelingen van en inzichten over het thema zijn correct beschreven en voldoende uitgewerkt Het conceptueel en contextueel kader wordt duidelijk geschetst Gestructureerde en overzichtelijke opbouw Het praktijkvraagstuk, de opdrachtgever en de nodige middelen worden duidelijk omschreven De literatuurkeuzes worden duidelijk omschreven en verantwoord vanuit het praktijkvraagstuk De belangrijkste bronnen worden gebruikt Gestructureerde en overzichtelijke opbouw De juiste personen (cliënt/patiënt/collega) worden op een gepaste wijze bevraagd De relevante informatie kan uit het verhaal van de cliënt/patiënt worden Duidelijk, bondig omschreven, goed afgebakende en verantwoorde probleemstelling Voldoende, relevante, ook internationale referenties Relevante visuele ondersteuning door figuren Het praktijkvraagstuk is duidelijk, bondig omschreven en afgebakend, kritisch verantwoord De geraadpleegde literatuur is verscheiden, bekend binnen het werkveld en toonaangevend Recente ontwikkelingen van en inzichten over het thema zijn opgenomen en correct beschreven en voldoende uitgewerkt Gerichte, objectieve vragen worden aan de cliënt/patiënt/collega gesteld om efficiënt de juiste informatie te verkrijgen De informatie wordt op een kritische
Vragen
Bedankt! Jetske.strijbos@khleuven.be Greet.fastre@khlim.be Hilde.schrooten@khk.be