NNK 13 april Utrecht Kwaliteit borgen. Experiment flexibele deeltijd. Harald Theunissen Ed Bosschaart

Transcriptie

1 NNK 13 april Utrecht Kwaliteit borgen Experiment flexibele deeltijd Harald Theunissen Ed Bosschaart 1

2

3 Agenda Waarom Kwaliteitsborging op verschillende niveau s Flexibel onderwijsmodel Leeruitkomsten Kwaliteitsborging Toetsing Sleutels tot LOT Voorbeeld Meer over kwaliteitsborging 3

4 Waarom Urgentiebesef: Professionals worden niet goed bediend Prof hebben meer flexibel onderwijs nodig (Rinooy K) -> doelgroepen denken, meer zelfsturing,.. Impuls aan eigen deeltijd (geen theezakje) Meer MBO-ers naar deeltijd Ook voltijd kan baat hebben Groei (5 opl-n) Opl-n bij faculteiten ondergebracht (verbinding dt met vt) 4

5 Kwaliteitsborging verschillende niveau s Bottom line: Kwaliteit opleiding is minimaal gelijk aan voltijd 1. Governance: OE s met formele bevoegdheden (toezicht, ontwikkelen, valideren,..) 2. Functionarissen die toepassen en uitvoeren 3. Kwaliteitscultuur

6 Flexibel onderwijsmodel het kader Vier pilaren Leeruitkomsten LOT & Valideren: een gedachte experiment? Blended Learning Intake & Coaching Beschreven in onze kleine bijbel 6

7 Ondersteuning en meer Directeuren faculteiten Portfeuillehouder CvB Ontwikkelteams met deeltijdcoordinatoren Werkgroepen: Toetsing, BL, Intake&Coaching, Logistiek Expertteams: Zuydbrede modulen Onderwijslectoraten Teamleiders 7

8 Leeruitkomsten De leeruitkomst is een samenhangend geheel van kennis, inzicht en vaardigheden, waarvan de omvang varieert tussen de 15 en 30 EC en bestaat uit de onderdelen: o o o beroepshandelingen: welke handelingen een student moet uitvoeren; bewijzen: de beroepsproducten waarin het beroeps handelen zichtbaar wordt; beoordelingscriteria: de eisen waaraan het handelen en de bewijzen moeten voldoen. Deze beschrijving maakt het mogelijk om leerwegonafhankelijk toetsen (LOT) op niveau van de leeruitkomst te definiëren; ook maakt het valideren van reeds elders verworven kennis mogelijk (de bewijzen). 8

9 Leeruitkomsten criteria Kwaliteitseisen Leerwegonafhankelijk: ze maken variatie in leeractiviteiten van (groepen) studenten mogelijk. Representatief voor de eindkwalificaties van de opleiding; Herkenbaar voor het werkveld; Specifiek en meetbaar: bieden een eenduidig beoordelingskader bij leerwegonafhankelijke toetsing; Transparant: de relatie tussen eindkwalificaties, eenheden van leeruitkomsten, leeractiviteiten en toetsing is duidelijk. Samenhangend: vormen een samenhangende eenheid en zijn te onderscheiden van andere eenheden van leeruitkomsten. Duurzaam: de leeruitkomsten zijn op zo n manier geformuleerd dat deze een aantal jaren gehanteerd kunnen worden. 9

10 De leeruitkomsten samenhang #blijfrelevant Samenhang en relatie van leeruitkomsten naar eindkwalificaties en borging eindniveau. Horizontale programmering: x aantal leeruitkomsten op eindniveau LU 1 LU 2 etc. Volgtijdelijkheid is mogelijk! Verticale programmering x aantal leeruitkomsten op beginners eindniveau en x aantal leeruitkomsten op eindniveau =>Volgtijdelijkheid en samenhang beschrijven 10

11 Leeruitkomsten voorbeeld #blijfrelevant Verticale programmering op twee niveaus leeruitkomst niveau volgtijdelijkheid A 1 Ja, eerst a en b 15 ec B 2 Ja, eerst a en b 30 ec C 1 Ja, eerst c dan d 15 ec D 1 Ja, eerst c dan d 30 ec E 2 Nee 30 ec 11

12 Validering van leeruitkomsten en toetsproces 7-voudige kwaliteitsborging Curriculum (Programma) commissie: Leeruitkomsten Valideren leeruitkomsten Vaststellen rubrics van leeruitkomsten Toetscommissie: Feedback geven op rubrics Monitoren toetsproces Examencommissie: Bewaken eindniveau Borging toetsing en beoordeling Werkveld Valideren leeruitkomsten Teamleiders: Deskundigheidsbevordering interne en externe assessoren, coaches, deelname werkgroepen Overleg met werkveld over leeruitkomsten Faciliteren assessoren (intern en extern) 12

13 Validering van leeruitkomsten en toetsproces 7-voudige borging Interne kwaliteitszorg: PDCA: evalueren en bijstellen Interne auditteam: Full en beperkte audits 13

14 Toetsing Formatieve evaluatie door feedback en toetsing modules en leeractiviteiten: verschillende toets vormen; centraal staat feedback en ontwikkeling van de student. Let op eventuele voorwaardelijke eisen in leeruitkomst t.a.v. deelname aan toets en/of feedback. Summatieve toetsing leeruitkomst: portfolio en portfolio assessment; beoordelingscriteria, bewijsstukken en randvoorwaarden die aan bewijslast zijn gesteld (AARID; authenciteit, actualiteit, relevantie, niveau, domeinrepresentatief) kernbewijsstukken met startt-document en onderliggende bewijsstukken self- en peerassessments en reflectie 14

15 Toetsing formatief #blijfrelevant Formatieve evaluatie = feedback Formatieve evaluatie vooraf mogelijkheid om toets te doen; tijdens of na volgen van de leeractiviteiten; (let op: eventuele voorwaardelijke eisen t.a.v. portfolio assessment bijvoorbeeld deelname aan (kennis-)toets) Feedbackvorm (schriftelijk en/of mondeling tijdens module) De student moet op basis van resultaten beslissen welke activiteiten nog gedaan worden. Er is geen sprake van herkansingen van feedbackmomenten. 15

16 Toetsing formatief vormen van assessment 1.Self-assessment. De student beoordeelt zichzelf op de leeruitkomst(en) hierbij wordt gebruik gemaakt van de rubric van de betreffende leeruitkomst en reflecteert hierop; 2.Peer-assessment. Een peer (medestudent of collega) beoordeelt de student met behulp van de rubric. 3.Portfolio-Assessment De student wordt beoordeeld door twee assessoren 16

17 17 LOT

18 Toetsing formatief vormen van assessment Alle bewijslast moet voldoen aan de volgende criteria: Gekoppeld aan de leeruitkomsten; Een kritische reflectie op de leeruitkomst op het niveau van bekwaamheid; Feedback op de bewijsstukken; Op hbo-niveau; Actueel en niet ouder dan drie jaar; Verzameld over een tijdsperiode (geen verzameling van stukken gericht op één en hetzelfde moment) Daar waar in een leeruitkomst sprake is van het herhaald uitvoeren van een beroepshandeling moet dit in het portfolio aangetoond worden/zijn. Aan ieder kernbewijsstuk is een STARRT formulier toegevoegd (situatie, taak, actie, resultaat, reflectie, transfer). Vb-n: Video van een gesprek; casusbeschrijving: afgetekend door werkplekbegeleider 18

19 Actoren toetsproces borging in 5 functies inhoudsdeskundigen docent/werkplekbegeleider criteria bewijslast, evaluatie rubric, vraagbaak studenten en docenten, aansturen ontwikkelaars, leeractiviteiten, formatieve toetsing en feedback, samenhang met leeruitkomst en transfer bewijslast naar portfolio coaches kwantitatieve feedback of aan de formele criteria voor portfolio-assessment is voldaan studenten bewijsstukken verzamelen, portfolio vullen, peer- en self-assessment, leeractiviteiten uitvoeren, werkplekleren, reflecteren assessoren (intern/extern) beoordeling portfolio en portfolio assessment examinatoren vaststelling beoordeling, kalibreren en/of intervisie sessies, evaluatie en verbeter voorstellen

20 Toetsen en beoordelen: samenhang Valideren Leeruitkomst Beroepstaken/roll en Kernbewijsstukken -> leeruitkomsten Prestatieindicatoren Beoordelings modellen Producten werkveld Algemene Kwalificaties Integraal geheel van BT, AK en BoKS PI s meten hoofdprestatie 1-op-1 n-op-1 BoKS

21 Toetsing leeractiviteiten, voorbeeld Opdracht voor portfolio samenhang en toepassing in context en praktijk => kernbewijsstukken leeractiviteit onderwerp toetsing Instrumenten +bewijslast Module 1 X logica Form kennistoets en/of opdr(en), beroepsproduct Module 2 Y schema technieken Form kennistoets en/of opdr(en), beroepsproduct) Module 3 Z databases Form kennistoets en/of opdr(en), beroepsproduct Leeruitk Summatief, beoordelen bewijslast, portf assessment rubrics, prest indicatoren, form evaluatie, assessment, portfolio: onderliggend idem idem 21

22 Beoordelen leeruitkomsten en toetsing is het echt nieuw? Leeractiviteiten: face-to-face en blended Ontwikkelen competenties Bewijslast verzamelen beoordelen gerealiseerde leeruitkomsen 22

23 Kwaliteitsborging in kultuur Professionele beoordelaar: - de begeleider als beoordelaar - meerdere beoordelaars Professionele student - intrinsieke motivatie - relatie toets-leeruitkomst-beroepspraktijk - kennisverwerver kennisverwerker Professionele beoordelingscultuur - rijke leeromgeving - ontwikkelen zelfstandige, gemotiveerde professionals - per leeruitkomst passende toetsen - kwaliteit van toetsen bewaken met klanten

24 Nog meer kwaliteitsborging kaders en richtlijnen voor 1. Intake 2. Coaching 3. Format Blended Learning 4. Onderwijsleerovereenkomst 5. Module ontwerp 6. Onderwijslogisitiek En en en Professionalisering

25 Professionalisering Deskundigheidsbevordering: intake begeleidingsvaardigheden tijdens looptijd van modules coachen op bewijslast assessorentraining met certificering module-ontwerp voor blended learning formatieve feedback nul module Advies en feedback op: leeruitkomsten beschrijving OER deel twee onderdeel beschrijving deeltijdvariant peer- en self-assessment modellen 25

26 26 #blijfrelevant

27 Zuyd Professional Engineering - Deeltijd Ervaringen uit de praktijk 13 april 2017 Harald Theunissen Programmamanager Engineering Deeltijd Zuyd Professional

28 Inhoud Aanpak projectteam Engineering - Deeltijd Leeruitkomsten en de beoordeling daarvan Samenhang programma Coaching 28

29 Aanpak Team samenstellen 29

30 Bedrijven Ambassadeurs

31 Zuyd Professional Engineering - Deeltijd De Engineer van de Toekomst Professional Engineer: Engineering Fundamentals - Technisch inhoudelijke basiskennis - Professionaliseren - Onderzoeken - -21st century skills: veranderingslust / interdisciplinariteit / menselijke interactie / ondernemende houding / internationale oriëntatie / lange termijn gericht

32 14 leeruitkomsten Engineering Leeruitkomst (15 tot 30 EC): weten, begrijpen en kunnen toepassen na afronden leerperiode Beroepshandelingen Bewijzen cq. Beroepsproducten Beoordelingscriteria Voorbeeld: #1 De Ingenieur van de Toekomst (DIT) kan op basis van een vraagstelling een heldere probleemstelling en doelstelling(en) definiëren, rekening houdend met maatschappelijke -, bedrijfseconomische en/of vakgebied gerelateerde aspecten 32

33 Competentiesleeruitkomstenrollen 8 competenties Domein Engineering 14 leeruitkomsten Voltijd 7 rollen Functies 33

34 Professional Engineer 1 Analist 1 Beheerder / manager 1 Verbeteraar 1 Ontwerper 1 implementeerder 1 Adviseur 1 Professional Engineer 2 (15 ECTS VRIJE RUIMTE) Analist 2 Beheerder / manager 2 Verbeteraar 2 Ontwerper 2 implementeerder 2 Adviseur 2 Engineering - Deeltijd Integrale afstudeeropdracht (30 ECTS) Meerdere rollen op niveau 3 Programma bacheloropleiding (240 ECTS) 34

35 Professional Engineer 1 Analist 1 Beheerder / manager 1 Verbeteraar 1 Ontwerper 1 implementeerder 1 Adviseur 1 Professional Engineer 2 (15 ECTS VRIJE RUIMTE) Analist 2 Beheerder / manager 2 Verbeteraar 2 Ontwerper 2 implementeerder 2 Adviseur 2 Engineering - Deeltijd Propedeuse (60ECTS): 4 van de 7 rollen op niveau 1 Integrale afstudeeropdracht (30 ECTS) Meerdere rollen op niveau 3 35

36 Professional Engineer 1 Analist 1 Beheerder / manager 1 Verbeteraar 1 Ontwerper 1 implementeerder 1 Adviseur 1 Professional Engineer 2 (15 ECTS VRIJE RUIMTE) Analist 2 Beheerder / manager 2 Verbeteraar 2 Ontwerper 2 implementeerder 2 Adviseur 2 Engineering - Deeltijd Eventuele toekomstige AD (120 ECTS): 7 rollen op niveau 1 en professional Engineer op niveau 2 Integrale afstudeeropdracht (30 ECTS) Meerdere rollen op niveau 3 36

37 Analist Ontwerper Implementeerder Manager/ Beheerder Adviseur Verbeteraar Professional Engineer 14 Leeruitkomsten 7 Rollen Leeruitkomst / Beroepshandeling Vertaling naar module # 1 De Ingenieur van de Toekomst (DIT) kan op basis van een vraagstelling een heldere probleemstelling en doelstelling(en) definiëren, rekening houdend met maatschappelijke -, bedrijfseconomische en/of vakgebied gerelateerde aspecten 8 DIT kan op een gestructureerde en passende manier informatie presenteren, waarbij hij de informatie weet te definiëren, interpreteren, onderbouwen én op basis daarvan conclusies te trekken X X Analist: wiskunde, statistiek en data analyse Analist: wiskunde, statistiek en data analyse 37

38 Koppeling 2 leeruitkomsten met 1 rol Implementeerder Leeruitkomst #3 DIT neemt verantwoordelijkheid voor het resultaat van een project. Hij weet het projectresultaat te transfereren in taken en (leer)doelen die hij vervolgens kan organiseren, (mede) realiseren en bijsturen Leeruitkomst #7 DIT kan, gebruik makend van de beschikbare materialen en (productie)middelen, een proto type/pilot realiseren en vervolgens ook valideren Hergeformuleerde leeruitkomst voor de rol: De engineer is in staat om een bestaand aangepast of nieuw(e) product, dienst of proces in bedrijf te nemen en in de organisatie in te voeren en is hierbij in staat om de (veelal niet-technische) gevolgen te overzien Niveau: aard van de taak / aard van de context / mate van zelfstandigheid 38

39 Didactisch concept Opbouw module: In ontwikkeling Theorie Blended Learning Contacttijd (quality-time) Individuele of duo opdracht Bij voorkeur op de werkplek/ werkomgeving Toepassing theorie Wekelijkse terugkoppeling E-portfolio Coaching Groepsopdracht Tijdens de contactmomenten op school Toepassing theorie (casus) 39

40 Praktische informatie Onderwijsbegeleiding op Maandag op Zuyd of in een enkel geval op een andere locatie van 16 tot 21 uur Studiebelasting ongeveer uur per week bij volgen volledige module Studieduur tussen 2,5 en 4 jaar Werkomgeving 40

41 Hei-dag met werkveld 3 april 2017 De professionals in staat kunnen stellen om leeruitkomsten (gekoppeld aan rollen) op 2 niveau s aan te tonen. De opbrengst houdt verband met de gedachte van de pilot flexibilisering en de behoeften van een aantal professionals om leerwegonafhankelijk (dus zonder onderwijs te volgen) een leeruitkomst (eerder) aan te tonen en dus sneller dan nominale duur in het bezit te komen van een diploma. Wat vragen we: Inhoudelijke onderwerpen bij de rollen: kennis en vaardigheden van een Engineer Beroepshandelingen / beroepsopdrachten Beroepsproducten bij de rollen / prestaties / bewijzen (Specifieke) Rubrics 41

42 Concreet per rol: opdrachten Wat doet de student? Waar is hij/zij mee bezig? Wat toont hij/zij aan? Prestaties / producten / bewijzen Waar blijkt dit uit? Wat levert de student op? Beroepshandelingen/ Beoordelingsmodel Wat verwachten we van hetgeen opgeleverd is? Wanneer is dit aan de maat en wanneer niet? 42

43 Ervaringen projectteam Enthousiast projectteam met complementair vermogen Ad hoc werken / innoveren / ontwikkelen en uitvoeren Compleet nieuw onderwijsconcept: pionieren / experimenteren Transitie Nieuwe beoordelingsmethodiek voor projectteam: Portfolio assessment (CGI) Tussentijdse Formatieve feedback: BlackBoard en E-portfolio Veel discussie in de groep en dus veel geleerd Beroepsproduct is een mogelijk bewijs Beroepsproducten ook kunnen verklaren en vertaalslag weten te maken naar de praktijk Aanwezigheid Inlevertermijnen en striktheid Moment incl. herkansing 43

44 Klantgericht Kennismakingsgesprek 44

45 Coaching Intake op locatie: startmoment studieduur wat is er al aan te tonen? 4 keer per jaar coachingsgesprek / eportfolio e-coaching Intervisie / training 45

46 PDCA P Ontwikkelen A Bijstellingen D Uitvoeren C Evaluaties Teamoverleg/ Werksessies/enquêtes 46

47 47 Vragen