Kwaliteitshandboek CT

Transcriptie

1 CT 1 e uitgave 1 februari 2006 Vastgesteld door Dr.C.L.M. Pouw, Opleidingsdirecteur CT, na positief advies van de Opleidingscommissie CT De versie die op intranet staat is geldig. Een papieren versie daarvan is beschikbaar bij Bureau Onderwijszaken. Kenmerk: /TNW-CT/hgl Inlichtingen, opmerkingen, voorstellen voor wijzigingen: Coördinator Kwaliteitszorg CT, H.J. van den Hengel, Horst T611, tel.2958, h.j.vandenhengel@utwente.nl 2006 Universiteit Twente, Faculteit TNW, Opleiding Chemische Technologie. Alle rechten voorbehouden. Niets uit deze uitgave mag worden vermenigvuldigd, opgeslagen in een geautomatiseerd gegevensbestand, of openbaar gemaakt, in enige vorm of op enige wijze, hetzij elektronisch, mechanisch, door fotokopieën, opnamen, of op enige andere manier, zonder voorafgaande schriftelijke toestemming van de uitgever. bestand: KHB CT 1 februari 2006.doc 1

2 Kwaliteitszorg in het kort Kwaliteitszorg heeft ten doel de kwaliteit te bewaken en waar nodig of mogelijk te verbeteren. Kwaliteit heeft te maken met de doelen (wat we willen bereiken) en de mate waarin we slagen om die doelen te bereiken (effectiviteit). Daarnaast is productiviteit een aspect van kwaliteit. Om de kwaliteit in beeld te krijgen worden verschillende evaluatie-instrumenten ingezet: 1. WO-monitor Afgestudeerden in hun eerste of tweede baan geven aan of ze voldoende zijn geëquipeerd voor een academische technische functie in het CT-domein. Als afgestudeerden geen werk krijgen of niet op niveau, dan is er iets mis met de aansluiting opleiding-werkveld. Dat hoeft niet aan inhoud of niveau van de opleiding te liggen, maar dit signaal is wel reden om dat serieus te bekijken. Als afgestudeerden wel werk vinden op het juiste niveau binnen het CT-domein, dan is het interessant om te weten of ze terugkijkend - vinden dat de opleiding ze de juiste kennis en vaardigheden heeft bijgebracht. Vaak geeft de monitor tegelijkertijd informatie over de juistheid van de doelstellingen en het al dan niet bereiken ervan. 2. Exit-enquête Degenen die op het punt staan van afstuderen (N.B. dit geldt voor bachelor èn master) wordt gevraagd om terug te kijken op de opleiding. Was achteraf het basisprogramma een goede oriëntatie op en voorbereiding op het afstudeerprogramma? Was het afstudeerprogramma te doen? enz. De enquête geeft zicht op de consistentie en coherentie van het totale programma en op de kwaliteit van de uitvoering van het afstudeerprogramma. 3. Evaluatie van bacheloropdracht, stage en masteropdracht Elke student en begeleidende docent krijgt een vragenlijst over deze belangrijke studieonderdelen. 4. Vak- en kwartielevaluatie (bachelor) Dit wordt verzorgd door de OKÉ-CT, de evaluatiecommissie voor de bachelor (zie 1.1). In ieder kwartiel worden (alleen als het nodig is) vakken geëvalueerd en wordt gekeken naar o.a. aansluiting, uitvoering, afstemming, samenhang, verroostering, informatievoorziening en studeerbaarheid. Dat gebeurt door vakevaluaties (schriftelijk/electronisch), evaluatiegesprekken met studenten en docenten en studievoortgangsanalyse (slaagpercentages per vak, behaalde studielast e.d.). De verzamelde gegevens en meningen worden in samenhang gerapporteerd in beknopte kwartielrapportages. 5. Trackevaluatie (master) In principe wordt naar dezelfde onderwerpen gekeken als in de bachelor. De uitvoering is echter aangepast aan de specifieke situatie in de master. 6. Jaarevaluatie Jaarlijks wordt gerapporteerd over de jaarcijfers en de ontwikkeling daarin: instroom, P-, B- en M-rendement, studie-uitval e.d. Evaluatierapporten bevatten naast de verzamelde gegevens en meningen ook analyses en voorstellen voor maatregelen. Evaluatierapporten worden besproken in de opleidingscommissie CT. Er is steeds terugrapportage naar betrokken studenten en docenten. bestand: KHB CT 1 februari 2006.doc 2

3 Inhoud Voorwoord... 1 Samenvatting Beleid Interne Kwaliteitszorg... 3 Uitgangspunten voor de onderwijsevaluatie... 3 Ontwikkeling van meetbare doelen... 3 Structuur van de onderwijsevaluatie Bachelor en Master... 3 Onderwijsevaluatiematrix Bachelor en Master Vak- en kwartielevaluatie (Bachelor)... 7 Meetbare doelen vak- en kwartielevaluatie... 8 Procedure vak- en kwartielevaluatie Vak- en trackevaluatie (Master) Meetbare doelen track-evaluatie Procedure trackevaluatie Evaluatie B- en M-opdracht, stage, exit-enquêtes en WO-monitor Meetbare doelen B- en M-opdracht, exit-enquêtes, stage en WO-monitor Procedure evaluatie B- en M-opdracht, stage, exit-enquêtes en WO-monitor Jaarevaluatie Meetbare doelen Jaarevaluatie Procedure jaarevaluatie Curriculumevaluatie Curriculumevaluatie Meetbare doelen Curriculumevaluatie Procedure curriculumevaluatie Ad-hoc evaluaties en acties Procedure ad-hoc evaluaties en acties Betrekken van belanghebbenden Werkwijze betrekken belanghebbenden Bijlage 1 Structuur, aanpassingen en evaluatie Bijlage 2 Lijst van afkortingen Bijlage 3 Tabel van wijzigingen ten opzichte van vorige versies Bijlage 4 Kalender kwaliteitszorg Bijlage 5 Mal vakevaluatie Bijlage 6 Format rapportage resultaten vakkenevaluatie Bijlage 7 Checklist panelgesprek kwartiel Bijlage 8 Agenda voor-overleg met docenten Bijlage 9 Agenda na-overleg met docenten Bijlage 10 Format rapport kwartielevaluatie Bijlage 11 Vragenformulier Evaluatie B-opdracht Student en Docent Bijlage 12 Vragenformulier Exit-enquête Bachelor Bijlage 13 Vragenformulier Evaluatie M-opdracht Student Bijlage 14 Vragenformulier Evaluatie M-opdracht Docent Bijlage 15 Vragenformulier Evaluatie Stage Student Bijlage 16 Vragenformulier Evaluatie Stage Bedrijfsmentor Bijlage 17 Vragenformulier Evaluatie Stage Docent Bijlage 18 Vragenformulier Exit-enquête Master Bijlage 19 Rapportage Studiebegeleiding Bijlage 20 Format Rapport Jaarevaluatie bestand: KHB CT 1 februari 2006.doc 3

4 Voorwoord Voorwoord Doelstelling De opleiding CT heeft besloten tot het vastleggen van het kwaliteitszorgsysteem in een kwaliteitshandboek. De doelstelling van een kwaliteitshandboek (KHB) is drieledig: a. Intern gaat het om het beheren en informeren van de belangrijkste afspraken die de kwaliteit van de opleiding borgen en verbeteren. b. Extern, dat wil zeggen richting Visiterende en Beoordelende Instantie (VBI) en NVAO (Nederlands-Vlaamse Accreditatie Organisatie), vormt het KHB een essentiële bron van informatie over het kwaliteitszorgsysteem van de opleiding. (de universiteiten hebben er gekozen voor de uit de Vereniging van Nederlandse Universiteiten (VSNU) voortgekomen Quality Assurance Netherlands Universities (QANU) - als VBI. c. Ten derde wordt het KHB gebruikt als bron van informatie voor de verplichte zelfevaluatie die onderdeel uitmaakt van het nieuwe accreditatiestelsel. Hiermee wordt zorggedragen voor invulling van de wettelijke eisen. Inhoud In dit is de praktijk bij de bachelor- en masteropleiding CT op het gebied van Interne Kwaliteitszorg vastgelegd. Mogelijke toevoegingen in volgende versies van het KHB zijn hoofdstukken over Toetsing en Beoordeling, Studiebegeleiding en hoofdstukken met facultaire afspraken. Historie Eind 2004 was het plan (voor CT in samenwerking met BMT) om voor veel meer onderwerpen vast te leggen hoe de gang van zaken is, welke procedures er worden gehanteerd, wie verantwoordelijk is e.d. Bijvoorbeeld personeelsbeleid en studiebegeleiding. Deels onderwerpen die beter op facultair niveau ingevuld kunnen worden met mogelijk een opleidingsspecifieke toevoeging. Deels opleidingsspecifieke onderwerpen. Die ambitie moest worden ingeperkt vanwege de beperkt beschikbare menskracht binnen BMT en TNW - in relatie tot de grote omvang van de werkzaamheden die de naderende accreditaties (in eerste instantie van BMT en CT en inmiddels ook van TN en AT) met zich mee brengen. Hoe is het KHB tot stand gekomen? Tot oktober 2005 is gewerkt aan het BMT-handboek 1. Vervolgens is een concept KHB voor CT opgesteld en voorgelegd aan opleidingscoördinator en -directeur en de opleidingscommissie. Na verwerking van de commentaren is de eerste versie vastgesteld door de opleidingsdirecteur. Geldigheid De meest recente, geldige versie van het KHB is de versie die op intranet staat. Een papieren versie daarvan is beschikbaar bij Bureau Onderwijszaken (BOZ). 1 Door opleidingsdirecteur en bachelorcoördinator BMT, actief ondersteund door de Dienst Informatietechnologie, Bibliotheek en Educatie (ITBE-adviseur kwaliteitszorg) en de kwaliteitscoördinator TNW / opleidingsonderwijskundige CT. Een concept is voorgelegd aan docenten, opleidingscommissie en bachelor-coördinatieteam en daarna vastgesteld door de opleidingsdirecteur BMT. bestand: KHB CT 1 februari 2006.doc 1

5 Samenvatting Samenvatting Kern van dit KHB is de beschrijving van de Interne Kwaliteitszorg in hoofdstuk 1. Een overzicht van het totale systeem van interne kwaliteitszorg geeft paragraaf 1.0 Beleid : ontwikkeling van de kwaliteitszorg (bv. omgaan met meetbare doelen en streefwaarden) uitgangspunten structuur van het systeem van kwaliteitszorg (waarin schematisch is weergegeven hoe de verschillende objecten van evaluatie met elkaar samenhangen) de onderwijsevaluatiematrix (met de relatie tussen de diverse evaluaties en de onderwerpen waarop een opleiding bij een accreditatie wordt beoordeeld) De verschillende onderdelen van de interne kwaliteitszorg zijn uitgewerkt in de paragrafen 1.1 t/m 1.5: van vak-/kwartielevaluatie en trackevaluatie t/m curriculumevaluatie. Verder is er een kalender (bijlage 4) en een beschrijving van het omgaan met ad-hoc signalen dat er iets mis is in het onderwijs van de opleiding (1.6). Paragraaf 1.7 geeft een overzicht van de manier waarop studenten, docenten, alumni en werkveld een rol spelen in en betrokken zijn bij de kwaliteitszorg. De hoofdstukken en paragrafen hebben zoveel mogelijk een vergelijkbare opzet: toelichting meetbare doelen procedure, in de vorm van een Plan Do Check Act (PDCA)-overzicht Voorbeeld Tabel 1.5 Kernpunten PDCA voor vak- / kwartielevaluatie Bachelor Plan (planning) Do (uitvoering) Check (controleren/evalueren) Act (uitvoeren verbetering en/of borgen kwaliteit).de OKC gaat na of de meetbare doelen voldoen...het rapport over de kwartielevaluatie wordt besproken in de OLC. de OKC past zonodig de checklists voor de panelgesprekken en de agenda s voor het docenten na-overleg aan (zie bijlagen).de OKC stelt een rapport (format in bijlagen) op over kwartielevaluaties op basis van Commentaar & tips Plan Do Check Act op dit moment zijn er vele bijlagen met gedetailleerde achtergrondinformatie, hulpmiddelen e.d. (bv. vragenformulieren, formats voor evaluatierapporten, checklists en agenda s voor gesprekken); er wordt sterk overwogen deze informatie weg te laten uit volgende versies van het kwaliteitshandboek en alleen beschikbaar te hebben (op Teletop bv.) voor direct betrokkenen. Bijlage 1 gaat over de structuur, aanpassing en evaluatie van dit KHB. In bijlage 2 is een lijst van afkortingen opgenomen. Bij toekomstige versies zal in bijlage 3 een overzicht worden opgenomen van belangrijke wijzigingen ten opzichte van vorige versies. bestand: KHB CT 1 februari 2006.doc 2

6 Interne Kwaliteitszorg - Beleid 1.0. Beleid Interne Kwaliteitszorg De bacheloropleiding CT is in 2001 gestart, de masteropleiding CHE in 2002 voor internationale masters en in 2004 voor eigen bachelor-afgestudeerden en anderen. Beiden zijn voortgekomen uit de ongedeelde vijfjarige opleiding chemische technologie. CT kent een lange traditie op het gebied van interne kwaliteitszorg 2. De nadruk lag op het verplichte deel van de opleiding. In is het evaluatiebeleid aangepast aan de bachelor-master structuur, de ontwikkelingen binnen TNW en de veranderende externe eisen. Uitgangspunten voor de onderwijsevaluatie a. De onderwijsevaluatie moet voldoen aan de eisen van NVAO / QANU. Dit houdt in dat: meetbare doelen worden geformuleerd waarop het onderwijs wordt geëvalueerd; de onderwijsevaluatie structureel plaatsvindt; voor te verbeteren aspecten van het onderwijs daadwerkelijk verbeteracties worden uitgevoerd, die worden beoordeeld op effectiviteit; er dus sprake is van zogenaamde gesloten Deming of PDCA-cycli (PDCA = Plan, Do, Check, Act) studenten en docenten betrokken zijn bij onderwijsevaluaties; alumni en het afnemend beroepenveld betrokken zijn bij curriculum-evaluaties de opleidingscommissie (OLC) betrokken is bij de onderwijsevaluaties. b. De evaluatie-inspanningen dienen in balans te zijn met de evaluatiebereidheid in de organisatie (docenten en studenten); dit is vooral van belang om evaluatiemoeheid te voorkómen of te bestrijden. c. Er moet kunnen worden ingespeeld op plotselinge signalen dat er iets verbeterd moet worden. Er moeten daarom instrumenten zijn om dergelijke signalen op te vangen en voor ad-hoc-evaluaties en (eventuele) acties moet een duidelijke procedure zijn. Ontwikkeling van meetbare doelen Voor de ongedeelde opleiding (de vijfjarige opleiding CT vóór de bachelor-master structuur) zijn veel historische gegevens beschikbaar. Die zijn gebruikt bij het bepalen van realistische streefwaarden voor de doelen. Desondanks is het denkbaar dat de nu vastgestelde streefwaarden soms te voorzichtig en soms te ambitieus zijn gekozen. Het evalueren en eventueel bijstellen van streefwaarden en doelen maakt daarom onderdeel uit van het systeem van interne kwaliteitszorg. Structuur van de onderwijsevaluatie Bachelor en Master De structuur van de onderwijsevaluatie in de bachelor is weergegeven in de figuren 1.1 en 1.2. Die van de onderwijsevaluatie in de master in de figuren 1.3 en H.J.van den Hengel, H.Kramers-Pals, Interne kwaliteitszorg in de Faculteit Chemische Technologie, CT88/131/112, Enschede, 1988; Zelfstudie voor de onderwijsvisitatie 1993, Faculteit Chemische Technologie, CT93/035B, Enschede 1993; Zelfstudie voor de Onderwijsvisitatie 1999, Faculteit Chemische Technologie, /CT02, Enschede, bestand: KHB CT 1 februari 2006.doc 3

7 Interne Kwaliteitszorg - Beleid Jaarevaluatie Vak- / kwartielevaluatie Bachelor Jaarevaluatie Bachelor evaluatie B-opdracht / exit-enquête bachelor UT Instroomonderzoek Jaarevaluatie 200x- 200x+1 Jaarevaluatie Werkveld Curriculumevaluatie UT Studenttevredenheid (1x per 2 jaar) UT uitstroommonitor (1x per accreditatie) Figuur 1.1 Figuur 1.2 Track-evaluatie Jaarevaluatie evaluatie M-opdracht / stage, exit-enquête WO-monitor UT Instroomonderzoek (1x per 2 jaar) Master Jaarevaluatie 200x- 200x+1 Jaarevaluatie Jaarevaluatie Werkveld Master Curriculumevaluatie UT Studenttevredenheid (1x per 2 jaar) UT uitstroommonitor (1x per accreditatie) Figuur 1.3 Figuur 1.4 bestand: KHB CT 1 februari 2006.doc 4

8 Interne Kwaliteitszorg - Beleid Bij de figuren 1.1 t/m 1.4 worden de volgende kanttekeningen geplaatst: De kwartielevaluaties voor B2 en B3 worden met ingang van het studiejaar voor het eerst op de beschreven manier uitgevoerd. Kwartielevaluaties in de propedeuse (B1) lopen op de beschreven manier sinds Vakevaluaties (in de eerste 2½ jaar van het vijfjarige programma en in het bachelorprogramma) en een beperktere vorm van kwartielevaluatie (vóór trimesterevaluatie) worden sinds 1982 uitgevoerd. De UT-instroommonitor Bachelor is najaar 2004 ontwikkeld en afgenomen. Deze monitor zal jaarlijks worden afgenomen. Op dit moment is nog niet bekend wanneer de UTtevredenheidsmonitor Bachelor wordt ontwikkeld en afgenomen. Opzet is om dit eens per twee jaar in het najaar te doen. Er is nog niet bekend wanneer de uitstroommonitor wordt ontwikkeld en afgenomen. De laatste jaren zijn geen jaarevaluaties uitgevoerd. In zal weer een reguliere jaarevaluatie worden uitgevoerd. De evaluatie van B-opdracht, stage, M-opdracht en de exit-enquêtes bachelor en master starten per 1 februari De - tweejaarlijkse - UT-instroommonitor Master wordt najaar 2005 voor het eerst afgenomen. Voorjaar 2005 is de - tweejaarlijkse - UT-tevredenheidsmonitor Master afgenomen. Er is nog niet bekend wanneer de uitstroommonitor wordt afgenomen. Sinds 1999 doet CT mee aan de WO-monitor, een jaarlijks landelijk onderzoek onder degenen die tussen 1 en 2 jaar geleden zijn afgestudeerd. De trackevaluatie wordt uitgevoerd met ingang van het studiejaar Onderwijsevaluatiematrix Bachelor en Master In de tabellen 1.1 en 1.2 is een overzicht gegeven van de onderwerpen waar NVAO/QANU op beoordelen en is aangegeven welke facetten in welk object van evaluatie aan bod komt. In een volgende versie van dit handboek zal in bijlage 4 een jaarkalender van de activiteiten in het kader van de interne kwaliteitszorg te vinden zijn. De diverse vormen en objecten van evaluatie en de daarbij gebruikte procedures worden verder uitgewerkt in de hoofdstukken 1.1 t/m 1.7: 1.1 Vak-/kwartielevaluatie (bachelor) 1.2 Trackevaluatie (master) 1.3 Evaluatie B-opdracht, stage, M-opdracht, exit-enquêtes en WO-monitor 1.4 Jaarevaluatie 1.5 Curriculumevaluatie 1.6 Ad-hoc evaluaties en acties 1.7 Betrokkenheid belanghebbenden bestand: KHB CT 1 februari 2006.doc 5

9 Interne Kwaliteitszorg - Beleid Tabel 1.1 Relatie tussen NVAO/QANU-facetten en evaluatie in de Bachelor QANU Object Vak-/ exitenquête werkveld culum Alumni / Curri- B-opdracht Jaar Facet Functies Kwartiel F1-3 Arbeidsmarkt + + F 4-6, F7 Studeerbaarheid F8 Aansluiting instroom Instroom F11 Toetsing en beoordeling F13 F14 Kwantiteit en kwaliteit personeel F15 Materiële voorzieningen F16 Studiebegeleiding F20 Gerealiseerd niveau F21 Onderwijsrendement Frequentie jaarlijks continu continu jaarlijks 3-jaarlijks 3-jaarlijks start in sept 2005 jan e keer 2008/2009 QANU Facet Tabel 1.2 Functies Relatie tussen NVAO/QANU-facetten en evaluaties in de Master Object Vak / Track stage M- opdracht Jaar Alumni / werkveld F1-3 Arbeidsmarkt + + F 4-6, 10 Inhoud programma Afstemming vormgevinginhoud Inhoud programma Afstemming vormgevinginhoud exitenquête Curriculum F7 Studeerbaarheid F8 Aansluiting instroom Instroom F11 Toetsing en beoordeling F13 F14 Kwantiteit en kwaliteit personeel F15 Materiële voorzieningen F16 Studiebegeleiding F20 Gerealiseerd niveau F21 Onderwijsrendement Frequentie jaarlijks continu continu continu jaarlijks 3- jaarlijks 3- jaarlijks start sept 2005 jan e keer 2008/2009 bestand: KHB CT 1 februari 2006.doc 6

10 Interne Kwaliteitszorg Vak- en kwartielevaluatie (Bachelor) 1.1. Vak- en kwartielevaluatie (Bachelor) Met ingang van is de OKC verantwoordelijk voor planning en uitvoering van de vaken kwartielevaluatie in de bacheloropleiding. De werkwijze van de OKC is dezelfde als van de werkgroep Evaluatie Propedeuse Onderwijs (EPO) die CT samen met TN sinds kende. Verschil is dat de OKC zich ook met het tweede en derde jaar bezighoudt. De OKC verdeelt het werk voor de propedeuse met de COKE (de OKC van TN). De coördinator kwaliteitszorg (CKZ) 3 is lid van de OKC. De commissie bestaat verder uit docenten (minimaal 2, bij voorkeur 3 à 4) en studenten (minimaal 3, bij voorkeur 4 à 5), waarbij gestreefd wordt naar zoveel mogelijk diversiteit 4. De CKZ zorgt dat er bij het begin van een nieuw studiejaar een OKC is gevormd 5 door tijdig een voorstel voor de samenstelling te doen aan de opleidingsdirecteur. De opleidingsdirecteur benoemt de commissie en stelt vast wie de voorzitter is van de commissie. Streven is om zoveel mogelijk te laten doen door de student-leden van de OKC. Zij krijgen een assistentschap voor hun bijdrage. Voor uitvoering van vakevaluaties is een studentassistent beschikbaar 6. Plaats in het geheel Vak- / kwartielevaluatie evaluatie B-opdracht / exit-enquête UT Instroomonderzoek Bachelor Jaarevaluatie 200x- 200x+1 UT Studenttevredenheid (1x per 2 jaar) 3 Dit is de algemene naam voor een belangrijke functie binnen de opleiding. Deze functie kan bv. worden vervuld door de opleidingscoördinator of de opleidingsonderwijskundige. Bij CT wordt deze functie op dit moment vervuld door de opleidingsonderwijskundige CT / CKZ-TNW. 4 Docenten: betrokken bij vakken uit verschillende jaren, verschillende type vakken. Studenten: uit verschillende studiejaren, eventueel masterstudenten, maar geen eerstejaars. 5 De CKZ moet voor het einde van het studiejaar actie ondernemen om bij het begin van het nieuwe studiejaar een compleet bezette en door de OLD benoemde OKC te hebben. De OKC kan dan direct van start met de werkzaamheden voor het nieuwe studiejaar. Streven is dat de samenstelling van de OKC niet jaarlijks volledig wijzigt 6 Studentassistent wordt getraind in werken met de internet-evaluatietool Quaestio door ITBE en door mede-studentassistenten. Eén studentassistent kan in principe voor meer dan één opleiding werken. Er is een TNW-werkplek voor Quaestio beschikbaar. bestand: KHB CT 1 februari 2006.doc 7

11 Interne Kwaliteitszorg Vak- en kwartielevaluatie (Bachelor) Meetbare doelen vak- en kwartielevaluatie Tabel 1.3 Meetbare doelen bij de vakevaluatie Parameter Doel Streefwaarde Inhoud, vorm, samenhang Studeer-baarheid Aansluiting Toetsing en beoordeling Docenten Materiële voorzieningen Rendement De studenten zijn tevreden over de inhoud, het sluit goed aan bij andere vakken, de doelstellingen zijn duidelijk, de onderwijsvormen voldoen en zijn onderling goed afgestemd Geplande en werkelijke studielast komen overeen; er is tijdens onderwijsperiode voldoende tijd beschikbaar; vak veroorzaakt geen piekbelastingen Vak sluit aan op voorkennis en vaardigheden Beoordelingscriteria zijn bekend bij de student; toetsing sluit aan bij gegeven onderwijs; organisatie toetsing was goed De kwaliteit van de begeleiding is goed; er is voldoende begeleiding De benodigde materiële voorzieningen zijn beschikbaar en toereikend Er zijn geen struikelvakken 7 ; studenten doen mee aan alle vakken Gem. oordeel van studenten bij enquête is positief (#) Gem. door studenten opgegeven tijdbesteding is 110% en 70% van de geplande studielast. Vak veroorzaakt geen piekbelastingen in totale tijdbesteding van 45 uur/week Gem. oordeel van studenten bij enquête is positief (#) Gem. oordeel van student bij enquête is positief (#) Gem. oordeel van studenten bij enquête is positief (#) Gem. oordeel van studenten bij enquête is positief (#) Slaagpercentage theorievakken 60% (B1), 70% (B2, B3); practica, projecten e.d. 80% (B1), 90% (B2, B3); deelnamepercentage 90% (B1), 80% (B2), 70% (B3) Tabel 1.4 Meetbare doelen bij de kwartielevaluatie Parameter Doel Streefwaarde Programma De studenten zijn tevreden over (inhoud, vorm, samenhang van) het programma Oordeel van studenten bij panelgesprek is positief Programma De docenten zijn tevreden over (inhoud, Oordeel van docenten bij na-overleg is positief vorm, samenhang van) het programma Studeerbaarheid Totale studielast in kwartiel is studeerbaar Programma veroorzaakt geen piekbelastingen in totale tijdbesteding van 45 u/wk; gem. bij vakevaluaties opgegeven tijdbesteding is 110% en 70% van geplande studielast Aansluiting Kwartiel sluit aan op voorkennis en opgedane vaardigheden van studenten Oordeel van studenten bij panelgesprek is positief Studiebegeleiding De studiebegeleiding is goed Oordeel van studenten bij panelgesprek is positief Studie-informatie Informatievoorziening (roosters, programmawijzigingen, hulp bij keuzeproces e.d.) over studie is goed Oordeel van studenten bij panelgesprek is positief Studiesnelheid 1 e jaar Studiesnelheid 2 e /3 e jaar Studenten die studie na 1 e jaar gaan voortzetten halen minimaal 75% van de studiepunten; overigen halen per definitie veel minder Deel van de studenten studeert nominaal, ander deel niet; er zijn geen struikelvakken 7 Min. 45 EC/jr, 11 EC / kwartiel voor studenten die doorgaan ná 1 e jaar. Min. 10 EC/kwartiel voor gehele 1 e jaarspopulatie Min. 10 EC per kwartiel (B2), min. 8,5 EC per kwartiel (B3) (#) Dwz. hoger dan 3,0 op vijfpuntsschalen van bv. zeer slecht (0) zeer goed (5), veel te weinig (0) ruim voldoende (5), veel te weinig (0) ruim voldoende (5), veel te laat beschikbaar (0) tijdig beschikbaar (5). 7 Met struikelvakken wordt bedoeld vakken met (veel te) lage slaagpercentages, terwijl daarnaast veel studenten na een 2 e of 3 e poging nog steeds niet zijn geslaagd voor dat vak. bestand: KHB CT 1 februari 2006.doc 8

12 Interne Kwaliteitszorg Vak- en kwartielevaluatie (Bachelor) Procedure vak- en kwartielevaluatie Uitgangspunt is dat ieder vak al minstens eenmaal is geëvalueerd en dat gegevens uit de laatste stap (Act) beschikbaar zijn voor de eerste stap (Plan). Tabel 1.5 Kernpunten PDCA voor Vak- en kwartielevaluatie Plan Do Check Act CKZ controleert of de verbeteracties zijn uitgevoerd en neemt zonodig contact op met docenten (voordat docenten bezig gaan met opnieuw voorbereiden / opzetten van vak). OKC gaat na of de meetbare doelen voldoen. Zonodig worden ze aangepast. OKC plant de vaken kwartielevaluatie. (N.B. Niet elk vak wordt jaarlijks geëvalueerd: alleen als vorige evaluatie negatief was, bij grote wijzigingenof op verzoek van docent. Vakken worden echter min. eens per 3 jaar geëvalueerd). Procedure gaat uit van gebruik Quaestio voor vakevaluaties. Alternatieven zijn mogelijk. Begin studiejaar OKC stelt per jaar (B1,B2,B3) onderwijsevaluatiegroep van studenten samen. CKZ stelt Quaestio-studentassistent aan in overleg met CKZ-TNW. OKC verdeelt evaluatie B1 met OKC-TN. Vak OKC informeert BOZ wèlke vakken geëvalueerd moeten worden. M.b.v. VIST selecteert BOZ standaardvragen voor het vragenformulier (zie bijlagen) Concept formulieren worden door BOZ voorgelegd aan de docent. Deze kan vragen toe laten voegen. BOZ past zonodig formulieren aan en geeft dit door aan de studentassistent (SA). SA maakt Quaestio-formulieren. SA zet formulieren op Internet. BOZ stuurt de link door naar alle studenten die zich in TeleTOP voor dit vak hebben ingeschreven. SA controleert de respons. Zonodig verstuurt BOZ een herinneringsmail. Na 2-3 weken wordt het Quaestio-formulier gesloten. Antwoorden worden door SA verwerkt volgens een standaard format (zie bijlagen) en doorgegeven aan de OKC. Kwartiel OKC past zonodig de checklists voor de panelgesprekken en de agenda s voor het docenten-overleg aan (zie bijlagen). OKC houdt panelgesprekken met de onderwijsevaluatiegroepen. OKC houdt docenten voor- en naoverleg. BOZ levert OKC kwantitatieve gegevens Verslag panelgesprekken scheiden in evaluatiedeel (terugkijken op het vorige kwartiel) en signaleringsdeel (hoe gaat het met het lopende onderwijs, zie 1.6). Verslagen z.s.m. naar CKZ. BOZ stuurt resultaten (slaagpercentage e.d.), evt. samenvatting vakevaluatie naar docent met vraag om reactie, aanvulling, voorstellen voor maatregelen ter verbetering. BOZ stuurt resultaten vakevaluaties en reacties docenten aan OKC. De OKC stelt kwartielrapport op, gebaseerd op vakevaluaties + reacties van docenten, docentenoverleg, panelgesprek(ken) en kwantitatieve gegevens (format in bijlagen). Kwartielevaluatierapport wordt besproken in OLC. OLC adviseert schriftelijk aan OLD. OLD informeert OKC, OCO en OLC over zijn besluiten. In rapport wordt verantwoord of en hoe meetbare doelen zijn aangepast. In rapport wordt vergeleken met maatregelen die genomen zijn n.a.v. eerdere kwartielevaluaties. CKZ maakt onder studenten en docenten uitkomsten van de evaluatie(s) + de eventuele voorgestelde verbeteringen bekend. CKZ bewaakt de uitvoering van de voorgestelde verbeteringen. Commentaar & tips Plan Do Check Act In 3 e jaar volgen veel studenten niet meer het nominale programma. In kwartielen waarin studenten verschillende programma s volgen kan de evaluatie misschien beperkter. Overweeg bv. of in B3 panelgesprekken en docentenoverleg nog wel zinvol zijn. In 3 e /4 e week van kwartiel panelgesprek met elke onderwijsevaluatiegroep o.l.v. 2 OKCstudenten. (4 e kwartiel: ook vlak voor zomer) Methode vakevaluatie moet genoeg respons geven Heel belangrijk dat er voldoende (ca.10) studenten in de onderwijsevaluatiegroep zitten en dat de groep zo representatief mogelijk is samengesteld. Als een vak al eerder is geëvalueerd, is het beter om de vragen vooral te richten op de punten die minder goed gingen en vragen die verband houden met veranderingen bij het vak. Vooroverleg met docenten tijdig organiseren (2-4 weken voor het begin van het kwartiel); bij 1e kwartiel is dit vaak niet haalbaar. Na-overleg kan vaak ook per afgehandeld worden. bestand: KHB CT 1 februari 2006.doc 9

13 Interne Kwaliteitszorg Trackevaluatie (Master) 1.2. Vak- en trackevaluatie (Master) De verantwoordelijkheid voor de uitvoering van de trackevaluatie ligt bij de coördinator kwaliteitszorg (CKZ) 8. Naast stage en M-opdracht zijn per track een beperkt aantal vakken verplicht. De student heeft verder een zekere keuzevrijheid. Kenmerk van de masteropleiding is dus dat er in principe geen grotere groepen studenten zijn die in eenzelfde periode eenzelfde vakkenpakket volgt. Bij de trackevaluatie wordt deels op vakniveau deels op trackniveau geëvalueerd. Per semester krijgen de studenten een vragenformulier. Ze kunnen daarop zelf aangeven welke vakken ze hebben gevolgd en per vak diverse vragen beantwoorden. Daarnaast bevat het vragenformulier vragen op trackniveau: samenhang, studeerbaarheid, aansluiting bij voorkennis / -opleiding e.d. De coördinator kwaliteitszorg wordt geïnformeerd door de onderwijscommissaris van de studievereniging Alembic over eventuele opmerkingen die in de ASOCT-vergadering 9 over de master of mastervakken zijn gemaakt. Uitkomsten op vakniveau worden teruggekoppeld naar de desbetreffende docent, de uitkomsten op trackniveau worden teruggekoppeld naar de afstudeerhoogleraren. Plaats in het geheel Vak- / trackevaluatie evaluatie M-opdracht / stage / exit-enquête WO monitor UT Instroomonderzoek Master Jaarevaluatie 200x- 200x+1 UT Studenttevredenheid (1x per 2 jaar) 8 Dit is de algemene naam voor een belangrijke functie binnen de opleiding. Deze functie kan bv. worden vervuld door de opleidingscoördinator of de opleidingsonderwijskundige. Bij CT wordt deze functie vervuld door de opleidingsonderwijskundige CT / CKZ-TNW. 9 Overleg van studenten over alles wat met onderwijs te maken heeft in het ASOCT (Algemeen Studentenoverleg CT). Aanwezig zijn leden van onderwijsevaluatiegroepen, opleidingscommissie, faculteitsraad e.d. en andere belangstellende studenten. Het ASOCT wordt georganiseerd door de onderwijscommissaris van de studievereniging Alembic bestand: KHB CT 1 februari 2006.doc 10

14 Interne Kwaliteitszorg Trackevaluatie (Master) Meetbare doelen track-evaluatie Tabel 1.6 Meetbare doelen bij de track-evaluatie Parameter Doel Streefwaarde (Vak) Inhoud, vorm, samenhang De studenten zijn tevreden over de inhoud, het sluit goed aan bij andere vakken, de doelstellingen zijn duidelijk, de onderwijsvormen voldoen en zijn onderling goed afgestemd Gem. oordeel van studenten bij enquête is positief (#) (Vak) Studeerbaarheid Geplande en werkelijke studielast komen overeen; er is tijdens onderwijsperiode voldoende tijd beschikbaar; vak veroorzaakt geen piekbelastingen Gem. door studenten opgegeven tijdbesteding is 110% en 70% van de geplande studielast. Vak veroorzaakt geen piekbelastingen in totale tijdbesteding van 45 uur/week (Vak) Aansluiting Vak sluit aan op voorkennis en vaardigheden Gem. oordeel van studenten bij (Vak) Toetsing en beoordeling (Vak) Docenten Beoordelingscriteria zijn bekend bij de student; toetsing sluit aan bij gegeven onderwijs; organisatie van de toetsing was goed De kwaliteit van de begeleiding is goed; er is voldoende begeleiding De benodigde materiële voorzieningen zijn enquête is positief (#) Gem. oordeel van student bij enquête is positief (#) Gem. oordeel van studenten bij enquête is positief (#) Gem. oordeel van studenten bij enquête is positief (#) (Vak) Materiële voorzieningen beschikbaar en toereikend (Vak) Rendement Het is geen struikelvak 10 Slaagpercentage theorievakken 80%; slaagpercentage practica, projecten e.d. 90%; (Track) Inhoud, vorm, samenhang (Track) Studeerbaarheid (Track) Aansluiting (Track) Studiebegeleiding (Track) Studie-informatie (Track) Studiesnelheid De studenten zijn tevreden over het programma Totale studielast van track is studeerbaar Kwartiel sluit aan op voorkennis en opgedane vaardigheden van studenten De studiebegeleiding is goed De informatievoorziening (roosters, programmawijzigingen, hulp bij keuzeproces e.d.) over de studie is goed Deel van de studenten studeert nominaal, ander deel niet; er zijn geen struikelvakken 10 Gem. oordeel van studenten bij enquête is positief (#) Programma veroorzaakt geen piekbelastingen in totale tijdbesteding van 45 uur/week; Gem. door studenten bij vakevaluaties opgegeven tijdbesteding is 110% en 70% van de geplande studielast Gem. oordeel van studenten bij enquête is positief (#) Gem. oordeel van studenten bij enquête is positief (#) Gem. oordeel van studenten bij enquête is positief (#) Min. 12 EC per kwartiel (24 EC per semester, 48 EC per jaar) (#) Dwz. hoger dan 3,0 op vijfpuntsschalen van bv. zeer slecht (0) zeer goed (5), veel te weinig (0) ruim voldoende (5), veel te weinig (0) ruim voldoende (5), veel te laat beschikbaar (0) tijdig beschikbaar (5). 10 Met struikelvakken wordt bedoeld vakken met (veel te) lage slaagpercentages, terwijl daarnaast veel studenten na een 2 e of 3 e poging nog steeds niet zijn geslaagd voor dat vak. bestand: KHB CT 1 februari 2006.doc 11

15 Interne Kwaliteitszorg Trackevaluatie (Master) Procedure trackevaluatie Tabel 1.7 Kernpunten PDCA voor trackevaluatie Plan (planning) Do (uitvoering) Check (controleren / evalueren) Act (uitvoeren verbetering en/of borgen kwaliteit) De CKZ gaat na of de meetbare doelen voldoen. Zonodig worden ze aangepast of aangevuld. De CKZ plant de trackevaluatie. De CKZ controleert of verbeteracties zijn uitgevoerd en neemt zonodig contact op met de betreffende docenten. Dit gebeurt voordat de docenten bezig gaan met het opnieuw voorbereiden / opzetten van het betreffende vak. Voor het trackevaluatieformulier wordt voor standaard-vragen per vak zoveel mogelijk gebruik gemaakt van een mal voor vakkenevaluatie (zie bijlage). Onderwijscommissaris Alembic stuurt notulen van ASOCT-vergaderingen aan de CKZ. De CKZ verzamelt de uitkomsten van de trackevaluaties. BOZ levert CKZ kwantitatieve gegevens. De CKZ stuurt de resultaten van de trackevaluatie op vakniveau samen met de kwantitatieve resultaten op vakniveau (slaagpercentage e.d.) ter informatie door aan de betrokken docent. De docent wordt gevraagd om reactie, aanvulling van gegevens en voorstellen voor maatregelen ter verbetering. De CKZ stuurt de resultaten van de trackevaluatie op trackniveau en een overzicht van de kwantitatieve gegevens aan de OCO en de OLD. De OLD (of de OCO) bespreekt de uitkomsten van de trackevaluaties met de betrokken afstudeerhoogleraren. De CKZ stelt een rapport op over de trackevaluaties op basis van de vakevaluaties, de reacties van docenten daarop, (evt. panelgesprekken en docentenoverleg), besprekingen met afstudeerhoogleraren en kwantitatieve gegevens. In de rapportage wordt indien van toepassing ook vergeleken met maatregelen die genomen zijn n.a.v. eerdere trackevaluaties. De rapportage over de trackevaluaties wordt door de CKZ opgenomen in de jaarevaluatie, de CKZ bewaakt de uitvoering van de voorgestelde verbeteringen. Het rapport over de jaarevaluatie wordt besproken in de OLC. OLC adviseert schriftelijk aan OLD. Na advies van OLC stelt de OLD vast welke maatregelen er genomen moeten worden. De OLD informeert OCO, CKZ en OLC over zijn besluiten. CKZ zorgt voor bekendmaking onder studenten en docenten van de uitkomsten van de evaluatie(s). Commentaar & tips Plan Do Check Act Het is te overwegen om voor de verplichte vakken uit de tracks aparte vakevaluaties te doen. Voor vakevaluatie kan Quaestio worden gebruikt (zie bijlagen). Overweeg om per kwartiel/semester panelgesprekken met groepen studenten te houden (per track, evt. per M-jaar, evt. per bijzondere groep studenten zoals HBOinstromers). Er is een checklist beschikbaar (bijlage). Overweeg om per (M1-) kwartiel / semester per track overleg met betrokken docenten te houden. Je kunt bv. de samenvatting van de evaluatie van een vak + reactie van de docent toezenden aan studenten. Je kunt ook het jaarrapport publiceren. bestand: KHB CT 1 februari 2006.doc 12

16 Interne Kwaliteitszorg Evaluatie B- en M-opdracht, stage en exit-enquêtes 1.3. Evaluatie B- en M-opdracht, stage, exit-enquêtes en WO-monitor In deze paragraaf wordt de procedure Evaluatie B-opdracht, stage, M-opdracht, exit-enquêtes en WO-monitor beschreven. B-opdracht, stage en M-opdracht worden bij studenten èn bij docenten geëvalueerd. De exitenquête is bedoeld om de mening te vragen van de student over de afgeronde opleiding (bachelor en master). De WO-monitor is een jaarlijks landelijk onderzoek onder degenen die tussen 1 en 2 jaar geleden zijn afgestudeerd 11. De Werkgroep Stolk 12 kwam met het advies voor exit interviews met studenten. Uit efficiëntie-overwegingen zal CT eerst geen interviews houden, maar ervaring opdoen met exit-enquêtes. Bachelor Vak-/kwartiel-evaluatie evaluatie B-opdracht / exit-enquête UT Instroomonderzoek Jaarevaluatie 200x- 200x+1 UT Studenttevredenheid (1x per 2 jaar) Master Vak- / track-evaluatie evaluatie M-opdracht / stage / exit-enquête / WOmonitor UT Instroomonderzoek Jaarevaluatie 200x- 200x+1 UT Studenttevredenheid (1x per 2 jaar) 11 Binnen de UT wordt de afname verzorgd door ITBE in overleg met de opleiding. Meeste vragen liggen vast (worden in landelijk overleg afgesproken); opleiding kan aantal eigen vragen toevoegen. 12 De UT Werkgroep Stolk heeft in maart 2005 een rapport uitgebracht voor opleidingen: Handreiking Interne Kwaliteitszorg Opleidingen. bestand: KHB CT 1 februari 2006.doc 13

17 Interne Kwaliteitszorg Evaluatie B- en M-opdracht, stage en exit-enquêtes Meetbare doelen B- en M-opdracht, exit-enquêtes, stage en WO-monitor Tabel 1.8 Meetbare doelen bij de evaluatie B-opdracht Parameter Doel Streefwaarde Inhoud De student heeft genoeg voorkennis en vaardigheden om de B-opdracht te kunnen doen; de B-opdracht is motiverend, heeft een goed niveau en vraagt het integreren van kennis en vaardigheden Niveau Studeerbaarheid Bij de B-opdracht kan de student zijn bekwaamheden goed laten zien; door de B- opdracht laat de student zien dat hij kan doorstromen naar een master Geplande en werkelijke studielast komen overeen Studeerbaarheid Totale studielast van B-opdracht + eventuele vakken die daarnaast worden gevolgd is studeerbaar Toetsing en beoordeling Toetsing en beoordeling Toetsing en beoordeling Docenten Materiële voorzieningen Beoordelingscriteria zijn bekend bij de student Beoordelingscriteria zijn consistent met de vakdoelstellingen De beoordeling is valide: beoordeling is betrouwbare weergave van de door de student geleverde prestatie De kwaliteit van de begeleiding is goed; er is voldoende begeleiding De benodigde materiële voorzieningen zijn beschikbaar en toereikend Gem. oordeel van studenten en docenten bij enquête is positief (#) Gem. oordeel van docenten bij enquête is positief (#) Gem. door studenten bij enquête opgegeven tijdbesteding is 110% en 90% van de geplande studielast; gem. oordeel van begeleiders is dat de opdracht te doen is in 480 ± 40 uur B-opdracht veroorzaakt geen piekbelastingen in totale tijdbesteding van 45 uur/week Gem. oordeel van studenten bij enquête is positief (#) Gem. oordeel van docenten bij enquête is positief (#) Gem. oordeel van student en docent bij enquête is positief (#) Gem. oordeel van studenten bij enquête is positief (#) Gem. oordeel van studenten bij enquête is positief (#) Tabel 1.9 Meetbare doelen bij de exit-enquête Parameter Doel Streefwaarde Programma inhoud, vorm, samenhang De studenten zijn tevreden over het programma Gem. oordeel van studenten bij exit-enquête is positief (#) Studeerbaarheid Opgelopen studievertraging wordt niet veroorzaakt door opleidingsfactoren Gem. opgegeven studievertraging tengevolge van opleidingsfactoren is 1 maand per factor en 4 maanden totaal Studiebegeleiding De studiebegeleiding is goed Gem. oordeel van studenten bij exit-enquête Studie-informatie De informatievoorziening (roosters, programmawijzigingen, hulp bij keuzeproces e.d.) over de studie is goed is positief (#) Gem. oordeel van studenten bij exit-enquête is positief (#) (#) Dwz. hoger dan 3,0 op vijfpuntsschalen van bv. zeer slecht (0) zeer goed (5), veel te weinig (0) ruim voldoende (5), veel te weinig (0) ruim voldoende (5), veel te laat beschikbaar (0) tijdig beschikbaar (5). Bv. uitloop afstudeeropdracht, keuzevakken die niet optimaal waren te programmeren bestand: KHB CT 1 februari 2006.doc 14

18 Interne Kwaliteitszorg Evaluatie B- en M-opdracht, stage en exit-enquêtes Tabel 1.10 Meetbare doelen bij de evaluatie van de stage Parameter Doel Streefwaarde Inhoud De student heeft genoeg voorkennis en vaardigheden om de stageopdracht te kunnen doen; de stageopdracht is motiverend, heeft een goed niveau en vraagt het integreren van kennis en vaardigheden Inhoud Niveau Studeerbaarheid Toetsing en beoordeling Toetsing en beoordeling Toetsing en beoordeling Docenten Materiële voorzieningen Tijdens de stageopdracht heeft de student inzicht gekregen in het functioneren van een biomedische organisatie en in het toekomstige biomedische werkveld Bij de stageopdracht kan de student zijn academische vaardigheden goed laten zien; door de stageopdracht laat de student zien dat hij geschikt is om (op termijn) uit te stromen naar het werkveld Geplande en werkelijke studielast komen overeen Beoordelingscriteria zijn bekend bij de student Beoordelingscriteria zijn consistent met de vakdoelstellingen De beoordeling is valide: beoordeling is betrouwbare weergave van de door de student geleverde prestatie De kwaliteit van de begeleiding is goed; er is voldoende begeleiding De benodigde materiële voorzieningen zijn beschikbaar en toereikend Gem. oordeel van studenten en docenten bij enquête is positief (#) Gem. oordeel van studenten en docenten bij enquête is positief (#) Gem. oordeel van docenten bij enquête is positief (#) Gem. bij enquête opgegeven tijdbesteding is 110% en 90% van geplande studielast Gem. oordeel van studenten bij enquête is positief (#) Gem. oordeel van docenten bij enquête is positief (#) Gem. oordeel van student en docent bij enquête is positief (#) Gem. oordeel van studenten bij enquête is positief (#) Gem. oordeel van studenten bij enquête is positief (#) Tabel 1.11 Meetbare doelen bij de evaluatie M-opdracht Parameter Doel Streefwaarde Inhoud De student heeft genoeg voorkennis en vaardigheden om de M-opdracht te kunnen doen; de M-opdracht is motiverend, heeft een goed niveau en vraagt het integreren van kennis en vaardigheden Niveau Bij de M-opdracht kan de student zijn bekwaamheden goed laten zien; door de - opdracht laat de student zien dat hij geschikt is om uit te stromen naar het werkveld Gem. oordeel van studenten en docenten bij enquête is positief (#) Gem. oordeel van docenten bij enquête is positief (#) (#) Dwz. hoger dan 3,0 op vijfpuntsschalen van bv. zeer slecht (0) zeer goed (5), veel te weinig (0) ruim voldoende (5), veel te weinig (0) ruim voldoende (5), veel te laat beschikbaar (0) tijdig beschikbaar (5). bestand: KHB CT 1 februari 2006.doc 15

19 Interne Kwaliteitszorg Evaluatie B- en M-opdracht, stage en exit-enquêtes Tabel 1.11 Meetbare doelen bij de evaluatie M-opdracht Parameter Doel Streefwaarde Studeerbaarheid Geplande en werkelijke studielast komen overeen Gem. door studenten bij enquête opgegeven tijdbesteding is 110% en 90% van de geplande studielast; gem. oordeel begeleiders is dat de opdracht te doen is in 1260 ± 100 uur Toetsing en beoordeling Beoordelingscriteria zijn bekend bij de student Gem. oordeel van studenten bij enquête is positief (#) Toetsing en Beoordelingscriteria zijn consistent met de Gem. oordeel van docenten bij enquête is beoordeling Toetsing en beoordeling Docenten Materiële voorzieningen vakdoelstellingen De beoordeling is valide: beoordeling is betrouwbare weergave van de door de student geleverde prestatie De kwaliteit van de begeleiding is goed; er is voldoende begeleiding De benodigde materiële voorzieningen zijn beschikbaar en toereikend positief (#) Gem. oordeel van student en docent bij enquête is positief (#) Gem. oordeel van studenten bij enquête is positief (#) Gem. oordeel van studenten bij enquête is positief (#) Tabel 1.12 Meetbare doelen bij de WO-monitor Parameter Doel Streefwaarde Werkgelegenheid Er is werk voor afgestudeerden. Min.95% vindt werk binnen 2 jaar na afstuderen Min.80% vindt werk binnen 6 maanden na afstuderen Aansluiting Hebben afgestudeerden werk dat in Min.80% heeft werk dat aansluit op de opleiding opleiding - werk redelijke mate gebaseerd is op het geleerde in hun opleiding. Niveau van het Het werk moet van passend (wo-) Min.80% heeft werk op niveau gevonden. werk Aansluiting opleiding - functie Sterke / zwakke punten van de opleiding niveau zijn Afgestudeerden moeten vanuit het perspectief van hun huidige functie, na terugblik op hun opleiding, tevreden zijn over hun opleiding Er zijn geen duidelijk zwakke punten in de opleiding Min.80% N.B. Dit zijn de doelen die het ITBE hanteert voor haar rapportage. Zwakke punten worden door minder dan 10% van de respondenten genoemd als er in algemene zin naar sterke en zwakke punten wordt gevraagd bestand: KHB CT 1 februari 2006.doc 16

20 Interne Kwaliteitszorg Evaluatie B- en M-opdracht, stage en exit-enquêtes Procedure evaluatie B- en M-opdracht, stage, exit-enquêtes en WO-monitor Tabel 1.13 Kernpunten PDCA voor Evaluatie B- en M-opdracht, stage en exit-enquêtes Plan Do Check Act De CKZ gaat na of de meetbare doelen voldoen. Zonodig worden ze aangepast of aangevuld. De CKZ plant de Evaluatie B-opdracht, Evaluatie Stage, Evaluatie M-opdracht en Exit-enquêtes met BOZ. De CKZ past zonodig de vragenformulieren aan (zie bijlage). BOZ geeft vragenformulieren Evaluatie B-opdracht en Evaluatie M- opdracht aan de student en de docent. De stagecoördinator geeft vragenformulier stage aan de student en aan de stagebegeleiders. BOZ en stagecoördinator verzamelen ingevulde formulieren en sturen zonodig herinneringen. BOZ geeft exit-enquetes aan studenten. BOZ verzamelt ingevulde formulieren en stuurt zonodig herinneringen. De CKZ maakt een rapportage over de B-opdracht, M-opdacht en de exit-enquêtes op basis van de binnengekomen formulieren. In de rapportage wordt indien van toepassing ook vergeleken met maatregelen die genomen zijn n.a.v. eerdere evaluaties. In de rapportage wordt indien van toepassing -verantwoord hoe meetbare doelen sinds vorige rapport zijn aangepast / aangevuld. De stagecoördinator maakt een rapportage over de stage op basis van de binnengekomen formulieren. De rapportage vormt (een deel van de) input voor de Jaarevaluatie. Commentaar & tips Plan Do Check Act Planning kan tegelijkertijd plaatsvinden met die voor de vak-/ kwartiel, track- en jaarevaluatie. Het kan mogelijk zo worden georganiseerd door BOZ dat de formulieren voor B- resp. M-opdracht tegelijkertijd met die van de exit-enquete aan de student worden gegeven. Een handige periode kan zijn 1 juni jaar x 31 mei jaar x+1. CKZ verwerkt verslag in de Jaarevaluatie. De Jaarevaluatie wordt besproken in de OLC. OLC adviseert schriftelijk aan OLD. Na advies van OLC stelt de OLD vast of er maatregelen genomen moeten worden. De OLD informeert OCO, CKZ en OLC over zijn besluiten. Tabel 1.14 Kernpunten PDCA voor WO-monitor Plan Do Check Act De CKZ gaat na of de meetbare doelen voldoen. Zonodig worden ze aangepast of aangevuld. De CKZ plant de WOmonitor cq. Informeert naar de planning van ITBE voor de WOmonitor. De CKZ geeft zonodig aan ITBE door hoe (het opleidingsdeel van) de vragenformulieren moeten worden aangepast. ITBE past vragenformulieren aan ITBE verstuurt ze aan alumni, verstuurt zonodig een 1 e herinnering en doet zonodig een 2 e telefonische herinnering. ITBE verzamelt ingevulde formulieren. ITBE stelt een rapport op over de WO-monitor. Bijlage is een UToverzicht van de antwoorden op een deel van de vragen. ITBE stuurt rapport aan de opleiding. CKZ neemt de voornaamste resultaten uit het rapport op in een historisch overzicht met resultaten van de laatste 5 jaar. Rapport van de WO- Monitor + historisch overzicht worden besproken in de OLC. OLC adviseert schriftelijk aan OLD. Na advies van OLC stelt de OLD vast of er maatregelen genomen moeten worden. De OLD informeert OCO, CKZ en OLC over zijn besluiten. bestand: KHB CT 1 februari 2006.doc 17

21 Interne Kwaliteitszorg Jaarevaluatie 1.4. Jaarevaluatie In de jaarevaluatie worden de evaluaties van de B1-, B2- en B3-kwartielen en de trackevaluaties verwerkt, naast gegevens uit de evaluatie van de B-opdracht, stage, M-opdracht, de exitenquêtes voor bachelor en master en indien beschikbaar uitkomsten uit de UTinstroommonitor en de UT-tevredenheidsmonitor. Schematisch is dit weergegeven in de figuren 1.5 en 1.6. Vak- / kwartielevaluatie Vak- / trackevaluatie evaluatie B-opdracht / exit-enquête UT Instroomonderzoek Bachelor Jaarevaluatie 200x- 200x+1 evaluatie M-opdracht, stage, exit-enquête WO-monitor UT Instroomonderzoek (1x per 2 jaar) Master Jaarevaluatie 200x- 200x+1 UT Studenttevredenheid (1x per 2 jaar) UT Studenttevredenheid (1x per 2 jaar) Figuur 1.5 Figuur 1.6 Er wordt verder van uitgegaan dat de jaarevaluaties van bachelor en master geïntegreerd worden in één rapport. 13 De UT-instroommonitor Bachelor is najaar 2004 ontwikkeld en afgenomen. Deze monitor zal jaarlijks worden afgenomen. Op dit moment is nog niet bekend wanneer de UT-tevredenheidsmonitor Bachelor wordt ontwikkeld en afgenomen. Opzet is om dit tweejaarlijks in het najaar te doen. 14 De - tweejaarlijkse - UT-instroommonitor Master wordt najaar 2005 voor het eerst afgenomen. Voorjaar 2005 is de - tweejaarlijkse - UT-tevredenheidsmonitor Master afgenomen. bestand: KHB CT 1 februari 2006.doc 18