GEAR Auditrapportage 2013

Transcriptie

1 GEAR Auditrapportage 2013 VUmc Amsterdam Gecombineerde Evaluatie en Audit Ronde Landelijk Kwaliteitssysteem Huisartsopleiding Nederland Domein 2 Domein 4 Domein 5 Academisch niveau Leeromgeving Toetsing, beoordeling en resultaten Extra thema Docentprofessionalisering

2 Inhoud Inleiding... 4 Achtergrond GEAR... 4 Doel en opzet GEAR... 4 Werkwijze GEAR... 5 De audit... 5 Rapportage... 6 De audit van de huisartsopleiding VUmc Amsterdam... 7 Resultaten van de audit... 8 Domein 2 Academisch niveau a Onderwijsprogramma b Wetenschappelijk onderzoek aios c Staf d Wetenschappelijk klimaat... 9 Domein 4 Leeromgeving a Onderwijs en begeleiding in huisartsenpraktijken b Onderwijs en begeleiding op de huisartsenpost c Onderwijs en begeleiding in stage-inrichting d Onderwijs en begeleiding op het instituut e Leerwerkplekbeheer Domein 5 Toetsing, beoordeling en resultaten a Beleid ten aanzien van toetsprogramma b Toetsinstrumenten en - methoden

3 5c Bijstelling individueel opleidingsplan d Opleidingsresultaten Bijlagen BIJLAGE 1 - INHOUDSOPGAVE NPA WEB DOSSIER VUmc BIJLAGE 2 - BEZOEKSCHEMA GEAR AUDIT VUmc 23 & 24 april BIJLAGE 3 - Lijst van aanvullende documentatie ter inzage ter plaatse BIJLAGE 4 - Landelijke kaders

4 Inleiding Achtergrond GEAR Om de kwaliteit van de huisartsopleiding in Nederland te bewaken en te bevorderen, waren tot 2012 twee kwaliteitssystemen operationeel: PAUKH en het Prestatie-indicatoren systeem. Deze systemen functioneerden onafhankelijk van elkaar en hadden verschillende doelstellingen. PAUKH, Permanente Audit Kwaliteit Huisartsopleiding, was een systeem voor kwaliteitstoetsing van de huisartsopleiding. In de vorm van een audit, een inhoudelijke visitatie en toetsing van een opleidingsinstituut, werd aan een instituut en alle betrokkenen inzicht gegeven in de kwaliteit van de huisartsopleiding. Prestatie-indicatoren, indicatoren die de resultaten van een huisartsopleiding reflecteren, waren bedoeld om inzicht te krijgen in de punten waar een huisartsopleiding goed in is en waar nog extra aandacht aan besteed kan worden. De prestatie-indicatoren waren opgesteld in opdracht van de SBOH. De indicatoren dekten zo veel mogelijk, op grond van consensus, de relevante processen binnen de huisartsopleiding. In maart 2010 hebben de hoofden van de huisartsopleiding besloten om toe te werken naar één landelijk kwaliteitssysteem voor de huisartsopleiding. Een belangrijk argument daarbij was de grote belasting in tijd en geld die het gebruik van twee afzonderlijke kwaliteitssystemen met zich meebracht. In januari 2011 is op initiatief van het dagelijks bestuur van Huisartsopleiding Nederland (HN) en de SBOH het project Integratie kwaliteitssystemen Huisartsopleiding Nederland gestart. Een projectteam heeft gewerkt aan de vormgeving van het nieuwe landelijke kwaliteitssysteem GEAR: Gecombineerde Evaluatie en Audit Ronde. Een klankbordgroep, bestaande uit vertegenwoordigers van HN, NHG, SBOH, LHV, IOH, SOON, RGS (voorheen HVRC) en LOVAH, had daarbij een belangrijke adviserende rol. Vervolgens heeft een implementatieteam, waarin NPA als uitvoerder vertegenwoordigd was, het systeem verder ontwikkeld en ingevoerd. Doel en opzet GEAR De hoofddoelstelling van de Gecombineerde Evaluatie en Audit Ronde (GEAR) is het bewaken en bevorderen van de kwaliteit van de huisartsopleiding op alle opleidingsinstituten volgens de daartoe opgestelde kwaliteitsindicatoren. Eens in de twee à drie jaar nemen de opleidingsinstituten deel aan een GEAR auditronde. Deze audits staan los van, maar zijn afgestemd op, de vijfjaarlijkse visitaties van de opleidingsinstituten door de RGS (voorheen HVRC), waarbij selectief wordt getoetst op de randvoorwaarden. In de audit wordt, verspreid over twee dagen, een selectie van zeven domeinen voor de kwaliteit van de opleiding getoetst. In de GEAR auditronde 2013 zijn drie domeinen en een extra thema getoetst: Domein 2. Academisch niveau Domein 4. Leeromgeving Domein 5. Toetsing, beoordeling en resultaten Extra Thema Docentprofessionalisering 4

5 Voorafgaand aan de auditbezoeken wordt door de instituten een zelfevaluatie uitgevoerd. Uit deze zelfevaluaties volgt een rapportage waarin individuele scores per instituut zijn weergegeven en een vergelijking van de scores met de andere instituten. Deze rapportage vormt de basis van de zelfreflectie, die samen met de gegevens uit de audit, zal bijdragen aan de opzet van verbeterplannen van elk instituut. Naast de zelfevaluatie en zelfreflectie heeft het auditteam relevante documentatie ontvangen en bestudeerd, een overzicht van het bestudeerde materiaal is opgenomen in bijlage 1. Werkwijze GEAR GEAR kent een vijfjaarscyclus met vier periodes. De periodes 1 en 3 beslaan elk één jaar en starten in september of in maart. In deze periodes vinden de gegevensverzamelingen plaats, stellen instituten verbeterplannen op en vinden audits plaats. De activiteiten volgen elkaar op en zijn inhoudelijk aan elkaar gekoppeld. De tussenliggende periodes 2 en 4 duren elk anderhalf jaar en geven de instituten de rust en ruimte om te werken aan verbeterplannen. De audit dient de volgende doelen: a. Inzicht in stand van zaken De audit dient bevindingen, conclusies en beoordelingen op te leveren betreffende: stand van zaken met betrekking tot geselecteerde (sub-)domeinen van de huidige ronde; progressie van de kwaliteit van de opleiding (resultaten verbeterplannen van de vorige ronde); stand van zaken met betrekking tot landelijk(e) speerpunt(en); stand van zaken met betrekking tot eigen auditwensen. b. Fundament voor verbetering De audit dient daarnaast inspiratie en handvatten voor kwaliteitsverbetering te leveren. De audit De audit bestaat uit een tweedaags bezoek per instituut waarbij er gesprekken plaatsvinden met vertegenwoordigers van docenten, opleiders, aios en management. Het auditteam bestaat uit een drietal getrainde auditoren uit eigen kring te weten een staflid, een opleider, een aios, een extern expert (voorzitter) op het gebied van auditprocessen en tot slot de secretaris van NPA. Na de auditbezoeken stelt het auditteam een rapportage per instituut op. Het auditteam volgt bij de werkzaamheden het handboek GEAR Op de auditdagen zelf worden door het auditteam gesprekken gevoerd met betrokkenen, ook wel geauditeerden genoemd. Op de eerste auditdag wordt gesproken met: hoofd en sleutelfiguren in management; stafleden toetsing en beoordeling; stafleden professionalisering onderwijs; docenten, groepsbegeleiders, gedragswetenschappers. 5

6 Op de tweede auditdag wordt gesproken met: aios (diverse leerjaren); opleiders (meer en minder ervaren); hoofd van het opleidingsinstituut. Aan het einde van de tweede auditdag presenteert het auditteam de voorlopige bevindingen (eerste indruk) aan de geauditeerden en genodigden. De kernvragen bij de beoordeling door het auditteam zijn: Is een bepaald subdomein aantoonbaar goed geregeld? Wordt dit subdomein aantoonbaar goed uitgevoerd? Zijn beleidsvoornemens en verbeterplannen op dit subdomein passend (congruent met de stand van zaken binnen een instituut en in lijn met de landelijke kaders)? In eerste instantie zoekt het auditteam antwoorden op deze vragen door documenten, die zijn opgenomen in het informatiedossier, te toetsen aan de bijbehorende criteria die zijn vervat in thema s. Auditgesprekken moeten vervolgens helpen de antwoorden te vinden die niet of onvoldoende uit documenten afleidbaar zijn. Uitgangspunt bij de beoordeling zijn de landelijke kaders. Een overzicht van de landelijke kaders behorende bij de domeinen die in deze auditronde getoetst zijn is opgenomen in de bijlagen. Rapportage Het auditteam stelt voor het instituut een auditrapportage op. Het instituut wordt in de gelegenheid gesteld onjuistheden te corrigeren waarna de rapportage formeel wordt vastgesteld en op nader af te spreken wijze wordt gepubliceerd. De rapportage levert voor het instituut materiaal voor verbeteringsacties. Onderling wisselen de instituten hun rapportages uit, zodat de huisartsopleidingen in Nederland van elkaars leerpunten kunnen profiteren. In de rapportage wordt per domein en per subdomein weergegeven welke aspecten in de zelfevaluatie en zelfreflectie van het instituut het auditteam zijn opgevallen, welke zaken uit de aangeleverde documentatie naar voren kwamen en welke aspecten opvielen in de auditgesprekken. Per domein zijn aandachtspunten aangegeven en geeft het team zijn conclusie weer. Bij de domeinen,4 Leerwerkomgeving en 5, Toetsing, beoordeling en resultaten is een lijst opgenomen met de oordelen van het auditteam over de beoordelingspunten die voor die domeinen gelden. 6

7 De audit van de huisartsopleiding VUmc Amsterdam Het auditteam dat de huisartsopleiding van het VUmc Amsterdam bezocht bestond uit: mevrouw M. Könning, adjunct-hoofd en docent van de huisartsopleiding AMC; mevrouw E.W. van de Griendt, huisartsopleider van de huisartsopleiding Erasmus MC en huisarts te Schiedam; mevrouw M.Schot, aios van de huisartsopleiding UMC Utrecht; mevrouw N. Heinen, stafmedewerker NPA, secretaris GEAR en huisarts; mevrouw B.M. van Balen, medewerker QANU en voorzitter van het auditteam. Het team ontving de zelfevaluatie, zelfreflectie en de documentatie op 25 maart 2013 en heeft op 16 april 2013 een voorbespreking gehad waarin de documentstudie werd besproken en een aantal aandachtspunten en vragen voor de audit werden benoemd. Op basis van die voorbespreking hebben de teamleden vragen geformuleerd voor de gesprekken tijdens de audit. De audit van de opleiding VUmc vond plaats op 23 en 24 april 2013 volgens het standaard gespreksprogramma dat in de bijlage is opgenomen. Aan het eind van de tweede dag is een korte presentatie gehouden van de bevindingen van het auditteam voor het management van de opleiding. Status van het rapport eerste conceptversie 8 mei 2013 gezien en aangevuld door auditoren 23 mei 2013 gezien door instituut 27 juni 2013 Definitief 3 juli

8 Resultaten van de audit Domein 2 Academisch niveau 2a Onderwijsprogramma De huisartsopleiding VUmc verzorgt onderwijs in Evidence Based Medicine (EBM) voor aios, opleiders en staf. Dit onderwijs wordt door de betrokkenen gewaardeerd. Er ligt nu de uitdaging voor de opleiding om deze ontwikkeling voort te zetten en structureel op te nemen in het scholings- en onderwijsaanbod. Aios geven aan dat ze meer aandacht zouden willen zien voor het vaardig worden in het toepassen van EBM zodat deze vaardigheid geïncorporeerd wordt in het handelen van aios, opleiders en docenten. Het onderwijs is nu gericht op het grondig leren van EBM en precies uitvoeren van PICO s, maar voor de praktijk is er ook behoefte aan de vaardigheid snel evidence te kunnen opzoeken. Tijdens de audit werd dit omschreven als een omslag van mooi en grondig naar snel en slordig ( quick and dirty ). Het uitgangspunt van het onderwijs is dat het vraaggestuurd is. De uitdaging is om de aios en docenten zo te verleiden dat ze een vraag identificeren en uitwerken. Het onderwijs in EBM wordt door één persoon verzorgd. Zoals gesteld is de waardering voor dat onderwijs hoog, tegelijkertijd is het onderwijs wel erg kwetsbaar doordat het aan één persoon is gekoppeld. 2b Wetenschappelijk onderzoek aios Van wetenschappelijk onderzoek door aios heeft het auditteam geen duidelijk beeld gekregen. Het auditteam kreeg uit de gesprekken met de aios en docenten de indruk dat dit niet per definitie actief gestimuleerd wordt. Het percentage aiotho s in de opleiding ligt iets onder het landelijk gemiddelde (3,29% < 3,74%). Er is een werkgroep geformeerd die een scoutingtraject voor high potential studenten gaat ontwikkelen. Deze groep heeft de volgende definitie opgesteld: high potentials zijn aios die meer willen op allerlei gebied. De groep high potentials hoeft dus niet beperkt te worden tot kandidaten met een wetenschappelijke interesse. Het scoutingtraject moet nog van start gaan en het was ook nog niet bij alle betrokkenen bekend dat een dergelijke wens leeft. De opleiders bevelen aan het high potential beleid beter bekend te maken. 2c Staf De EBM training aan opleiders wordt door dezelfde docent verzorgd die het onderwijs aan de aios op dat onderwerp geeft. Alle opleiders worden bediend, maar wel eenmalig. De opleiders geven aan dat daardoor de EBM competentie mogelijk niet beklijft; meer continuïteit in EBM training voor opleiders is wenselijk. De opleiders zijn ook van mening dat docenten een rolmodelfunctie hebben en dus ook goed thuis zouden moeten zijn in EBM. Deze rolmodelfunctie zou zowel voor de HABs als voor de Gedragswetenschappers moeten gelden, maar nog niet elke docent is EBM deskundig (minder dan 75% van de staf heeft EBM trainingen gevolgd). Dit ondanks dat de expertdocent EBM met bezieling zorgt voor een groeiende interesse onder de docenten. Om de EBM expertise op peil te houden zou het goed zijn om regelmatig scholing te blijven aanbieden aan docenten. Om de betrokkenheid en de expertise van de gedragswetenschappers in EBM te vergroten zouden zij specifiek uitgenodigd kunnen worden gedragswetenschappelijke onderwerpen met evidence te onderbouwen. 8

9 De gedragswetenschappers in de docentengroep houden zich nog niet bezig met wetenschappelijk onderzoek. Ze geven aan daar wel behoefte aan te hebben. Dit zou meer gestimuleerd kunnen worden. Het beleid met betrekking tot inzet van expertdocenten houdt in dat docenten met een specifieke expertise door de groepsdocenten gevraagd kunnen worden om een tot hun expertise behorend onderwerp te behandelen. Volgens de docenten werkt dit systeem goed. Het beleid houdt tevens in dat 60% van het onderwijs vast aanbod is en 40% vraaggestuurd. Bij het auditteam bleef de indruk achter dat de aanwezige expertise hap-snap wordt ingezet. De aios vonden het jammer dat er niet in elke groep gebruik wordt gemaakt van expert docenten, terwijl de behoefte daaraan wel breed onder aios leeft. Omdat niet structureel is vastgelegd hoe vaak zij onderwijs geven, zou het beleid er ook toe kunnen leiden dat expertdocenten in hun enthousiasme teveel gaan doen zodat hun werkbelasting te hoog wordt. 2d Wetenschappelijk klimaat De verwachting is, dat met de komst van het nieuwe hoofd van de opleiding verschillende initiatieven genomen zullen worden om het wetenschappelijk klimaat te stimuleren en dat er nieuwe speerpunten zullen ontstaan. Instituutsbreed is men het erover eens dat vergroting van de aandacht voor de wetenschap van belang is. De verwachting leeft ook dat een top down strategie voor dit onderwerp nodig is en, hoewel dat niet de meest geëigende weg is voor dit instituut, in dit geval wel zal werken. Er is een fysieke afstand tussen de onderzoeksgroep huisartsgeneeskunde en de opleiding. De onderzoekers zijn elders gevestigd en hoewel de afstand beloopbaar is, is de indruk dat dat toch niet veel gebeurt. Het auditteam heeft geen beeld kunnen krijgen van de samenhang tussen onderzoekers en opleiding. Maar er is HOOP (Huisartsgeneeskundig Onderzoek en Onderwijs Presentaties). Dit is een gemeenschappelijk podium voor de verschillende secties van de afdeling Huisartsgeneeskunde VUmc, waarvan het doel is de inhoudelijke wisselwerking tussen de secties te versterken door aan gemeenschappelijke thema s te werken. Dit initiatief biedt een goede gelegenheid om uitwisseling tussen onderzoek en opleiding te bevorderen. 9

10 Aandachtspunten Meer aandacht in het EBM onderwijs voor de vaardigheid om EBM snel toe te passen in de praktijk. Doordat al het onderwijs in EBM door één persoon verzorgd wordt, is dit erg kwetsbaar. Het high potential beleid zou beter bekend gemaakt kunnen worden. Aiotho s zijn niet zichtbaar in de opleiding, dit geldt ook voor het wetenschappelijk onderzoek van aios. Er zou meer continuïteit in het EBM onderwijs aan opleiders en docenten moeten komen. Expertdocenten zouden meer structureel ingezet kunnen worden in het onderwijs. Wetenschappelijk onderzoek door gedragswetenschappers kan meer gestimuleerd worden. Conclusie Er zijn mogelijkheden om het wetenschappelijk klimaat binnen de opleiding te bevorderen. De verwachting is dat met de komst van het nieuwe hoofd nieuwe initiatieven daartoe genomen zullen worden. Er is bij de aios, opleiders en docenten groot enthousiasme over het huidige EBM onderwijs, maar dit is wel erg kwetsbaar doordat het aan één docent is opgehangen. Daarnaast zou er meer continuïteit gebracht kunnen worden in het EBM onderwijs aanbod voor opleiders en docenten. 10

11 Domein 4 Leeromgeving 4a Onderwijs en begeleiding in huisartsenpraktijken Het onderwijs en de begeleiding in de huisartsenpraktijk loopt goed. VUmc scoort relatief hoog op de CCTEI (Cleveland Clinic's Teaching Effectiveness Instrument) met betrekking tot de kwaliteit van de opleider in het eerste jaar. VUmc scoort gemiddeld met betrekking tot de kwaliteit van de opleider in het derde jaar. De aios die het team gesproken heeft zijn ook zeer tevreden over de kwaliteit van de opleiders. HaDiDoc, 1 (HuisartsDidactischDocent) de permanente commissie die de kwaliteit van de opleiders bewaakt, wordt hogelijk gewaardeerd door de betrokkenen. Het is duidelijk dat deze opzet succesvol is. De opleiders vinden dat de wijze waarop de functioneringsgesprekken en de beoordelingsprocedure door de HaDiDoc wordt gestructureerd een veilige omgeving schept. Het auditteam heeft het idee dat hier een best practice is, dat uitgewisseld zou kunnen worden met andere opleidingen. De frequentie van de consultobservaties is bovengemiddeld. De frequentie van de leergesprekken is uitzonderlijk hoog. Tijdens de audit is een toelichting gegeven op het beleid op het gebied van leergesprekken en is duidelijk geworden dat er gestreefd wordt naar een uniform model van een leergesprek van één uur per dag. Daar wordt stevig op in gezet: bij afwijkingen van deze afspraak wordt daar tijdens de terugkomdagen op teruggekomen. Groepsbegeleiders stimuleren aios actie te ondernemen als er te weinig leergesprekken worden gehouden en spreken indien nodig ook de opleider zelf hierop aan. De aios ervaren de leergesprekken als zinvol. 4b Onderwijs en begeleiding op de huisartsenpost De leidraad voor onderwijs en begeleiding op de huisartsenpost is op een aantal aspecten ingevoerd, maar tijdens de audit is gebleken dat er bij het uitvoeren van de leidraad nog wat te winnen valt. Er is nog niet op alle huisartsenposten videoapparatuur geïnstalleerd. Daarnaast zou in verschillende huisartsenposten een betere planning gemaakt kunnen worden van tijd en ruimte voor supervisie en voor het samen doen van consulten. De afstemming tussen werken op de post en onderwijs op het instituut kan nog geoptimaliseerd worden. Er is recent een centrale coördinator aangesteld. Betrokkenen hebben er alle vertrouwen in dat de uitvoering van de leidraad door de nieuwe centrale coördinator de goede richting in zal gaan. 4c Onderwijs en begeleiding in stage-inrichting De aios geven aan dat het leerrendement van de stages in het tweede jaar van de opleiding goed is, maar de begeleiding op de stageplekken kan in het algemeen beter. Een aandachtspunt is dat er in de stage-inrichtingen te veel nadruk ligt op productie draaien. Naar de mening van de aios zou het 1 Voor het systematisch en longitudinaal volgen van een opleider is een commissie van enkele stafleden en een hao samengesteld - de HaDiDoc (HuisartsDidactischDocent). Uit: Huisartsopleiding VUmc Opleidingsplan huisartsopleiders

12 instituut er zorg voor moeten dragen dat er meer uniformiteit komt in wat en hoe er geleerd wordt op de stageplekken. Er zouden meer leergesprekken plaats moeten vinden en de stagebegeleiders zouden daar meer uniform op voorbereid en getraind moeten worden. De aois hebben de behoefte dat er vanuit het instituut wordt gestuurd op de kwaliteit van de leeromgeving en het logistiek regelen van de randvoorwaarden. Ze rapporteren dat het in de huidige situatie vaak aan de aios zelf wordt overgelaten om de situatie op de stageplek te verbeteren en dat vinden ze niet wenselijk. Het is duidelijk dat er door het instituut wordt geïnvesteerd om de contacten met de stageplekken, in het bijzonder de plekken voor de driemaanden stages, te intensiveren. Het is echter niet helemaal duidelijk geworden of er een plan aan dit voornemen ten grondslag ligt en ook niet of het voorstel dat er elke drie maanden een gesprek op de stageplek met de aios en stageopleider plaatsvindt, geëffectueerd is. Het auditteam merkte op dat er een discrepantie lijkt tussen de staf en de aios met betrekking tot de evaluatie van de stageplekken. Aios vonden dat de stageplek door de staf moet worden geëvalueerd, de staf vond dat die evaluatie in een koppel gesprek plaats moet vinden. 4d Onderwijs en begeleiding op het instituut Onderwijs en begeleiding op het instituut wordt door opleiders en aios als goed gekwalificeerd. Men is tevreden over de kwaliteit van de terugkomdagen. Voor het tweede jaar zijn de terugkomdagen van wezenlijk belang om huisartsgeneeskundige aspecten aan de orde te stellen. De aios zijn tevreden over de opbrengst van deze terugkomdagen. Aios en opleiders zijn erg tevreden over het feit dat ze door twee groepsdocenten begeleid worden. Zij zien een grote meerwaarde in de wisselwerking tussen huisartsbegeleider en de gedragswetenschapper. Dit draagt wezenlijk bij aan het onderwijs. Door docenten wordt dit ook zo ervaren. De gedragswetenschappers zouden daarnaast meer ruimte willen creëren om ook onderling als gedragswetenschappers ervaringen en kennis uit te wisselen. Voor de professionalisering als docent zou dat positief kunnen zijn. Een mogelijk aandachtspunt is de opbouw van het docententeam qua leeftijd en geslacht. 4e Leerwerkplekbeheer Over de koppeling van aios aan huisartsenpraktijken zijn opleiders en aios zeer tevreden. De aios hebben ook geen klachten over de koppeling aan stageplekken in het tweede jaar. De opleiders geven aan dat het instituut meer sturing mag geven aan de koppeling van specifieke aiosgroepen, zoals high potentials of aios met een functioneringsprobleem, aan opleiders. De opleiding investeert veel in praktijkbezoeken, wat zijn uitwerking heeft. Door deze investering wordt het uitgangspunt opleiden doen we samen (en vooral in de opleidingspraktijk) daadwerkelijk uitgedragen. Dit nodigt opleiders uit tot grote inzet en betrokkenheid bij de opleiding. 12

13 Aandachtspunten Verschillende beleidsaspecten en plannen zijn niet schriftelijk uitgewerkt en gedocumenteerd, zodat deze voor externen en minder ingevoerde betrokkenen onzichtbaar blijven. HaDiDoc kan beschouwd worden als een best practice, maar om deze uit te kunnen dragen zou er documentatie over beschikbaar moeten zijn. De uitvoering van de leidraad onderwijs en begeleiding op de huisartsenpost kan verbeterd worden. Het instituut is voornemens de kwaliteit van de stage-inrichtingen meer te evalueren. Het is niet duidelijk of hier een concreet plan voor is opgesteld. Mogelijke eenzijdige opbouw van het docententeam qua leeftijd en geslacht. Conclusie De aios en opleiders zijn zeer tevreden over de onderwijsleeromgeving die hen geboden wordt zowel in huisartspraktijken (voor de aios) als op het instituut. De leeromgeving in de stage-inrichtingen in het tweede jaar kan nog verbeterd worden. Aanbevolen wordt dat de huisartsopleiding daartoe het initiatief neemt. Beoordelingspunten uit Landelijk kader: Leidraad voor het leren dienstdoen aios op de huisartsenpost niet gestart op gang afgerond 1a. BLS+ cursus voor 1 e periode x 1b. Introcursus HAP 1 e periode x 2a. Opfriscursus BLS+ 2 e periode? 2b. Introcursus HAP 2 e periode x 3a. Cursorisch onderwijs vanuit instituut 1 e periode x 3b. Cursorisch onderwijs vanuit instituut 2 e periode x 4. Scholing voor opleiders door instituut? 5a. Diensten 1 e periode vastgelegd x 5b. Diensten 2 e periode vastgelegd x 6a. Verklaring consultarts x 6b. Verklaring visitearts x 6c. Verklaring telefoonarts x 6d. Checklist zelfstandig dienstdoen beschikbaar x 7. Gebruik verklaring overdracht x 8. Contactfunctionaris voor HAP binnen instituut x 13

14 Domein 5 Toetsing, beoordeling en resultaten 5a Beleid ten aanzien van toetsprogramma Aan de huisartsopleiding VUmc ligt de visie ten grondslag dat er continue toetsing en feedback moet zijn in de opleiding. Deze toetsing en de feedback daarop zijn een belangrijk onderdeel van de leeromgeving en het leerproces. Deze visie wordt door alle betrokkenen bij de opleiding gedeeld en de meerwaarde voor het leerproces wordt duidelijk zo ervaren. Een opvallende good practice in het beleid van de huisartsopleiding VUmc is de methodiek VOIS (Veilig Over Incidenten Spreken). Deze methodiek wordt gebruikt door de BAC (BeoordelingsAdviesCommissie), waarvan het de taak is om gecompliceerde beoordelingstrajecten te bespreken en daar lering uit te trekken. Het auditteam heeft niet kunnen vaststellen of er documentatie over de BAC en/of de VOIS methodiek aanwezig is. Beoordelingspunt landelijk kader: Invoeren van Protocol Toetsing en Beoordeling niet gestart op gang afgerond 1. Werkwijze in reglement en opleidingsplan x 2. Toetsmomenten omschreven x 3. Aanvullende eisen vastgesteld x 4. Aios heeft overzicht toetsmomenten x 5. Aios geïnformeerd over beoordelingen x 6. Beschrijving verplichting toetsen x 7. Werkwijze bij afwijkingen x 8. Werkwijze bij beëindiging x 9. Werkwijze verlenging x 10. Geschillenprocedure? 11. Procedures per opleidingsjaar? 14

15 Beoordelingspunten uit Landelijk Kader: Uitvoeren verplichte toetsen en beoordelingen conform Landelijk toetsplan niet gestart op gang afgerond 1. Beschikbaarheid toetsplan x 2. Competentie Beoordelingslijsten (ComBeL s) x 3. Arts Patiënt Communicatie Toets (APC-toets) x 4. STARtclass-toets: vaardigheden x 5. STARtclass-toets: theorie x 6. Kennis over Vaardighedentoets (KOV-toets) x 7. Landelijke Huisartsgeneeskundige x Kennistoets (LHK-toets) Mogelijke aanvullende toetsen: 8. Korte Klinische Beoordeling/ Korte x Praktijk Beoordeling (KKB/KPB) 9. PICO/CAT x 10. Praktijkscoringslijst (PSL) x 5b Toetsinstrumenten en - methoden Alle toetsen die in het landelijk toetsprogramma genoemd worden zijn aanwezig. Er is bij de aios wel enige behoefte aan meer duidelijkheid waar ze precies aan moeten voldoen. Zo is er geen duidelijke checklist met de toetsen en beoordelingsmomenten en geen duidelijkheid over de procedure wat er gebeurt als niet alles behaald wordt. Voor de de arts-patiënt-communicatietoets (APC toets) leveren de aios tien consulten op video in, daarvan worden er drie geselecteerd, die worden beoordeeld. De docenten, aios en opleiders ervaren het bekijken en beoordelen van video s als zeer waardevol. Hoe de video s worden beoordeeld is niet uniform. Het staat de beoordelaars vrij om de Maasglobaal daarvoor te gebruiken, maar andere beoordelingsinstrumenten kunnen ook. Ook de wijze van feedback die aios krijgen op de ingeleverde video s verschilt. Door sommige aios wordt dit als storend ervaren omdat er geen continuïteit is. Anderen vinden het een verrijking doordat ze telkens een ander aspect van hun wijze van communicatie belicht krijgen. Het gebrek aan uniformiteit in beoordeling en feedback is een aandachtspunt. Dit komt in het bijzonder naar voren bij de APC toets, maar lijkt ook voor andere toetsen te gelden. Uit het gesprek met de docenten bleek dat ook de ComBeLs op verschillende wijzen gebruikt worden. Wel wordt de ComBeL door zowel aios als docenten als een prettig instrument ervaren, dat focus kan geven aan gesprekken zodat alle aspecten van het leerproces van de aios aan bod komen. De rode draad lijkt te zijn dat de uitvoerder in het toetsen zijn eigen weg mag bepalen. Het auditteam kreeg de indruk dat dit vanuit integere houding gedaan wordt, maar de aios ervaren dit als onrustig omdat het niet transparant is. 15

16 Het toetsen van vaardigheden wordt door de opleiding als verbeterpunt naar voren gebracht. Iedere betrokkene is het er mee eens dat deze toetsing in de praktijk moet gebeuren, maar er is nog geen structuur voor. Bij de procedure voor de overdracht van de aios van het eerste naar het derde jaar wordt een overdrachtsdocument gebruikt dat door de aios na het eerste jaar wordt opgesteld en dat door de docent en opleider wordt geaccordeerd. Dit document wordt aan de opleider van het derde jaar ter beschikking gesteld. Dit gebeurt echter niet standaard, omdat sommige opleiders juist met een schone lei willen beginnen en om die reden geen dossier over de aios willen inzien. Het instituut gaf aan dat er geen portfolio meer bijgehouden wordt door de aios, omdat de universiteit deze functie in Blackboard, de ELO, niet meer ondersteunt. De aios gaven aan nog wel een eigen portfolio bij te houden. De aios worden geacht om alles bij te houden, dit gebeurt door sommigen op Blackboard, door anderen op papier. Vervolgens moet alles op een USB-stick gezet worden zodat het toegankelijk is voor de opleider. 5c Bijstelling individueel opleidingsplan De aios melden dat er veel aandacht is voor de individuele opleidingsplannen. Ook de opleiders worden geïnstrueerd in het gebruik daarvan. ComBeLs, andere toetsen en feedback worden gebruikt om de individuele opleidingsplannen bij te stellen. Door de aios wordt het als probleem ervaren dat er een combinatie is van docent-begeleider en beoordelaar. Zij ervaren het niet als veilig dat dezelfde docent- begeleider met wie zij problemen bespreken ook degene is die hen later beoordeelt, zodat die problemen mogelijk in hun beoordeling betrokken worden. 5d Opleidingsresultaten VU mc Landelijk gemiddelde Totaalscore op LHK-toets afgelopen jaar I Fase 5 43,4% 43,1% Totaalscore op LHK-toets afgelopen jaar II Fase 6 44,2% 45,2% Uitkomst landelijke STARtclass I gemiddeld percentage goede antwoorden kennistoets 65,0% 66,4% Uitkomst landelijke STARtclass II Percentage in eerste keer geslaagde deelnemers aan kennistoets 100% 98,7% Uitkomst landelijke STARtclass III Percentage voldoende scorende deelnemers aan scenariotoets 100% 100% Uitkomst landelijke STARtclass IV. Percentage in eerste keer geslaagde deelnemers aan scenariotoets 85,4% 87.7% Percentage voldoende scores van de alumni op de vraag in welke mate de opleiding hen voorbereid op het huisartsenvak 80,0% 80,8% 16