Voortgangsrapportage Juli t/m september PASTEL Professionele Accreditatie en Schaalvergroting van Toepassing van Elektronische Leerobjecten

Transcriptie

1 Voortgangsrapportage Juli t/m september 2007 PASTEL Professionele Accreditatie en Schaalvergroting van Toepassing van Elektronische Leerobjecten Penvoerende instelling: Participerende instellingen: Universiteit Leiden, LUMC Universiteit Leiden, Boerhaave Commissie Rijksuniversiteit Groningen, Wenckebach Instituut Radbouduniversiteit, Heyendael Commissie Datum: 30 oktober 2007 Kenmerk: Rapportage PASTEL.doc

2 Inhoudsopgave Inhoudsopgave... 2 Samenvatting... 3 Doelstelling... 3 Standlijnen overzicht... 4 Voortgang per fase... 4 Fase 1 pstellen accreditatie procedure... 4 Fase 2 Selectie lessen... 5 Fase 3 Koppeling Medischnderwijs.nl aan EL s... 5 Fase 4 Lessen accrediteren... 6 Fase 5 Integratie accreditatie in Medischnderwijs.nl... 7 Fase 6 Inzet en evaluatie... 7 Continuering... 8 Stuurgroep... 8 Kennis disseminatie... 8 Knelpunten... 9 Kostenoverzicht Declaratie Bijlagen Bijlage 1: nieuwe e-learning modules in Medischnderwijs.nl Bijlage 2: Medisch-Inhoudelijk Beoordelingsformulier E-Learning Bijlage 3: abstract NVM congres Bijlage 4: Medisch Inhoudelijke en onderwijskundige (her) beoordelingen

3 Samenvatting In dit derde kwartaal van het PASTEL project zijn de beoordelingen van de eerste tien e-learning modules geanalyseerd en hebben de deelnemende instellingen een herbeoordeling gedaan op basis van het aangepaste beoordelingsformulier. Dit heeft in ieder geval bij één e-learning module geleid tot een aanpassing van de beoordeling. Er is een begin gemaakt met de beoordeling van een nieuwe groep van in totaal 20 e-learning modules. Door de wisseling van een aantal projectleden, is de beoordeling van de modules enigszins vertraagd. We lopen dit in door in het komende kwartaal zowel de al geselecteerde e-learning modules te beoordelen als de op de planning staande nieuwe set van 20 modules. Er is een aantal e-learning modules ontwikkeld die zonder plug-ins gebruikt kunnen worden. Twee nieuwe projectmedewerkers en één nieuw stuurgroeplid zijn in het project begonnen. Er is een schema gemaakt met vergaderdata voor de rest van de projectperiode. Doelstelling Het merendeel van de medische faculteiten van Nederland gebruikt voor de distributie en registratie van Computer ndersteund nderwijs (C) momenteel Medischnderwijs.nl voorheen het Registratie Systeem, LRS.Net). Dit wordt tijdens de basisopleiding tot arts aangeboden via Internet op De basisopleiding is echter slechts het begin. Het beroep van arts evolueert zo snel dat hierop de uitdrukking een leven lang leren van toepassing is(1). Medische specialisten behouden slechts hun licentie wanneer zij door middel van bij- en nascholing voldoende accreditatiepunten halen. Voor deze doelgroep is het volgen van cursorisch onderwijs, zoals cursussen en symposia lastig met het werk te combineren. Daarnaast bestaat een grote behoefte aan self-directed leren, waarbij de arts zelfstandig de lacunes in kennis en vaardigheden die hij bij de uitoefening van het beroep constateert kan opvullen. De medische nascholingsinstituten hebben deze behoefte onderkend en willen het onderwijsaanbod uitbreiden met individueel, plaats- en tijd onafhankelijk e-learning modules (e-modules). Het ligt voor de hand om naast de ontwikkeling van eigen onderwijsmateriaal, de service van Medischnderwijs.nl hiertoe uit te breiden, zodat ook artsen hiervan gebruik kunnen maken in het nascholingstraject. Het aanbod van C dat via Medischnderwijs.nl voor handen is moet echter wel voldoen aan de standaarden van de specialistenverenigingen, wil het volgen hiervan accreditatie punten opleveren. Het onderwijsmateriaal moet hiertoe eerst door de nascholingsinstituten zelf beoordeeld worden. Een positief neveneffect van deze beoordeling is dat het medisch inhoudelijke niveau van het bestaande C hierdoor beter wordt vastgelegd en de status van beoordeelde lessen toeneemt. Het ter beschikking stellen van Medischnderwijs.nl met het daarin aanwezige C ter beoordeling en gebruik door de nascholingsinstituten in ruil voor een toegenomen status van dit materiaal lijkt dan ook een eerlijke. Het gezamenlijke gebruik van e-modules binnen de medische basis- en vervolgopleidingen verhoogt de inzet en kwaliteit van de bestaande C middelen en heeft tevens een aanzuigende werking op de rest van het medische opleidingscontinuüm, zoals de verpleegkunde en paramedische opleidingen. Door het opschalen van Medischnderwijs.nl van de basisopleiding naar de vervolgopleidingen wordt de doelgroep direct verviervoudigd. Tevens wordt de weg gebaand voor aansluiting met andere medisch georiënteerde opleidingen

4 Standlijnen overzicht Het oorspronkelijke standlijnen overzicht uit het Controlling Document is uitgebreid met een weergave van het aantal lessen dat binnen een bepaalde fase gerapporteerd wordt. De gearceerde delen geven de voortgang aan in de betreffende fase. Fase 1 Fase 2 Fase 3 Fase 4 Fase 5 Fase 6 Accreditatie procedure Selectie lessen Koppeling Medischnd erwijs.nl- EL n 2007 Feb 2007 Mrt 2007 Apr Mei Juni Juli Aug Sept kt Nov Dec n Feb Mrt Apr Mei Juni Juli Aug Sept kt 2008 Nov 2008 Dec 2008 Lessen accrediteren Integratie accreditatie- Medischnd erwijs.nl Inzet en evaluatie Legenda Geen activeit Geplande activiteit Geplande deliverable 20 Voortgang activiteit Voortgang per fase Fase 1 pstellen accreditatie procedure Naar aanleiding van de ervaringen met de beoordeling van de eerste 10 lessen is het medisch-inhoudelijk beoordelingsformulier aangepast. De nieuwste versie van dit beoordelingsformulier is gebruikt om een herbeoordeling te doen van een aantal e-learning modules. De huidige versie staat gepubliceerd in het projectlogboek ( Tevens is op basis van de eerste ervaringen besloten om de onderwijskundige beoordeling te blijven uitvoeren. Het levert nuttige informatie op die toegevoegd kan worden aan Medischnderwijs.nl wanneer ten behoeve van Fase 5, de integratie van accreditatie informatie wordt gerealiseerd. Binnen het project spreken we over het beoordelen van een e-module oftewel de vooraccreditatie. Pas als de drie beoordelingen hebben plaastgevonden is de e-module voorgeaccrediteerd en kunnen ze eventueel geaccrediteerd worden door een beroepsvereniging. De beoordeelde e-module kent dan al het kwaliteitskeurmerk zoals dat is opgesteld door de nascholingsinstituten

5 Fase 2 Selectie lessen De selectieprocedure en selectiecriteria zijn definitief vastgesteld. De huidige versies zijn terug te vinden in het projectlogboek ( Na de selectie van de eerste 10 e-modules zijn vorig kwartaal in totaal 20 nieuwe e-learning modules gekozen, waarvan de beoordeling nu in gang is gezet. De lijst met modules is opgenomen in de vorige kwartaalrapportage. ok is alweer in gang gezet dat een nieuwe serie van in totaal 20 modules wordt gekozen, zeven door iedere PAG, zodat die in de komende periode ook beoordeeld kunnen worden. Het LUMC is in het kader van andere projecten hard aan het werk om e-learning modules plug-in loos te maken. Het is prettig dat het Pastel project daarvan mede kan profiteren. In de afgelopen periodes is een twintigtal modules omgezet naar een versie die zonder plug-ins werkt. Een lijst van deze modules is opgenomen in bijlage 1. m deze plug-in loze content te produceren is (in het kader van andere projecten) een nieuwe auteurstool ontwikkeld MASTER (Menu Assisted Simulation To Enter Reality) waarmee e-learning modules ontwikkeld kunnen worden. Het bevat de mogelijkheid om informatie aan te bieden (tekst, audio, foto s, video, etc) en om bepaalde veelgebruikte toetsvragen te stellen en andere interacties van gebruikers af te handelen. Met dit programma zijn ondertussen enkele e-learning modules gemaakt en in Medischnderwijs.nl ter beschikking gekomen. Daarnaast is SLIDES ontwikkeld. Dit is de vervanger van bjector-pro om banddiaseries mee te tonen en de gebruiker te testen middels openvraag antwoorden met tekstherkenning. Met dit programma zijn 20 nieuwe modules ter beschikking gekomen in Medischnderwijs.nl, 10 over verschillende dermatologische onderwerpen en 10 verschillende toetsen met gemengde diagnosen op het gebied van de dermatologie. Het Wenckebach Instituut heeft aangegeven in ieder geval te kijken of uit deze nieuwe modules een aantal geselecteerd kan worden voor beoordeling. Wanneer medischonderwijs.nl niet genoeg materiaal biedt dat inhoudelijk overeenkomt met de wensen van de instellingen dan gaan we eerst na of er nog eigen materiaal beschikbaar gesteld kan worden aan medischonderwijs.nl en gaan dan dat beoordelen. Fase 3 Koppeling Medischnderwijs.nl aan EL s De technische informatie die nodig is om bij Heyendael en bij het Wenckebach Instituut de door hen gebruikte webomgevingen te koppelen met Medischnderwijs.nl is bekend. De mogelijke koppeling van website PAG-Heyendael aan Medischnderwijs.nl is vastgelegd: De PAG-Heyendael website wordt getrust op de Heyendael-URL. De Heyendael website kan de benodigde parameters doorgeven aan Medischnderwijs.nl. Dit zal in een testomgeving verder worden getoetst. Met de RichURL kan je een Blackboard koppeling met Medischnderwijs.nl tot stand brengen. In de test-omgeving van Nestor, de leeromgeving die binnen de Rijks Universiteit Groningen en het Wenckebach Instituut gebruikt wordt, is de RichURL klaargezet, waardoor de test-nestor nu een koppeling heeft met Medischnderwijs.nl. Er zal mogelijk ook een koppeling gemaakt worden tussen de website van het Wenckebach Instituut en medischonderwijs.nl. p basis van de eerste testen met de koppelingen wordt door Heyendael en het Wenckebach Instituut aangegeven dat het mogelijk een probleem is dat de informatie die wordt meegestuurd in de Heyendael- URL en de Rich URL niet is versleuteld (encrypt). Hierdoor is het mogelijk dat anderen bepaalde persoonlijke informatie onderscheppen en misbruiken, bijvoorbeeld een adres. In de komende periode zal worden uitgezocht in hoeverre dit daadwerkelijk een probleem is voor de PAG s en hoe dit probleem opgelost kan worden

6 Fase 4 Lessen accrediteren Beoordelingen pilot selectie (10 e-modules) De eerste tien e-modules zijn beoordeeld en in het afgelopen kwartaal herbeoordeeld op basis van het nieuwe inhoudelijke beoordelingsformulier (zie bijlage 2). In het nieuwe formulier wordt aan het begin het leerdoel en de setting/leeromgeving van het huidige gebruik vermeld als achtergrondinformatie. Aan het eind van het formulier zijn twee vragen toegevoegd: Voor welk leerdoel ten behoeve van de nascholing vind men de e-learning module geschikt?, In welke setting / leeromgeving ziet men mogelijkheden voor deze e-learning module (eventueel in combinatie met andere e-learning modules). nderstaande tabel geeft een overzicht van een samenvattend oordeel van de inhoudelijke en onderwijskundige beoordeling, plus een eindoordeel. e-learning module MIB 1 1 MIB 2 WK 2 Eindoordeel 93: Nasleep van een kraambed LUMC 447: Functieonderzoek van de gewrichten - +? + (?) LUMC 30: TRC Pharmacology Database + -? + (?) LUMC 391: Injury: Dat doet ie anders nooit UMCG 406: Injury: Uitglijder UMCG 415: CASK: Aneurysma Aorta Abdominalis + + +/- + UMCG 404: Injury: Scheiding UMCN/ UMCG 851: Wachtkamer: Genetisch syndromen mits + mits UMCN verbeteringen 873: Schotwond: Patiënt met een schotwond in - - +/- - UMCN de thorax 494: KRUL casus 23N: Door de rug gegaan: Lage rugpijn???? UMCN Legenda + Geschikt voor nascholing +/- Deels geschikt - Niet geschikt voor nascholing De herbeoordelingen zijn uitgevoerd door het UMCG en dit heeft geleid tot een aanpassing van de beoordeling van de CASK module. De beoordeling van de drie Injury modules is gelijk gebleven. Door de wisseling van projectmedewerkers, zowel bij Boerhaave als bij Heijendaal, is het nog niet helemaal duidelijk wat de precieze uitkomsten zijn m.b.t. de herbeoordeling. Evaluatie beoordelingen pilot selectie (eerste 10 modules) p de vergadering van 26 september 2007 zijn de eerste tien beoordelingen (bovenstaande tabel) van alle drie de PAG s besproken. We constateren ook tijdens deze vergadering dat het geven van één eindoordeel een wat misleidende conclusie geeft. Het eindoordeel strookt namelijk niet altijd met de beoordeling die de beoordelaar op de verschillende onderdelen heeft gedaan. ok conflicteert het eindoordeel regelmatig met de tabel waarin de beoordelaar aangeeft voor welke doelgroep hij/zij de module geschikt acht. Het is daarom goed dat in het nieuwe beoordelingsformulier de mogelijkheid van het eindoordeel is weggehaald. De doelstelling van het project is ook veel meer om op te schalen. Dit houdt in bekijken voor welke andere doelgroep(en) de e-learning module ook geschikt kan zijn. En deze informatie wordt gegenereerd met het huidige (nieuwe) beoordelingsformulier. De ervaringen met het nieuwe medischinhoudelijke beoordelingsformulier zijn dus positief. Dit formulier zal verder gebruikt worden bij de medisch-inhoudelijke beoordelingen. 1 Medisch Inhoudelijk Beoordelaar 2 nderwijskundig beoordelaar - 6 -

7 Beoordelingen tweede selectie (20 modules) In verband met de wisseling van een aantal projectleden bij de PAG s Heyendael en Boerhaave, is er wat vertraging ontstaan in de beoordeling van de nieuw geselecteerde modules. Bij alle PAG s zijn al wel afspraken gemaakt met beoordelaars, maar er zijn nog geen beoordelingsrapporten beschikbaar op dit moment. m ervoor te zorgen dat we niet te ver achter gaan lopen met het beoordelen, wordt er nu aan getrokken om ook opnieuw weer 20 modules te selecteren en die samen met de al eerder geselecteerde modules te laten beoordelen in de komende project periode. Fase 5 Integratie accreditatie in Medischnderwijs.nl In juni 2007 zijn we begonnen met ons te oriënteren op wat er zichtbaar moet worden in Medischnderwijs.nl van de interne accreditaties. Tijdens een bijeenkomst met project- en stuurgroepleden is hierover verder gediscussieerd. Het voorstel is om alleen een stempel van kwaliteit af te geven aan e-learning modules. Dit houdt in dat alleen beoordelingen met een positief resultaat worden opgenomen in Medischnderwijs.nl. Het wordt dan een positief stempel met goedgekeurd door. Waarbij op de alleen de naam van de PAG wordt neergezet en NIET die van de individuele beoordelaars. De informatie van de daadwerkelijke beoordelingen wordt opgenomen in Medischnderwijs.nl als extra informatie bij de les. nderstaand plaatje geeft aan hoe een e-learning module wordt gepresenteerd in Medischnderwijs.nl. Wanneer je op de button show details klikt krijg je al extra informatie over de module. Pastel beoordeeld We zouden de informatie over de kwaliteitsboordeling ook achter een specifieke (extra) button kunnen zetten, zoals in de illustratie wordt aangegeven. Een dergelijke button zou een PASTEL kwaliteitsstempel representeren. In de extra informatie is dan te zien door welke PAG de module positief is beoordeeld en hoe deze is beoordeeld. pnemen van een samenvatting van de beoordelingsresultaten kan alleen wanneer de verschillende beoordelingen van inhoudelijk experts en onderwijskundige met elkaar stroken. Wanneer de beoordelingen positief zijn maar uit elkaar liggen, dan moeten de beoordelaars dus met elkaar om tafel om een concensus te bereiken over de uiteindelijke beoordeling. Extra onderdeel van alle vergaderingen (zonder stuurgroep) wordt om als hamerstuk de beoordelingen voor te dragen waarvan we denken dat ze een kwaliteitsstempel kunnen krijgen. Bij twijfel wordt het stempel niet uitgedeeld. De goedgekeurde modules kunnen voor officiële accreditatie aangeboden worden aan een beroepsvereniging en kunnen eventueel ook op de PASTEL website individueel aanklikbaar worden gemaakt. Fase 6 Inzet en evaluatie Fase 6 is volgens het standlijnen overzicht nog niet begonnen

8 Continuering Stuurgroep Met het vaststellen van de vergaderfrequentie is al in het vorige kwartaal een verandering doorgevoerd in de aanpak van aanwezigheid van de stuurgroepleden bij vergaderingen. Er is een aantal stuurgroep vergaderingen afgesproken waarbij in de vergadering een bepaald moment met een aantal specifieke discussiepunten voor de stuurgroep staat gepland. De stuurgroep zal bij dat agendapunt aanwezig zijn. In de stuurgroep vergadering van 26 september 2007 zijn de volgende discussiepunten aan de orde gesteld: 1. Fase 5: wat moet er in Medischnderwijs.nl zichtbaar gemaakt worden van de resultaten van de beoordeling (interne accreditatie)? 2. Hoe staat het met het inzetten van de e-modules in de cursussen van de PAG s? 3. pvolging stuurgroeplid Boerhaave? 4. PR, Congressen, etc. Ad 1. wat moet er in Medischnderwijs.nl zichtbaar gemaakt worden van de resultaten van de beoordelingen? De conclusies van de bespreking en het antwoord op deze vraag is al beschreven in paragraaf fase 5. Kort samengevat komt het erop neer dat alleen beoordelingsinformatie wordt opgenomen van positief beoordeelde modules. Dit wordt opgenomen als een soort kwaliteitskeurmerk, waarbij de inhoudelijke informatie over de medisch-inhoudelijke en onderwijskundige beoordeling opvraagbaar is door op een button te klikken. Ad 2. Inzetten van E-modules in de cursussen van de PAG s Wenckebach wil de e-modules inbouwen in het aanbod aan cursussen. Naast speerpunten als nascholing voor Huisartsen, verpleeghuisartsen, verplegend personeel, wil Wenckebach ook kijken naar de discipline overstijgende cursussen voor AI s. Heyendael heeft nog geen specifieke opzet, maar denkt aan het additioneel aanbieden van de modules bij cursussen. Boerhaave heeft al de mogelijkheid om e-modules aan cursussen te koppelen. Docenten zouden actief benaderd moeten worden met de lijst met e-learning modules met een stempel. Ad 3. pvolging stuurgroeplid Boerhaave? Stuurgroeplid Carrol Terleth van Boerhaave is vervangen door nneke Kuijken. Zij heeft niet exact zijn functie binnen Boerhaave overgenomen, maar wel zijn rol als stuurgroeplid in het PASTEL project. Ad 4. PR, Congressen, etc. De stuurgroep zal tijdens bijeenkomsten waar zij in contact komen met het KNMG en de beroepsverenigingen ook het PASTEL project noemen en toelichten. Dan kan door de projectgroep eventueel een presentatie verzorgd worden indien gewenst. De stuurgroep zal ook de KNMG en/of een beroepsvereniging gericht benaderen om eens met hun te praten over het beoordelen / accrediteren en e-learning modules. Er is nog weinig ervaring met de accreditatie van e-learning modules en het lijkt een goede strategie om hier alvast eens een gesprek over aan te gaan met de accrediterende instanties. Kennis disseminatie De PAG s willen een eigen identiteit maken die de samenwerking tussen de PAG s betreffende e- learning weergeeft. Hierin worden de eigen logo s van de afzonderlijke PAG s opgenomen. De gemeenschappelijke website, kan hier de hoofdmoot in vormen. De vormgever van Paog.net zit toevallig ook in het PASTEL project, dus de lijnen zijn kort. De paog website is nog niet volledig en wordt in de toekomst nog verder uitgebreid en gevuld. Als de paog website meer inhoud heeft, zal ook de URL naar het PASTEL project er op gezet worden. Congressen kunnen gebruikt worden om andere nascholingsinstituten (nationale en internationale) te informeren en eventueel samen te werken

9 nderwerpen voor congresbijdragen kunnen zijn: - Wijze van beoordeling van e-learning modules - Hoe wil je met e-learning omgaan in nascholingscursussen - Beschikbare beoordeelde e-learning modules p het NVM congres (14 16 november 2007) zal een lezing over het PASTEL worden gegeven met als titel naar een beoordelingsstandaard voor medische E-learning modules (zie bijlage 3). verlappend met het NVM congres zijn de SURF nderwijsdagen op 13 en 14 november We hebben besloten om hier geen presentatie of paper voor voor te bereiden, om twee redenen. nze doelgroep komt niet bij de SURF onderwijsdagen maar is aanwezig bij het NVM congres. Vanwege de overlap is het praktisch onhandig om bij beide congressen aanwezig en actief te zijn. Knelpunten De netwerkpoorten die open moeten staan voor gebruik van Medischnderwijs.nl alsook de plug-ins die geïnstalleerd moeten worden leveren in dit stadium nog ongemakken op. Er wordt volop gewerkt aan oplossingen. Voor e-modules gemaakt in DPS en bjector is het streven dat per 1 januari 2008 geen plug-in meer nodig zijn. Dan zullen in ieder geval een aantal van - deze e-modules webbased gemaakt zijn. Halverwege juni is het vertrek van de projectmedewerkster van PAG Heyendael gemeld. In Nijmegen is een opvolger reeds gevonden, die is per 15 juli begonnen. ok is er een wisseling bij de projectmedewerker van PAG Boerhaave. De nieuwe medewerker is per beging september begonnen met de nieuwe baan. Door de wisseling van projectmedewerkers is er wat vertraging opgelopen in de beoordeling van de e- learning modules. We hebben acties ondernomen (hiervoor al genoemd in de rapportage) om deze vertraging weer in te lopen in de komende periode

10 Kostenoverzicht 7 July Begroting Gerealiseerde kosten In rapportage periode t/m rapportage periode Totaal Materiële kosten 42, , , , Gefaseerd personeel Fase 1 en 2 50, , , , Fase 3 en 4 146, , , , , Fase 5 73, , , , Fase 6 89, , Projectoverstijgend personeel Projectleiding/Accountantscontrole 33, , , , , Kennisdisseminatie/Financieel beheer 25, , , , , Personeel inc.overhead 418, , , , , Subsidie Maximaal 247, Restant tot rapportage periode 186, pgevraagd -t/m voorgaande periode 60, in rapportage periode 8, t/m rapportage periode 69, Restant op te vragen 177,

11 8 August Begroting Gerealiseerde kosten In rapportage periode t/m rapportage periode Totaal Materiële kosten 42, , , , , Gefaseerd personeel Fase 1 en 2 50, , , , Fase 3 en 4 146, , , , , Fase 5 73, , , , , Fase 6 89, , Projectoverstijgend personeel Projectleiding/Accountantscontrole 33, , , , , Kennisdisseminatie/Financieel beheer 25, , , , , Personeel inc.overhead 418, , , , , Subsidie Maximaal 247, Restant tot rapportage periode 177, pgevraagd -t/m voorgaande periode 69, in rapportage periode 9, t/m rapportage periode 78, Restant op te vragen 168,

12 9 September Begroting Gerealiseerde kosten In rapportage periode t/m rapportage periode Totaal Materiële kosten 42, , , , Gefaseerd personeel Fase 1 en 2 50, , , Fase 3 en 4 146, , , , , Fase 5 73, , , , , Fase 6 89, , Projectoverstijgend personeel Projectleiding/Accountantscontrole 33, , , , , Kennisdisseminatie/Financieel beheer 25, , , , , Personeel inc.overhead 418, , , , , Subsidie Maximaal 247, Restant tot rapportage periode 168, pgevraagd -t/m voorgaande periode 78, in rapportage periode 9, t/m rapportage periode 88, Restant op te vragen 159, Declaratie De totale baten voor PASTEL voor deze projectperiode bedragen 27, en kunnen worden overgemaakt op rekeningnummer t.n.v. Academisch Ziekenhuis Leiden/LUMC te Leiden onder vermelding van Projectnummer 40265/

13 Bijlagen Bijlage 1: nieuwe e-learning modules in Medischnderwijs.nl Plugg-in knelpunt en/of fase selectie lessen Het Plugg-in probleem dat binnen het PASTEL project als knelpunt wordt gezien, geeft ook problemen in het studentenonderwijs. m deze reden heeft het LUMC ervoor gekozen het bestaande banddia programma van Dermatologie (bjector PR), om te zetten in een webversie (Slides). Voor deze versie zijn geen Plugg-ins meer nodig is. Deze omzetting valt niet binnen het PASTEL project, maar heeft wel als gevolg dat er meer E-learning modules binnen Medischnderwijs.nl beschikbaar komen voor het PASTEL project. In de afgelopen periode kwamen 20 nieuwe E-learning modules op het gebied van Dermatologie beschikbaar die voor alle gebruikersgroepen van Medischnderwijs.nl open staan: Slides: Dermatologie Beeldherkenning Eczeem Slides: Dermatologie Beeldherkenning Infecties Slides: Dermatologie Beeldherkenning SA Slides: Dermatologie Beeldherkenning Bulleuze dermatosen Slides: Dermatologie Beeldherkenning Psoriasis Slides: Dermatologie Beeldherkenning Benigne huidafwijkingen Slides: Dermatologie Beeldherkenning Maligne huidafwijkingen Slides: Dermatologie Beeldherkenning Haarafwijkingen Slides: Dermatologie Beeldherkenning Diversen Slides: Dermatologie Beeldherkenning Bindweefselziekten Slides: Dermatologie toets 1 Slides: Dermatologie toets 2 Slides: Dermatologie toets 3 Slides: Dermatologie toets 4 Slides: Dermatologie toets 5 Slides: Dermatologie toets 6 Slides: Dermatologie toets 7 Slides: Dermatologie toets 8 Slides: Dermatologie toets 9 Slides: Dermatologie toets 10 Naast bovengenoemde omzetting werd door het LUMC gewerkt aan een volledig nieuw programma, genaamd MASTER. Met MASTER kunnen E-learning modules ontwikkeld worden met de volgende eigenschappen: - Tutorial met toetsing, - Multimedia gebruik, zowel afbeeldingen als plaatjes en geluiden, - Interactiviteit in de vorm van verschillende pagina s met een menustructuur waar de gebruiker de loop door het programma bepaalt, - Later hervatten van de module op de plaats waar deze eerder is verlaten is mogelijk, - Integratie met Medischnderwijs.nl voor het opslaan van de score en commentaar Binnen MASTER zijn inmiddels een aantal nieuwe E-learning modules ontwikkeld en er staan nog enkele nieuwe modules in de planning. Voor welke gebruikersgroepen deze modules open zullen staan is op dit moment nog niet duidelijk. Momenteel zijn beschikbaar: Master: Kleine verrichtingen - Ingegroeide teennagel Master: Kleine verrichtingen - Subunguaal hematoom Master: Verbandleer -

14 Bijlage 2: Medisch-Inhoudelijk Beoordelingsformulier E-Learning Naam E-Learning module LessonID in Medischnderwijs.nl Beoordelaar Voornaam Achternaam Specialisme Instelling adres Datum beoordeling 1. Gebruiksvriendelijkheid 1 Het programma is (eventueel na raadplegen van de beschikbare handleiding) goed te bedienen Wat moet er aan de handleiding worden aangepast/toegevoegd: 2. Medische Inhoud 2A Inhoud van de module is conform de huidige stand van de wetenschap en/of richtlijnen Geef aan hoe de module aangepast dient te worden om wel aan deze richtlijnen te voldoen: 2B Inhoud van de module is conform de algemeen aanvaarde inzichten m.b.t. een adequate beroepsuitoefening Geef aan hoe de module aangepast dient te worden om wel aan deze inzichten te voldoen: 2C Inhoud van de module is objectief, wordt niet beïnvloed door eigen gevoel of vooroordelen en waar mogelijk zijn relaties met sponsors vermeden of worden duidelijk vermeld

15 Geef aan hoe de module aangepast dient te worden om wel aan deze eis te voldoen: 3. Niveau van het programma Beoordeling van het niveau van het programma voor de verschillende doelgroepen Te laag Geschikt Te hoog Niet beoordeeld Studenten Co-assistenten Arts-assistenten (AIS) Huisartsen Specialisten Verpleegkundigen in opleiding Verpleegkundigen 4. Algemeen 4A Leerdoel: Geef een omschrijving van het leerdoel wat met deze module behaald kan worden in het Postacademisch onderwijs 4B Setting: Geef een omschrijving van de setting waarin de module bruikbaar is voor het Postacademisch onderwijs 4C Hoeveel studieminuten worden naar uw schatting besteed bij het doorlopen van de module t.b.v. nascholing?.. Minuten

16 5. Algemene indruk en opmerkingen Bijlage 3: abstract NVM congres 131 PASTEL: Naar een beoordelingsstandaard voor medische E-learning modules. J Goris, P.M. Bloemendaal, P. De Vries Robbé, S. Eggermont UMCG, LUMC, UMCN Probleemstelling Voordat bestaande E-learning modules succesvol ingezet kunnen worden in het Post Academisch nderwijs Geneeskunde (PAG), dient hun geschiktheid hiervoor te worden vastgesteld. Momenteel is hiervoor nog geen algemeen aanvaarde procedure beschikbaar. Door het project Postacademische Accreditatie en Schaalvergroting van Toepassing van Elektronische Leerobjecten (PASTEL) 3 is een methode ontwikkeld om de kwaliteit van E-learning modules te beoordelen. Methode Een eerste stap was het ontwikkelen van beoordelingscriteria. Hierbij werden twee onderdelen onderscheiden, namelijk de medische inhoudelijke beoordeling en de onderwijskundige beoordeling. De inhoudelijke beoordelingscriteria zijn afgeleid van de criteria die door de landelijke accreditatieorganen zijn gesteld voor het beoordelen van medisch-inhoudelijk onderwijsmateriaal. Deze criteria zijn verwerkt in een beoordelingformulier. Naast vragen over de medische inhoud worden tevens vragen gesteld over het bereiken van de leerdoelen met behulp van het programma, het niveau van het programma voor de verschillende doelgroepen, de ingeschatte studietijd en de gebruikersvriendelijkheid. De onderwijskundige beoordelingslijst is gemaakt aan de hand van literatuur op het gebied van het ontwikkelen van effectieve E-learning modules. De vragen hebben ondermeer betrekking op onderwijskundige opzet en vormgeving van de E-learning module. Deze lijst wordt als leidraad gebruikt bij het beoordelen van de onderwijskundige aspecten van E-learning modules. Per E-learning module wordt het medisch inhoudelijke formulier ingevuld door twee inhoudsdeskundigen. Het onderwijskundige formulier wordt ingevuld door één onderwijskundige. De combinatie van deze beoordelingen leidt tot een onderbouwd geschiktheidoordeel. Resultaten De resultaten van het project tot nu toe bestaan uit: - een formulier voor de inhoudelijke beoordeling, - een formulier voor de onderwijskundige beoordeling, 3 PASTEL project Participerende instellingen: Boerhaave Commissie, L.U.M.C. Wenckebach Instituut, U.M.C.G. Heyendael Commissie, St. Radboud Het project wordt gesubsidieerd door SURF

17 - per formulier een toelichting hoe het moet worden gebruikt, - een beschrijving van de beoordelingsprocedure, - Een beschrijving van de selectieprocedure van E-Learning modules uit Discussie Verder onderzoek naar de validiteit en betrouwbaarheid van de methode is nodig maar niet voldoende. Het introduceren van E-learning modules binnen de nascholing van medische specialisten is nieuw. verleg zal moeten worden gestart met de landelijke accreditatie organen over het accrediteren van nascholing waarbij E-learning een geïntegreerd onderdeel is. Trefwoord: Wijze van presentatie: Paper 'uit de onderwijspraktijk' Correspondentie-adres: Drs. J Goris U.M.C.G. Wenckebach Instituut Hanzeplein CC GRNINGEN

18 Bijlage 4: Medisch Inhoudelijke en onderwijskundige (her) beoordelingen Herbeoordeling e-module 873 door UMCN De toegevoegde vraag Naar aanleiding van commentaar op het beoordelingsformulier dat u eerder heeft ingevuld hebben wij een vraag toegevoegd. Het zou heel fijn zijn als u deze vraag zou kunnen beantwoorden. Dit zou niet meer dan 10 minuten in beslag moeten nemen. mdat uw vorige beoordeling al enige tijd terug was heb ik op de volgende pagina een screenshot en een link toegevoegd mocht u de module nog even kort willen bekijken. Ik heb ook de beoordeling die u destijds hebt ingevuld toegevoegd. 4A Leerdoel: Geef een omschrijving van het leerdoel wat met deze module behaald kan worden in het Postacademisch onderwijs De student is in staat theoretisch en op systematisch wijze een acuut gewonde patiënt met bedreigde vitale functies te diagnosticeren en te behandelen volgens de richtlijnen van de ATLS 4B Setting: Geef een omschrijving van de setting waarin de module bruikbaar is voor het Postacademisch onderwijs Ter voorbereiding van scenario training mbv simulatiepatienten of human patient simulator De module waar het om gaat De e-module heet Schotwond is te vinden op de volgende website: Als u zelf al een gebruikersnaam heeft voor medischonderwijs.nl, dan kunt u deze gebruiken. Is dat niet het geval, dan kunt u deze combinatie gebruiken: Gebruikersnaam : Beoordelaar.Pastel.Peek@student.ru.nl Wachtwoord : Beoordeling

19 Het eerder door u ingevulde formulier Naam E-Learning module Schotwond LessonID in Medischnderwijs.nl 873 Beoordelaar Voornaam Harry Achternaam Van Goor Specialisme Abdominaal Chirurg Instelling UMC St Radboud adres h.vangoor@chir.umcn.nl Datum beoordeling Leerdoel 1A De leerdoelen zijn duidelijk geformuleerd, moet scherper omschreven worden met meerdere deeldoelstellingen. Te vaag. Tevens te uitgebreid

20 1B De leerdoelen worden middels het volgen van de module bereikt, de leerdoelen zijn veel te omvattend gesteld om met 1 E-learning module te halen. 1C De module is een efficiënt middel om de leerdoelen te bereiken, zie boven 1D Hoeveel studieminuten worden naar uw schatting besteed bij het doorlopen van de module t.b.v. nascholing? 30.. Minuten 2. Gebruiksvriendelijkheid 2 Het programma is (eventueel na raadplegen van de beschikbare handleiding) goed te bedienen : - loopt vast op pagina 4. - niet eenduidig in volgende pagina - niet altijd: ik weet niet mogelijkheid - herkent sommige synoniemen niet 3. Medische Inhoud 3A Inhoud van de module is conform de huidige stand van de wetenschap en/of richtlijnen, duidelijk Amerikaans, met name Scoop en Run versus Stay en play 3B Inhoud van de module is conform de algemeen aanvaarde inzichten m.b.t. een adequate beroepsuitoefening 3C Inhoud van de module is objectief, wordt niet beïnvloed door eigen gevoel of vooroordelen en waar mogelijk zijn relaties met sponsors vermeden of worden duidelijk vermeld 4. Niveau van het programma Beoordeling van het niveau van het programma voor de verschillende doelgroepen Te laag Geschikt Te hoog Niet beoordeeld Studenten X Co-assistenten X Arts-assistenten (AIS) X Huisartsen X, onderwijs niet van toepassing op huisartsen Specialisten X Verpleegkundigen in opleiding X; *liever kolom niet geschikt Verpleegkundigen X; *

21 5. Algemene indruk en opmerkingen - sommige antwoorden worden weggegeven in gesproken tekst bijv. shock - herkent synonieme of anderssoortige omschrijvingen niet. mgekeerd herkent zeer foute omschrijvingen als goed - duurt lang voordat videopassage geladen zijn en verstoord worden - op pagina 3. staat tweede overweging, maar is niet duidelijk waarnaar dit verwijst - is amerikaans, niet volledig conform Europees of Nederlands - Pagina 12: X-Thorax: resolutie slecht 6. Eindoordeel 6 Deze module is geschikt voor nascholing, onderwerp wel, echter moet aangepast, eventueel stomp letsel (komt vaker voor), gebruiksvriendelijker pmerkingen Margret Alers: De module werd geaccrediteerd via mijn laptop en via mijn account. De docent noemde de auteur van deze module voordat hij de module gezien had. Toen de module vastliep bij pagina 4. hebben we samen gekeken naar de oplossing: hoe je bij pagina 5. door kon gaan. Docent maakte aandachtig geconcentreerd de module en vulde hierna dit formulier in. Medisch-Inhoudelijke beoordeling E-module 787 Naam E-Learning module Dokter, ik heb een plekje LessonID in Medischnderwijs.nl 787 Beoordelaar Voornaam Marcel Achternaam Pasch Specialisme Dermatoloog Instelling UMC St Radboud adres M.Pasch@Derma.umcn.nl Datum beoordeling Gebruiksvriendelijkheid 1 Het programma is (eventueel na raadplegen van de beschikbare handleiding) goed te bedienen 2. Medische Inhoud 2A Inhoud van de module is conform de huidige stand van de wetenschap en/of richtlijnen NEE Geef aan hoe de module aangepast dient te worden om wel aan deze richtlijnen te voldoen: Er staan schrijffouten in (b.v. dyshydrotisch eczeem i.p.v. dyshidrotisch eczeem (26) en er worden oude termen gebruikt (b.v. lichen sclerosus et atrophicans i.p.v. lichen sclerosus (35) en pityrosporon i.p.v. malassezia furfur (31)

22 2B 2C Inhoud van de module is conform de algemeen aanvaarde inzichten m.b.t. een adequate beroepsuitoefening Inhoud van de module is objectief, wordt niet beïnvloed door eigen gevoel of vooroordelen en waar mogelijk zijn relaties met sponsors vermeden of worden duidelijk vermeld 3. Niveau van het programma Beoordeling van het niveau van het programma voor de verschillende doelgroepen Studenten Co-assistenten Arts-assistenten (AIS) Huisartsen Specialisten Verpleegkundigen in opleiding Verpleegkundigen Te laag Geschikt Te hoog Niet beoordeeld 4. Algemeen 4A Geef een omschrijving van het leerdoel wat met deze module behaald kan worden in het Postacademisch onderwijs Leerdoel: Het leerdoel is dat de gebruiker het dermatologisch alfabet leert beheersen, namelijk de efflorescentieleer. p deze manier kan een arts een huidafwijking beschrijving zodat een andere arts kan reproduceren wat de beschrijvende arts gezien heeft. 4B Setting: Geef een omschrijving van de setting waarin de module bruikbaar is voor het Postacademisch onderwijs Als allereerste basis voor de dermatologische scholing van huisartsen 4C Hoeveel studieminuten worden naar uw schatting besteed bij het doorlopen van de module t.b.v. nascholing? Minuten 5. Algemene indruk en opmerkingen Het doel van de cursus, namelijk het aanleren van de efflorescentieleer is essentieel. Helaas wordt de bruikbaarheid ernstig beperkt door een aantal tekortkomingen: - Fouten, zo is cafe-au-lait (nr 3) geen efflorescentie en is de lichen planus (nr 12) op de foto niet polygonaal. Bij nr 15 wordt een plek van meer dan 1 centimeter een nodulus genoemd, terwijl dat per definitie niet mogelijk is, bovendien toont de plek epidermale veranderingen (nl hyperkeratose), wat bij een nodu(lu)s niet het geval is, want die is subcutaan gelegen! - Veel matige, onduidelijke en sterk verouderde foto s. p sommige foto s is zelfs niets (!) te zien (nr 60) - Teveel nadruk op verschil tussen nodulus en papel, terwijl dat op een foto nagenoeg niet te onderscheiden is. Al met al wordt er een belangrijk doel nagestreefd, maar is de kwaliteit van de cursus zoals de Nijmeegse studenten die al jaren krijgen ver onder de maat

23 onderwijskundige beoordeling e-module 494 Beoordelaar: Eline Noorbergen, RUG E-learning module: DPS: Door de rug gegaan (LRS id 494) Heldere introductie / nee/ n.v.t. A. De leerdoelen van de les worden vermeld. B. De leerdoelen zijn helder gesteld. C. Er wordt een link gelegd met de voorkennis van de gebruiker. D. Er wordt instructie gegeven over de bediening van het programma. Aanvullingen Er wordt instructie gegeven in de Help. Maar dit is niet voldoende. Wat moet ik bijvoorbeeld doen bij activerende gegevens? Er staan allemaal buttons met minnetjes erin. Wat betekent dit? Als ik ergens op klik is het onduidelijk wat er gebeurt en wat ik ermee moet doen. Stimulerende opzet / nee/ n.v.t. A. De opzet van de module zorgt ervoor dat je geïnteresseerd en nieuwsgierig blijft., je haakt af door de interface B. De module is uitdagend voor de doelgroep. C. De module is relevant voor de doelgroep. Weet niet D. De module geeft je het gevoel dat je vooruitgang boekt en doelen haalt. E. Het programma daagt deelnemers uit tot actief leren. Het vraagt om eigen inbreng. Aanvullingen o De interface en de bediening van het programma zijn te lastig. Daardoor haak je af. o Het score-overzicht is op zich wel motiverend. E-learning biedt meerwaarde / nee/ n.v.t. Het behalen van de doelen kan via e-learning minstens even goed als via andere leerwegen. Aanvullingen In principe zou e-learning goed kunnen werken, maar dit programma is zonder goede instructie niet te doen. Mate van controle / nee/ n.v.t. A. De module biedt de mogelijkheid om op eigen initiatief stukken over te slaan. B. De module leidt je op logische wijze stap voor stap door de stof. C. Je kunt zelf je weg door de lesstof bepalen. D. De module onthoudt waar je was gebleven wanneer je voortijdig het programma stopt. Aanvullingen Als je het programma stopt en later weer opstart is de score die je eerder hebt gehaald weg

24 Relevante opdrachten / nee/ n.v.t. De opdrachten zijn relevant voor het behalen van de doelen van het programma n.v.t. Aanvullingen Er worden niet echt opdrachten gegeven. De student moet zichzelf opdrachten geven. pdrachten zijn uitvoerbaar en haalbaar / nee/ n.v.t. A. Uitvoering van de activiteiten waar deelnemers toe worden uitgenodigd is? haalbaar met de beschikbare bronnen. B. Uitvoering van de activiteiten waar deelnemers toe worden uitgenodigd is? haalbaar binnen de vaak beperkte tijd waar deelnemers over beschikken. Aanvullingen o Het is onduidelijk hoe lang een casus zou duren, wanneer je de interface en bediening van dit programma goed snapt. Dus of dit qua tijd haalbaar is, kan ik niet inschatten. Feedback op opdrachten / nee/ n.v.t. A. De deelnemer krijgt een vorm van feedback Niet echt B. De feedback bestaat uit goed of fout. C. De feedback is inhoudelijk en vertelt waarom iets goed of fout is. D. De deelnemer krijgt feedback bij foute invoer (bijvoorbeeld: vul een numeriek in in plaats van het woord, dus 9 in plaats van negen ) Aanvullingen o Via de score kun je zien of je relevante dingen hebt gedaan. o Verder wordt er wel extra inhoudelijke informatie gegeven na een handeling. o Misschien zijn er nog andere plekken waar echt feedback wordt gegeven op de keuzes die een student heeft gemaakt, maar dat deel van het programma heb ik dan niet ontdekt. Zelftoetsing Het programma biedt mogelijkheden om te toetsen of de doelen behaald zijn of geeft suggesties hoe dit zelf te organiseren. Aanvullingen / nee/ n.v.t. Help functie / nee/ n.v.t. A. De module heeft een hulp functie. B.De hulpfunctie bestaat uit bedieningshulp. (Hulp wanneer je niet meer weet hoe je het programma moet bedienen) C. De hulpfunctie bestaat uit Inhoudelijke hulp (bijvoorbeeld een verklarende woordenlijst.) D. De hulp is context sensitief. E. De hulp is overal in de e-learning module op te roepen. Aanvullingen De help is niet voldoende om te snappen hoe je het programma moet bedienen. Multimedia A. Je hebt controle over audio, video/animatie als die worden gebruikt? (pauzeren, doorgaan, opnieuw spelen overslaan etc.) B.Bij lange video is er een hoofdstukindeling die vooruit of achteruit spoelen mogelijk maakt. C. De module vermijdt overbelasting van één kanaal (tekst als enige verheldering bij video of animatie is een voorbeeld van overbelasting van één kanaal) / nee/ n.v.t. n.v.t. n.v.t

25 D. De gebruikte geluiden ondersteunen het leren. (Er zijn geen onverwachte of storende geluiden of muziek te horen) Aanvullingen o De module is alleen tekstueel. Er is geen audio, video, animatie, etc. n.v.t. Tekst / nee/ n.v.t. A. De tekst is duidelijk en simpel. B.Het niveau van de tekst is geschikt voor de doelgroep. Weet niet C. Eventueel kleurgebruik in de tekst is functioneel en leidt niet af. Aanvullingen Algemene indruk en opmerkingen o De interface blijft lastig. Ik ben bang te lastig voor nascholers. De help is onvoldoende om duidelijk te maken wat er precies van je wordt verwacht. Eindoordeel Deze module is geschikt voor nascholing Motivatie indien nee is ingevuld: Ik kan onvoldoende beoordelen voor welke doelgroep in de nascholing dit geschikt is. Medisch-Inhoudelijke Beoordeling e-module 774 Naam E-Learning module Anatomie in Vivo LessonID in Medischnderwijs.nl 774 Voornaam Henk Achternaam Hendricks Specialisme Revalidatiearts Instelling UMC St. Radboud adres H.hendricks@reval.umcn.nl Datum beoordeling Gebruiksvriendelijkheid 1 Het programma is (eventueel na raadplegen van de beschikbare handleiding) goed te bedienen Aanvankelijk problemen met doorklikken naar volgende plaatje, uiteindelijk gelukt via nummer + enter. 2. Medische Inhoud 2A Inhoud van de module is conform de huidige stand van de wetenschap en/of richtlijnen Geef aan hoe de module aangepast dient te worden om wel aan deze richtlijnen te voldoen: 2B Inhoud van de module is conform de algemeen aanvaarde inzichten m.b.t. een

26 2C adequate beroepsuitoefening Geef aan hoe de module aangepast dient te worden om wel aan deze inzichten te voldoen: Inhoud van de module is objectief, wordt niet beïnvloed door eigen gevoel of vooroordelen en waar mogelijk zijn relaties met sponsors vermeden of worden duidelijk vermeld Geef aan hoe de module aangepast dient te worden om wel aan deze eis te voldoen: 3. Niveau van het programma Beoordeling van het niveau van het programma voor de verschillende doelgroepen Te laag Geschikt Te hoog Niet beoordeeld Studenten X Co-assistenten X Arts-assistenten (AIS) X Huisartsen X Specialisten X Verpleegkundigen in opleiding X Verpleegkundigen X 4. Algemeen 4A Geef een omschrijving van het leerdoel wat met deze module behaald kan worden in het Postacademisch onderwijs Leerdoel: Kennisnemen van verschillende radiologische technieken 4B Setting: Geef een omschrijving van de setting waarin de module bruikbaar is voor het Postacademisch onderwijs Voorbereiding Klinische Fase 4C Hoeveel studieminuten worden naar uw schatting besteed bij het doorlopen van de module t.b.v. nascholing? 30.. Minuten 5. Algemene indruk en opmerkingen Positief! (voor BaMa) Desgewenst uit te breiden naar specifeke doelen; bijvoorbeeld CT/MRI brein voor neurologie assistente