Rapportage voor Eindreview SURF Nationaal Actie Plan e-learning 2006 Nationale Kennisbank Basisvaardigheden Wiskunde Datum: 27 december 2007 Penvoerder: Universiteit van Amsterdam Consortium: Fontys, HHS, HS Zuyd, OUNL, RUG, TUD, TU/e, RUL, UM, UT, UU, UvA, VU
1. Inhoudsopgave Rapportage voor Eindreview... 1 Nationale Kennisbank Basisvaardigheden Wiskunde... 1 1. Inhoudsopgave... 2 2. Samenvatting... 3 3. Karakteristieken van het project... 4 3.1. Doelen... 4 3.2. Resultaten... 5 3.3. Projectorganisatie... 6 4. Verslag Werkpakketten... 8 4.1. Verslag Werkpakket Portaal... 8 4.2. Verslag Werkpakket Content... 10 4.3. Verslag Werkpakket Implementatie... 12 4.4. Verslag Werkpakket Communicatie... 19 4.5. Verslag Werkpakket Projectmanagement... 22 5. Evaluatie... 25 6. Conclusie... 28 7. Standlijnenoverzicht... 29 8. Kostenoverzicht in standaard SURF Formaat... 31 9. Appendix: Verslag stuurgroep NKBW... 32 Nationale Kennisbank Basisvaardigheden Wiskunde Rapport Midterm Evaluatie 2
2. Samenvatting U treft hier aan de eindrapportage van het project Nationale Kennisbank Basisvaardigheden Wiskunde. Dit project is gesubsidieerd door SURF in het kader van het Nationaal Actie Programma e-learning, dat zich richt op een verhoging van de participatiegraad in het Nederlands hoger onderwijs door de inzet van e-learning. Het project loopt tegen een achtergrond waarbij aan de ene kant het NAP-kader steeds verder vorm kreeg, en anderzijds de wiskunde aansluitproblematiek scherp gebleven is. Het wiskunde aansluitingsprobleem blijft in de nationale aandacht staan. Bijvoorbeeld was op 26 december een Nationale Rekentoets op televisie, waarbij de prijsuitreiking door Doekle Terpstra werd gedaan. Doekle Terpstra is voorzitter van de HBO-raad en heeft een aantal keren gewezen op de tekorten aan rekenvaardigheid bij de PABO-studenten. Dit project richt zich niet specifiek op rekenen, maar op het verwante terrein van algebraïsche vaardigheden. Het project kent een looptijd van één jaar. Deze looptijd is niet ingegeven door het idee dat doorstroomprojecten slechts zo kort hoeven te zijn, maar omdat de bestuurlijke en beleidsmatige horizon op dat moment niet langer was. Dit project wil in dit jaar een substantiële stap zetten in het bijeenbrengen van mensen en resultaten, maar heeft niet de pretentie dat het probleem na de periode van één jaar is opgelost. Een aantal activiteiten is erop gericht een goede uitgangspositie in de periode erna te bewerkstelligen. Inmiddels is door SURF een vervolgsubsidiekader op de eerste ronde Nationaal Actieprogramma e-learning uitgezet. Partners in het consortium zijn van plan om een vervolgaanvraag te doen. Voorbereidingen vinden plaats in SIGMA verband. Zoals al in de vorige rapportages zichtbaar werd, kent dit project een overbesteding. Deze is met name te vinden in het werkpakket WP1 portaal. Dit is aangekaart bij het NAP-team van SURF, en er is ruimte gevonden voor een extra subsidie van 42.000 euro. Hiervoor is het projectteam SURF erkentelijk. Daarmee is nog sprake van bescheiden overbesteding in de grootteorde van 5% van het projectbudget. Omdat niet alle NAP-gelden besteed zijn, krijgen alle NAP-projecten nog de gelegenheid om een kleine projectuitbreiding te doen met name gericht op disseminatie. Hierin willen we aandacht besteden aan - monitor - stichting - artikelen in nationale tijdschriften - vorming redactieraad - performance-verbeteringen Wizmo Deze rapportage is anders opgebouwd dan de vorige rapportages. Het inhoudelijk eindrapport E11 is verschenen en op de slotbijeenkomst verspreid. Daarom bevat deze rapportage E8 enkel de evaluatieve bevindingen en de meer projectmatige zaken. Ten aanzien van de deliverables is het goed op te merken dat de deliverables A2 nog niet gereed is, maar wel ten tijde van de eindreview. De deliverable C6 met de Gegevens effectmeting wordt opgenomen in de monitor, die begin 2008 verschijnt. De afronding van de monitor en de deliverable D6 publicaties in diverse media zijn onderdeel van de projectuitbreiding. Nationale Kennisbank Basisvaardigheden Wiskunde Rapport Midterm Evaluatie 3
3. Karakteristieken van het project Dit deel is ongewijzigd ten opzichte van de vorige reviews. De ambitie van het Nationaal Actie Programma e-learning is de participatiegraad te verhogen door in-, door- en uitstroom te bevorderen en door uitval te reduceren. Dit project beoogt daar met woord en daad aan bij te dragen. Om de impact en de effecten kwantitatief te benaderen wordt een meetprotocol opgezet om het doorstroomverloop van voor tot voorbij de drempel te kunnen onderzoeken. Alhoewel hier ook historische data meegenomen kunnen worden, is het niet realistisch om te verwachten dat binnen de projectperiode die feitelijk één onderwijscyclus bevat structurele verbeteringen geconstateerd worden. Parallel aan deze longitudinale metingen wordt ook onderzocht in hoeverre de stakeholders van mening zijn dat de problematiek adequaat tegemoet wordt getreden. Hierbij is er vanuit gegaan dat binnen de projectperiode een nulmeting en effectmeting worden uitgevoerd. Bij dit project wordt in samenwerking met de Special Interest Group SIGMA een Community of Practice als eigenaar opgezet waaraan zowel gebruikers als ontwikkelaars deelnemen. Dit concept behoeft verdere uitwerking. Hiervoor is binnen het project een traject business model uitgezet onder directe verantwoordelijkheid van de projectleider. De continuïteit is een belangrijk terugkerend punt in de besprekingen met de stuurgroep en met de klankbordgroepen per instelling. Voor het portaal is bewust gekozen voor de lange termijn ontwikkeling bij SURF van LOREnet, die mede gedragen wordt door het E-merge consortium. Dit project is van groot belang om de aansluiting VO HO structureel te verbeteren. Door het VO leraren en leerlingen in contact te brengen met de gevraagde wiskundige vaardigheden op het niveau van de opgaven zelf, niet alleen de eindtermen, ontstaat bij het VO een beter beeld. Omgekeerd leiden intensieve contacten van HO-docenten met het VO tot meer inzicht in de kennis en vaardigheden die de instromende studenten hebben en hoe die in het HO tot hun recht kunnen komen. In de implementatietrajecten van dit projectvoorstel is expliciet aandacht voor de verbeterde contacten VO-HO. Dit project heeft een nationale ambitie, en beoogt een groot participerend draagvlak te creëren met partijen uit HO en VO. De directe belanghebbenden van het projectresultaat zijn de opleidingen in natuurwetenschappelijke, technische en economische richtingen. Veel instellingen maken dan ook deel uit van het consortium, en binnen instellingen vaak nog verscheidene faculteiten en afdelingen. 3.1. Doelen Het project is geslaagd als bij de deelnemende instellingen de aansluitingsproblematiek substantieel verminderd is. Onderzocht worden hiertoe studieresultaten en beeldvorming bij studenten, docenten en management uit HO en VO. Naast nulmetingen en resultaatmetingen worden groepen longitudinaal gevolgd omdat uitval later kan optreden. Dit zal binnen de projectperiode opgestart worden, maar de periode van een jaar is te kort om hier voldoende data te kunnen verzamelen. De operationele doelen zijn: 1. bij alle deelnemende partners implementatietrajecten starten, ontwikkelen, verbeteren en uitvoeren, op zo'n manier dat a. de aansluitingsproblematiek in te meten parameters wordt omschreven en uitgedrukt, opdat verandering en effect kunnen worden omschreven en vastgesteld; b. de doelgroepen student, docent en manager aangetoond tevreden zijn door metingen vooraf en later te vergelijken; Nationale Kennisbank Basisvaardigheden Wiskunde Rapport Midterm Evaluatie 4
c. er structurele metingen plaatsvinden die op de langere termijn effecten zijn gericht door middel van longitudinaal onderzoek; d. alle informatie en materialen voortgekomen uit het project die een instelling nodig heeft om te komen tot een effectief aansluitingstraject, beschikbaar zijn voor opleidingen die nu niet in het consortium zitten conform een nader uit te werken business model; 2. breed het gesprek aangaan met de geïnteresseerden wiskunde docenten VO en HO om docenten goed over en weer te informeren over de huidige ontwikkelingen en studenten een zo vloeiend mogelijke overgang op het gebied van wiskundevaardigheden te bieden. De primaire doelgroep wordt gevormd door de docenten die betrokken zijn bij het aansluitonderwijs. De secundaire doelgroep wordt gevormd door de docenten VO, management en de studenten en scholieren in de aansluitperiode. 3.2. Resultaten Het project richt zich op de volgende resultaten: 1. good practices verzamelen en etaleren; 2. een portaal dat de zoek-en-vind cyclus ondersteunt, eventueel online hulp verleent, doorverwijst en toegang biedt tot de materialen, de betrokken mensen en de ervaringen 3. beschikbaar maken, beschikbaar stellen, aanvullen, aanpassen en zonodig uitbreiden van content van de eerdere projecten; 4. implementatietrajecten bij alle instellingen gericht op het doelgericht inzetten van het beschikbare materiaal; 5. een nationaal gebruikersplatform inrichten met betrokkenheid van het VO-veld; 6. technisch onderzoek naar standaardisatie en opslag in LCMS en afstemming met LOREnet; 7. kwaliteitszorg opzetten van systeem, materiaal en didactiek in de praktijk; 8. uitgebreid communicatietraject dat informerend voor zowel HO als VO is; 9. business model opzetten voor continuïteit en uitbreiding na de projectperiode; 10. aanbevelingen opstellen voor verdere inhoudelijke, didactische en functionele ontwikkelingen. Good Practices van onderwijstrajecten die dienen ter verbetering van de aansluiting. We starten hierbij met de resultaten van de projecten tot nu toe, zoals Web-spijkeren (www.webspijkeren.nl zie handboek ). Daarnaast worden de verscheidene trajecten bij de partners geïnventariseerd. De Portaal dient een uniforme, coherente toegang te bieden tot de bestaande materialen, fora, online hulp, maar ook de FAQ s, ervaringen, contactpersonen, etc. Hierbij wordt als startpunt de materialen van de bestaande projecten genomen. Er wordt zoveel mogelijk aangesloten bij de LOREnet architectuur voor de goede vindbaarheid van materialen. Voor de Content wordt het startpunt gevormd door de materialen van bestaande en afgeronde projecten. Bij de vraagarticulatie in de implementatietrajecten zal de behoefte geadresseerd worden met betrekking tot uitbreiding en aanpassing. In overleg tussen vrager en aanbieder wordt content verder ontwikkeld. De implementatietrajecten van het aansluitonderwijs starten met een precieze vraagarticulatie die uitgezet wordt tegen het aanbod van de content. Daarna worden de keuzes vastgelegd en de ontwikkeling van het traject in gang gezet. Voorzover de onderwijscyclus het toelaat wordt het aansluitonderwijs daadwerkelijk uitgevoerd en geëvalueerd. Voor de implementatietrajecten wordt in dit project een model gevolgd waarbij in elk geval assessments, remediatie, contact VO HO en inbedding in ELO aan bod komen. Voor sommige instellingen is het implementatietraject al gevorderd, anderen staan nog aan het begin. Een implementatietraject doorloopt de volgende stappen: Nationale Kennisbank Basisvaardigheden Wiskunde Rapport Midterm Evaluatie 5
vergelijking eigen situatie met die van anderen; assessment vanuit eigen perspectief van de good practices; vaststellen gewenste didactische scenario s, tools en content; combinaties van gebruikers en ontwikkelaars vormen met overeenkomstige keuzes; aanpassingen, aanvullingen en uitbreidingen definiëren en uitvoeren; het onderwijs uitvoeren met flankerend gebruikersonderzoek; evalueren van proces en product, aanpassingen voorbereiden. Met het oog op de continuïteit van het verworvene is het verstandig om snel te starten met het inrichten van een platform voor gebruikers, waarbinnen het delen van kennis en ervaringen plaats vindt. Het zal onderzocht worden of de SURF Special Interest Group Mathematics Activities (SIGMA) bereid is om als een dergelijk platform op te treden. Hiermee wordt in feite een community of practice gevormd die tevens kan optreden als kwaliteitsbeheerder van de materialen en resultaten. Technisch onderzoek naar de standaardisatie en naar de inpassing van de materialen in Learning Content Management Systemen wordt uitgevoerd. Waar mogelijk vindt ook de daadwerkelijke realisatie plaats, maar gezien het feit dat wiskundeteksten met de gangbare formules niet door de huidige standaarden laten dekken, dient hier enig voorbehoud gemaakt te worden. Zo worden bijvoorbeeld geparametriseerde vragen zoals die in het MathMatch project gangbaar zijn, niet gedekt door de QTI-standaard. Kwaliteitsborging van de verschillende onderdelen van het project zal worden opgezet. Hierbij wordt de gangbare verbetercyclus gehanteerd, met de fases plannen uitvoeren evalueren verbeteren Binnen elk werkpakket wordt deze cyclus geïmplementeerd en doorlopen. Om de kloof te dichten tussen beide zijden van de aansluiting is een zorgvuldig communicatietraject tussen VO en HO van belang. Startpunt is elkaar te informeren van ontwikkelingen, ervaringen en meningen. Het wordt nagestreefd om rondom de drempel van de aansluiting op de werkvloer en op beleidsniveau dichter tot elkaar te komen. Het consortium is een vereniging van HO-instellingen, en de door de minister ingestelde vernieuwingscommissie wiskunde wordt uitgenodigd om tot de adviesgroep toe te treden. Een solide business model is nodig om continuïteit te waarborgen. We streven na dat materialen om niet ter beschikking komen van het hoger onderwijs. Echter zijn bij productie en uitlevering producten van derden gemoeid, met een verscheidenheid aan licentievormen. In het project wordt een schat aan ervaringen opgedaan. Hieruit worden de lessons learned gedistilleerd en als aanbevelingen aan zowel het Voortgezet als het Hoger Onderwijs in Nederland aangeboden. 3.3. Projectorganisatie De projectorganisatie bestaat uit een aantal onderdelen Stuurgroep, die de probleemeigenaren vertegenwoordigt en die bestuurlijke borging biedt voor het project. Adviesraad, waarin belangrijke partijen uit het VO en HO veld vertegenwoordigd zijn. Klankbordgroep per instelling, waarin beslissers, voor het project belangrijke personen en de contactpersoon voor de instelling zijn opgenomen. De klankbordgroep heeft de functie om per instelling de structurele implementatie optimaal te borgen. De rol van de contactpersonen bij de instelling is dat zij het werk bij de instelling beleggen. Bij de mensen die in het project werken, maken we onderscheid tussen Nationale Kennisbank Basisvaardigheden Wiskunde Rapport Midterm Evaluatie 6
Kernteam met daarin de werkpakketleiders en de projectleider; Coördinatoren per instelling; Volledige projectteam. Om het werk aan het project te structuren is het opgedeeld in vier werkpakketten, met daarnaast een vijfde werkpakket projectmanagement. De projectdoelen zijn het implementeren van aansluittrajecten voor wiskundeonderwijs op basis van een aanbod van eerder ontwikkeld materiaal dat via een webportaal aangeboden wordt; en communicatie tussen de partijen voor en na de drempel bevorderen aan de hand van concreet materiaal, in het bijzonder tussen VO en HO. De werkpakketten zijn dan ook: A. Portaal: gericht op toekomstvaste ontsluiting van het aanwezige en ontwikkelde materiaal met speciale aandacht voor het zoek-en-vind proces; B. Content: in dit werkpakket wordt het aanwezige materiaal geïnventariseerd, aangepast, verder ontwikkeld en voor ontsluiting voorbereid, C. Implementatietrajecten: in dit werkpakket worden de implementatietrajecten ontworpen, uitgevoerd, geëvalueerd en ingebed in staande organisatie; D. Communicatie: in dit werkpakket wordt de communicatie naar andere HO-instellingen en de communicatie VO-HO over wiskundevaardigheden ondergebracht. Het gaat om het over en weer goed informeren en het vergroten van de ontvankelijkheid, om disseminatieactiviteiten zoals presentaties op bijeenkomsten, video, publicaties in vaktijdschriften. E. Projectmanagement: Hierin is ondergebracht projectleiding, projectmonitoring, onderzoek, business model, afstemming met derden, administratie, juridische zaken w.o. licenties. WP-A Portaal Piet van der Zanden TUD WP-B Content Hans Cuypers TU/e WP-C Implementatie Evert van de Vrie OU WP-D Communicatie Vincent Jonker UU WP-E Projectmanagement Leendert van Gastel UvA De werkpakketten worden elk getrokken door een coördinator. De vier coördinatoren vormen samen met de projectleider het kernteam voor het project. Het kernteam komt tweewekelijks bij elkaar met face-to-face of afstandsvergaderingen. Het heeft een initiërende en monitorende rol voor het project. Het volledige projectteam komt aan het einde van elke fase bij elkaar. Het project wordt met een kick-off bijeenkomst gestart. Fase1 Fase2 Fase3 Fase4 2006/11/01 2007/01/31 Definitiefase 2007/02/01 2007/05/31 Ontwikkelfase 2007/06/01 2007/10/31 Uitvoeringsfase 2007/11/01 2007/11/30 Afrondingsfase Bij alle werkpakketten worden vier fases gehanteerd: 2006/11/01 2007/01/31: Definitiefase, waarin er tijd beschikbaar is om inventarisaties en gefundeerde keuzes te maken; 2007/02/01 2007/05/31: Ontwikkelfase, waarin ontwerp en ontwikkelwerk plaats vindt; 2007/06/01 2007/10/31: Uitvoeringsfase waarin het aansluitonderwijs uitgevoerd en geëvalueerd wordt; 2007/11/01 2007/11/30: Afrondingsfase, waarin de rapportages en het werk aan deliverables worden afgerond. Nationale Kennisbank Basisvaardigheden Wiskunde Rapport Midterm Evaluatie 7
4. Verslag Werkpakketten 4.1. Verslag Werkpakket Portaal Algemeen De medewerkers van het werkpakket portaal en content hebben tijdens de slotbijeenkomst op 30 november gezamenlijk teruggeblikt op de afgelopen projectperiode van NKBW. Hieronder volgt eerst een korte samenvatting van de evaluatie op die dag, waarna een uitgebreider reactie volgt. Korte samenvatting van de evaluatie onder voorzitterschap van Hans Cuypers: Positief: - Wizmo is een mooi product dat heel wat mogelijkheden voor de toekomst biedt - Mooi design - Plezierige samenwerking en enthousiast team - Beta-versie gereed met basisfunctionaliteiten - Samenwerking met India verliep (ondanks afstand) naar behoren Voor verbetering vatbaar: - Duidelijke scheiding hoofdfunctionaliteiten en bijzaken - Inschatting van programmeerwerk - Inschatting beschikbaarheid programmeurs - Duidelijke communicatie naar gebruikers over wat Wizmo wel en niet kan - Verwachtingspatroon was verkeerd De resultaten in een notendop Het werkpakket portaal heeft gewerkt aan het in de praktijk toepassen van repository technologie. Over het algemeen worden tot nu toe repositories binnen bibliotheken toegepast met een beperkte set van meestal een 8-tal metadatavelden gericht op het medium boek of artikel. De bekendste metadatavelden voor boeken en artikelen zijn titel, auteur, jaar, uitgever en ISBN nummer. Voor het onderwijs is internationaal het zogenaamde Learning Object Metadata (LOM) schema gangbaar met wel 58 mogelijke metadatavelden voor leermaterialen en cursusstructuren. Voor het NKBW project is uiteindelijk gekozen om 20 velden verplicht te stellen en een 16-tal als gewenst te beschouwen. De bekenste velden zijn titel, omschrijving, sleutelwoorden, aggregatieniveau, bestandsformaat, locatie, soort leerbron, beoogde eindgebruiker, auteursrechten en classificatie. De metadata discussie en taxonomie van wiskundige leerobjecten en onderwerpen was lastig vast te stellen, maar heeft geresulteerd in een afspraak die jaren zal worden gevolgd. Voor de inzet van repositorytechnologie is geleund op de kennis die de twee LOREnetprojecten hebben voortgebracht. Echter hebben die alleen technische mogelijkheden geëxploreerd. Het toepassen binnen een domein vergt een aanzienlijk diepgaander aanpak. Ter verduidelijk wordt gerefereerd naar de resultaten van zoekmachines die binnen enkele tellen een lijst met duizenden resultaten toont, maar het is dan alsnog lastig om te vinden waarnaar je op zoek was. Die lijsten kunnen worden gegenereerd door documenten full-text te doorzoeken en allerlei relaties mee te nemen van doorverwijzing en gekenmerkte categorieën. Bij NKBW echter wordt een kwaliteitszoektocht geëist, hetgeen een andere aansturing van de repository vereiste. De kwaliteitszoektocht aan de hand van de metadata wordt aangevuld met getoonde feedback van de gebruiker in de vorm van positieve en negatieve duimpjes, met professionele reviews, met gebruikersannotaties, en met sterren die worden toegekend aan de hand van ratings. Het zoeken en vinden van ontoegankelijke repository technologie vereist een gebruikersvriendelijke benadering voor student en docent, zodat een portaal omgeving werd ingezet om als interface te dienen tussen gebruiker en repository. Omdat het portaal met de Nationale Kennisbank Basisvaardigheden Wiskunde Rapport Midterm Evaluatie 8
naam Wizmo toegang zal bieden tot zowel lokaal opgeslagen leerobjecten als verwijzing naar online omgevingen voor inzet door docent en voor zelfstandig leren, zijn er 4 zoekstrategieën ingebouwd; enkelvoudig invulveld, tagcloud, geavanceerd zoeken, en het starten van de zoekopdracht door het selecteren van een paragraaf titel van een wiskundeboek of door het selecteren van een onderwerp in de MathTax taxonomie. Ter verdere ondersteuning van de student is samenwerking gezocht met WisFaq dat met online FAQ's - verdeeld over meer dan 40 categorieën - ruim 26.000 beantwoorde vragen ter beschikking stelt. Bovendien biedt WisFaq online hulp door de inzet van een 12-tal vrijwillige wiskunde experts. Omdat Wizmo naast het zoeken en vinden en beantwoorden van vragen eveneens de online samenwerkingscomponent stimuleert voor het delen van kennis omtrent de toepassing, de aanvulling, en het gebruik van de leermaterialen is onderweg besloten om een persoonlijke pagina in te bouwen met mogelijkheden voor persoonlijke instellingen, een buddy systeem voor het maken van vrienden, contacten en groepen, en een publiceer- en onderhoudsproces voor de 'eigen' leerobjecten. De genoemde functionaliteiten tesamen maken Wizmo en de onderliggende repository tot een uniek concept welke past bij de huidige inzet voor het delen van wiskunde leermaterialen en de social software movement die de maatschappij in een rap tempo bevangen. Vanwege de korte projectperiode van 1 jaar kon maximaal een beta-release worden opgeleverd. Evaluatie door portaalbouwers (TU Delft) De mogelijkheid om mee te doen aan het Nationaal Aktie Programma in het project NKBW was voor ons een prachtige mogelijkheid om de ideeën van het E-merge Math Learning Space concept verder op te schalen en te professionaliseren. Alvorens mee te doen aan het NKBW project is intern overlegd met betrekking tot de capaciteit en kennis van medewerkers benodigd voor de diverse onderdelen, niet wetende dat er minimaal 3 concernsystemen vanuit hogerhand absolute voorrang zouden krijgen boven het werk voor derden (waaronder het NKBW project). Dit alles als gevolg van de reorganisatie bij de TU Delft. Door het inschakelen van een softwareontwikkelfirma uit India is getracht de uitval te compenseren, maar sommige onderdelen vereisten de specifieke kennis van 'overrule-de' collega s en veroorzaakten vertragingen. Tijdens de looptijd bleek een gebrek aan ervaring met SURF projecten. De SURF-cultuur en - aanpak is nogal tegenstrijdig aan onze gang van zaken binnen de TU Delft en E-merge. Wij zijn gewend om 'ill-structured' opdrachten exploratief te verkennen op zoek naar de optimale mix van gebruik en technologie, die zodra de functionaliteiten zijn vastgesteld onze koers bepaalt. Het is het eindprodukt van die koers waarnaar we streven en het is ook die boodschap die we verkondigen. Onze aanpak is tegenstrijdig aan de aanpak van het SURF project waar je eigenlijk het minimale moet beloven, opdat de deliverables haalbaar zijn en je daarmee de projectdoelen behaalt. Onze conclusie is dat de exploratieve wijze, zoals wij zo gewoon zijn om te doen, niet echt past bij de aanpak zoals die door ons ervaren is. Echter, in een eventueel vervolgproject NKBW2 valt het exploratieve karakter van Wizmo weg en kan een normaal ontwikkelingstraject worden gevolgd met duidelijke productonderdelen en mijlpalen. Bovendien is de looptijd van 2 jaar voldoende om het portaal in de gerede staat te brengen zoals voorgestaan. Het kan in NKBW2 strak en scherp worden afgebakend en daarmee gemakkelijker geleid. Nationale Kennisbank Basisvaardigheden Wiskunde Rapport Midterm Evaluatie 9
4.2. Verslag Werkpakket Content Inleiding Binnen het werkpakket Content van het NAP project Kennisbank Basisvaardigheden Wiskunde werd remediërend studiemateriaal Wiskunde verzameld en vervaardigd. Dit materiaal wordt via Wizmo aan de verschillende participerende instellingen en hun studenten beschikbaar gesteld. Het studiemateriaal werd tevens gedeeltelijk gebruikt in de verschillende implementatietrajecten binnen het project. Centraal binnen het werkpakket Content stond het verzamelen, ontwikkelen en beschikbaar stellen van studiemateriaal. Het studiemateriaal werd in leerstofmodulen vervaardigd en aangeboden. Deze leerstofmodulen bestaan uit onderwijsmateriaal dat kan variëren van toetsen, tot gehele cursussen, en van dictaten tot video s. Bij de ontwikkeling en het aanbieden van lesmateriaal stonden drie aspecten voorop: kwaliteit, bruikbaarheid en beschikbaarheid. Voor de kwaliteit van het studiemateriaal staan op de eerste plaats natuurlijk de ontwikkelaars garant. Echter, een onafhankelijke kwaliteitscontrole van het materiaal is opgestart. Om de bruikbaarheid van het lesmateriaal te garanderen dan wel te verhogen, werden de lesmodulen van metadata, voorzien. Hiermee is het lesmateriaal geclassificeerd en geïndexeerd. Metadatering van het materiaal maakt het mogelijk gericht naar voor een gebruiker geschikt materiaal te zoeken. Om de verschillende Nederlandse instellingen in het hoger onderwijs gebruik te kunnen laten maken van de binnen het project gemaakte en aangeboden studiematerialen, zullen duidelijke afspraken worden gemaakt over de wijze waarop het materiaal aan deze gemeenschap beschikbaar wordt gesteld. Hierbij worden afspraken over copyrights, licenties, etc., vastgelegd. De binnen het werkpakket Content uitgevoerde activiteiten worden hieronder afzonderlijk besproken en geëvalueerd. Vaststellen format en metadatering Gedurende de definitiefase is het format van een leerstofmodule vastgelegd. In het bijzonder werd vastgesteld welke (meta)data aan een onderwijsmodule toegekend kan en moet worden. Hierbij is gestreefd naar aansluiting aan reeds bestaande (internationale) standaarden (IMS, LOM, SCORM, LoreNet), met aanpassing aan specifieke eisen van het project. Het vaststellen van het format voor metadatering bleek moeilijker dan verwacht. De bestaande standaarden sluiten niet altijd op elkaar aan en kennen vele verschillende versies. Ook bieden sommige velden binnen de bestaande metadatastandaarden te weinig speelruimte om de leerobjecten goed te kunnen beschrijven. Uiteindelijk is gekozen voor het gebruik van de LOMstandaard. Als onderdeel van de metadata is tevens een klassificatie gemaakt van de voor de aansluiting relevante wiskunde. Hier is voortgebouwd op de Living Math Taxonomy. Deze taxonomie heeft tot voordeel dat ze uitbreidbaar is. Voor het aanleveren van content is afgesproken de metadata zo volledig mogelijk moet worden aangeboden. Hoewel de leveranciers van content dit als een grote opgave beschouwden, is dit toch door allen uitgevoerd. Het resultaat is dat we nu een repository van leerobjecten hebben die goed en volledig gemetadateerd is. Helaas is door de vertraagde oplevering van het portaal een uitgebreide gebruikerstest niet mogelijk geweest. Hierdoor blijft de vraag enigszins open of de Nationale Kennisbank Basisvaardigheden Wiskunde Rapport Midterm Evaluatie 10
gekozen metadatering ook effectief is voor het goed zoeken en vinden van de leerobjecten binnen de repository. Leerstofontwikkeling In de ontwikkelfase is door de verschillende partners de leerstofontwikkeling uitgevoerd. De ontwikkelde leerstof overdekt een groot aantal verschillende onderwerpen binnen de wiskunde en varieert van interactieve toetsen en applets tot uitgebreide dictaten. Aan de hand van wensen van implementatieprojecten zijn verschillende modules ontwikkeld en aangepast. Dit heeft geresulteerd in rijke en uitgebreide repository. Bij de aanvang van het project werden de volgende risico's onderkent - Slechte aansluiting van content bij wensen van gebruikers. - Te weinig capaciteit voor aanmaak van gewenste content. - Gebruik van content is aan licenties en andere voorwaarden gebonden, waardoor het gebruik niet voor iedereen mogelijk is. - De content is slecht vindbaar voor de potentiële gebruiker. Doordat er een grote hoeveelheid aan materiaal binnen het project beschikbaar is gekomen, is het derde punt nauwelijks van belang geweest. De versnipperring van capaciteit voor het maken van nieuwe content heeft er wel toe geleid dat niet alle wensen van gebruikers vervuld konden worden. Hierdoor is de aansluiting van content bij de wensen van de implementatieprojecten niet altijd goed gelukt. De gesignaleerde problemen zijn ten dele opgelost doordat de contentmakers ook buiten het kader van het NKBW zijn doorgegaan met de ontwikkeling en aanpassing van hun materialen. Dit heeft echter wel vertraging opgeleverd. Veel materiaal was pas aan het eind van de zomer klaar voor gebruik. Het inzetten in implementatieprojecten werd hierdoor bemoeilijkt. Door de vertraging bij het portaal is ook de vindbaarheid van de content in het geding geweest. Via onderlinge contacten en ander communicatiekanalen dan het portaal, is toch voldoende bekend gemaakt welk materiaal beschikbaar was. Kwaliteitszorg Een evaluatieprotocol voor de evaluatie van binnen dit project ontwikkelde en aangepaste content is opgesteld. Aan het eind van de ontwikkelfase is ruimte gemaakt voor het uitvoeren van de evaluaties. Een groot aantal leerobjecten is geëvalueerd. Door de late oplevering van veel content is het protocol echter niet altijd geheel uitgevoerd. Gebruikersevaluaties ontbreken vaak nog. Een uitgebreide controle van de metadata heeft wel plaatsgevonden. Conclusies Het werkpakket content heeft de in het project gestelde hoofddoelen bereikt: er is een repository met een groot aantal leermiddelen van hoge kwaliteit beschikbaar gekomen; er is samenwerking tussen verschillende contentleveranciers in gang gezet evenals uitwisseling van kennis en resources. Echter door de korte tijdspanne waarin het project moest worden uitgevoerd en de versnippering van de resources, is een aantal zaken minder ver uitgewerkt dan misschien gehoopt of heeft vertraging opgelopen. De tijdige verspreiding en beschikbaarheid van content heeft hieronder geleden. Dit heeft tot gevolg gehad dat de implementatieprojecten vaak voor eigen materiaal hebben gekozen en zich onafhankelijk hebben opgesteld van door anderen te maken content. Nationale Kennisbank Basisvaardigheden Wiskunde Rapport Midterm Evaluatie 11
4.3. Verslag Werkpakket Implementatie Algemeen Onderdeel van het project Nationale Kennisbank Basisvaardigheden Wiskunde waren 17 implementatieprojecten (werkpakket Implementatie). Doel van de implementatieprojecten was de ontwikkelde portal en beschikbare content in te zetten bij de uitvoering van het aansluitonderwijs. Studenten die met de implementatieprojecten bereikt werden, konden hun wiskundekennis verhogen en met meer kans op succes hun opleiding starten en volgen. Reeds vroeg in het NKBW-project zijn de implementatieprojecten gedefinieerd. Implementatieprojectplannen moesten in januari 2007 worden ingediend. In de plannen moest opzet en uitvoering van het beoogde aansluitonderwijs worden gedefinieerd, alsmede de behoefte aan online content. In het voorjaar 2007 zijn de voorbereidingen getroffen voor het aansluitonderwijs, dat bij sommige instellingen voor of in de zomer van 2007 van start ging. De meeste instellingen voerden de onderwijsactiviteiten uit in de periode september november 2007. In november 2007 zijn door alle implementatieprojecten eindrapportages opgesteld, waarin de uitgevoerde activiteiten en de bereikte resultaten zijn beschreven. In onderstaande tabel wordt een overzicht gegeven van de implementatieprojecten. Instelling / opleiding Universiteit Utrecht / bacheloropleiding Economie Universiteit Utrecht / bacheloropleiding Scheikunde Universiteit Utrecht / James Boswell Instituut Universiteit Maastricht / bacheloropleiding Econometrie Universiteit Maastricht / bacheloropleiding Bedrijfskunde en economie Universiteit Maastricht / masteropleidingen Governance en Manage- Implementatieprojectleider Yolanda Grift Annik van Keer, Egbert Mulders Simon Berdenis van Berlekom Dirk Tempelaar Dirk Tempelaar Dirk Tempelaar Opzet van de onderwijsactiviteiten in het implementatieproject Entreetoets Wiskundepracticum Digitale oefenen toetsomgeving Pre-toets Remediëring via hoor- en werkcolleges en spreekuut Post-toets online hulp, studieavonden Zomercursus met werkcolleges Online wiskunde cursus met geïntegreerde toetsen Zomercursus statistiek Gebruik / ontwikkeling van onderwijsmaterialen Engelstalige theorie (eigen website: www.econ.uu.nl/ wiskunde) Oefenopgaven en Diagnostische tests (via Digitale Wiskunde oefenomgeving DWO www.fi.uu.nl/dwo en www.fi.uu.nl/dwo/en) Digitale wiskunde omgeving Aantal studenten dat bereikt werd Achtergrond van de studenten 250 Vwo Wiskunde A1,2 (#150), Buitenlandse studenten (#100) 120 Vwo (NT, NG) Hbo Online syllabus 30 Havo, vwo met wiskunde deficiëntie Online studiematerialen 15 Voornamelijk buitenlandse aspirant bachelor studenten Online cursus (ALEKS) 200 Voornamelijk buitenlandse aspirant bachelor studenten Off- en online materiaal (ALEKS) 10 bachelor studenten Nationale Kennisbank Basisvaardigheden Wiskunde Rapport Midterm Evaluatie 12
ment learning Universiteit Twente / bacheloropleiding Elektrotechniek Universiteit Twente / bacheloropleiding Elektrotechniek / kansrekening Open Universiteit Nederland / bacheloropleiding Informatica Open Universiteit Nederland / bacheloropleiding Milieuwetenschappen Rijksuniversiteit Groningen / bacheloropleiding Natuurwetenschappen en technologie Fontys Hogescholen / 4 bacheloropleidingen Haagse Hogeschool / bacheloropleiding ICT en media TU Delft / bacheloropleidingen TU Eindhoven / bacheloropleiding Wiskunde en informatica Universiteit van Amsterdam / bacheloropleiding Natuurwetenschappen wiskunde informatica Vrije Universiteit / bacheloropleidi ng Exacte wetenschappen Brigit Geveling, Cora Salm Jan-Kees van Ommeren Jan Timmerman Jikke van Wijnen Leon Tolboom Hans van de Loo Ron Neijhof Wim Caspers Hans Cuypers Chris Zaal Corrie Quant Instaptoets Herstelonderwijs Extra oefenopgaven bij cursus kansrekening Voorkennistoets Opfrisonderwijs op deelonderwerpen Hertoetsen op deelonderwerpen Voorkennistoets Opfrisonderwijs op deelonderwerpen Hertoetsen op deelonderwerpen Toetsen Opfrisonderwijs Ingangstoets Zelfstudie Eindtoets Ingangstoets Werkcolleges Eindtoets Instaptoets (3TU) Opfrisonderwijs Eindtoets Instaptoets (3TU) Zelfstudie met begeleiding Eindtoets Vaardigheidstraining Oefentoetsen Eindtoets Cursus basiswiskunde met zelftesten Oefenopgaven gerelateerd aan Elektrotechniekonderwijs Interactieve applets Digitale vragenbank Digitale toetsen Online studiemateriaal Digitale toetsen Online studiemateriaal Mathmatch classes 40 Vwo 20 Tweedejaars studenten 30 Zeer uiteenlopend 25 Zeer uiteenlopend Maple TA toetsen 160 Vwo Toetsbank in n@tschool Schriftelijk materiaal Online toetsen Schriftelijk en online materiaal 300 Mbo Havo (NG, NT) 20 Mbo Havo (NT) 1500 Vwo (NG, NT) Hbo Online studiemateriaal 1000 Vwo (NG, NT) Maple TA toetsen 150 Vwo Maple TA toetsen Schriftelijk materiaal 100 Vwo Eén implementatieproject is niet van de grond gekomen: het implementatieproject van Hogeschool Zuyd, faculteit Economie. Het gebrek aan personele capaciteit en het ontbreken van een focus waren hiervoor de redenen. Nationale Kennisbank Basisvaardigheden Wiskunde Rapport Midterm Evaluatie 13
Door de beperkte looptijd van het NKBW-project is uiteindelijk nauwelijks gebruik gemaakt kunnen worden van de portal. De portal zal vooral na het NKWB project ingezet kunnen blijven worden in het kader van het wiskunde aansluitonderwijs. Wel is veel content (wiskunde studiemateriaal, leerteksten, toetsen, etc.) gebruikt die al bij de instellingen aanwezig was of in het kader van dit project is ontwikkeld. De in het kader van het project ontwikkelde content is aan het einde van het project ingevoerd in de portal, zodat ze ook na de projectperiode voor alle partijen beschikbaar zal zijn en blijven. In deze rapportage gaan we nader in op de implementatieprojecten. Van alle projecten wordt een korte beschrijving gegeven. Vervolgens worden algemene conclusies getrokken die relevant zijn voor het aansluitonderwijs in het algemeen en het ondernemen van vervolgactiviteiten in het bijzonder. Via de NKBW-implementatieprojecten zijn uiteindelijk meer dan 4.000 studenten actief aan de slag gegaan met het verbeteren van hun wiskundekennis. Daarmee heeft het NKBW-project een duidelijke impact gehad op het hoger onderwijs in Nederland en het bestrijden van de wiskunde aansluit problematiek. De implementatieprojecten Universiteit Utrecht, faculteit Economie De economieopleiding wordt gevolgd door studenten uit zowel Nederland als elders. Het onderwijs wordt dan ook verzorgd in het Nederlands en in het Engels. Vanwege de verschillende achtergronden en het matige kennisniveau van de Nederlandse studenten is extra aandacht nodig voor wiskunde. Na een entreetoets worden practica aangeboden, parallel aan het gewone onderwijs. Tevens wordt een digitale oefen- en toetsomgeving (zowel Nederlands- als Engelstalig) ingezet. Uiteindelijk is het gelukt om het slagingspercentage van het reguliere wiskundevak positief te beïnvloeden. Universiteit Utrecht, faculteit Scheikunde Studenten van de bacheloropleiding Scheikunde hebben aan het begin van het eerste studiejaar een voorkennistoets (pretoets) gemaakt. Studenten die zwak scoorden werd geadviseerd bij te spijkeren, voornamelijk om de algebraïsche vaardigheden te verbeteren. Daar zijn extra hoor- en werkcolleges voor georganiseerd, alsmede een individueel spreekuur. Aan het einde van het bijspijkertraject is een posttoets afgenomen, waarop duidelijk beter werd gescoord dan op de pretoets. Universiteit Utrecht, James Boswell Instituut Voor toelating tot sommige universitaire opleidingen is het vwo-vak wiskunde B1 vereist. Studenten die dat vak niet hebben kunnen in plaats daarvan een cursus doen bij het James Boswell Instituut. Voor toelating tot die cursus moet een instaptoets worden gedaan. Ter voorbereiding op die instaptoets is een cursus Basisvaardigheden ontwikkeld. De cursus Basisvaardigheden wordt online aangeboden en kan in de zomermaanden door studenten worden gedaan. Aanvullend op de cursus zijn enkele contactavonden gehouden en kon online hulp worden gevraagd. Deelnemers aan de cursus Basisvaardigheden scoorden substantieel hoger op de instaptoets dan degenen die niet aan de cursus hadden deelgenomen. Universiteit Maastricht, Economie De opleiding economie van de Universiteit Maastricht trekt veel buitenlandse studenten. Die hebben een grote variatie in wiskundekennis. De Nederlandse studenten die starten met de opleiding hebben niet altijd voldoende wiskundevoorkennis. Aan alle studenten wordt een online bijspijkercursus (ALEKS) aangeboden die voorafgaande aan het studiejaar kan worden gedaan. Nationale Kennisbank Basisvaardigheden Wiskunde Rapport Midterm Evaluatie 14
Zo n 25% van de 800 eerstejaars neemt deel aan de bijspijkercursus, waarvan de helft met een substantiële inzet. Studenten die deelnemen aan de cursus oordelen positief. Uit evaluaties blijkt dat Nederlandse studenten zwakker dan hun buitenlandse collega s scoren op enkele specifieke onderdelen, in het bijzonder algebraïsche rekenvaardigheden. Universiteit Maastricht, Econometrie Voor studenten die starten met de opleiding Econometrics and operations research is een zomerschool georganiseerd die startte aan het einde van de zomer en doorliep in het eerste onderwijsblok van het studiejaar. Studiemateriaal met veel oefenopgaven is ontwikkeld en studiebijeenkomsten werden georganiseerd. Doelstelling was het verhogen van het studiesucces van de studenten. Alhoewel dat cijfermatig niet kon worden aangetoond, oordeelden de studenten positief over de zomerschool. Universiteit Maastricht, Management of learning en School of Governance Voor studenten van beide masteropleidingen is een zomercursus Statistiek ontwikkeld, waarbij gebruik is gemaakt van het online systeem ALEKS en een studieboek. Studenten waren afkomstig uit de gehele wereld en veel hadden maar beperkt tijd ter beschikking om in de cursus te investeren. Ook de online toegang was soms problematisch vanuit afgelegen regio s. Effect van de zomercursus is nog niet vast kunnen stellen, immers pas verderop in de masteropleiding moet dat tot uitdrukking komen. Universiteit Twente, faculteit Elektrotechniek Studenten maken aan het begin van het eerste jaar een instaptoets. Zij die onvoldoende scoorden waren verplicht mee te doen aan een tweede toets. Daartussen zijn werkcolleges gehouden waarop onder andere is gewerkt met speciaal ontwikkelde vraagstukken, waarin vooral wiskunde toegepast in het domein aan bod komt. De tweede toets werd veel beter gemaakt dan de instaptoets. Studenten waarderen de domeingebonden vraagstukken zeer. Ze voelen zich dan minder aangesproken op hun wiskundedeficiëntie, maar raken gemotiveerd om wiskunde beter te bestuderen om het goed toe te kunnen passen. Universiteit Twente, faculteit Elektrotechniek / kansrekening Tweedejaars studenten Elektrotechniek ervaren kansrekening als een moeilijk vak, zowel met betrekking tot modellering als wiskundige vaardigheden. Bij het vak zijn applets gebruikt om het modelleren te oefenen en tevens is een vragenbank gebruikt met extra opgaven. Het bleek lastig om tijdens de colleges gebruik te maken van de elektronische mogelijkheden en studenten hebben nog weinig met de vragenbank gewerkt. De oordelen van studenten over het vak waren echter al positiever, al zat er nog geen stijging in de tentamenresultaten. Open Universiteit Nederland, faculteit Natuurwetenschappen Studenten van de Open Universiteit zijn niet gebonden aan vaste startmomenten voor een cursus of opleiding, hun vooropleidingen lopen sterk uiteen, evenals kenmerken als leeftijd, woonplaats, etc. In het implementatieproject is nagegaan of een diagnostische toets en een zelfbeoordelinginstrument studenten beter zicht kunnen geven op hun studiekansen. Tevens is remediërend materiaal aangeboden om voorkennishiaten weg te werken en de studiedoorstroming te bevorderen. Gebleken is dat studenten duidelijk behoefte hebben om wiskundekennis op te halen, of nieuwe onderwerpen te bestuderen, om met meer zelfvertrouwen en een grotere kans op succes hun studie te vervolgen. Open Universiteit Nederland, faculteit Informatica Studenten die starten met een cursus aan de Open Universiteit hebben zeer diverse achtergronden. Om na te gaan of ze voldoende wiskundekennis hebben om met de cursus Discrete wiskunde A te kunnen starten is een online voorkennistoets ontwikkeld en Nationale Kennisbank Basisvaardigheden Wiskunde Rapport Midterm Evaluatie 15
geïmplementeerd. Na de toets vernemen studenten welke onderdelen ze nog onvoldoende beheersen en krijgen ze advies over online studiemateriaal. Na betreffende materialen bestudeerd te hebben, kunnen ze over die onderwerpen opnieuw (deel)toetsen maken. Tijdens dit implementatieproject bleek er nog onvoldoende geschikt online remediëringsmateriaal aanwezig te zijn. Vooralsnog leken vooral de betere studenten gebruik te maken van de nieuwe mogelijkheden. Technische Universiteit Eindhoven Voor studenten is interactief lesmateriaal ontwikkeld om algebraïsche vaardigheden te ontwikkelen en te oefenen. Zowel studenten van de TUE, als leerlingen in het middelbaar onderwijs hebben gebruik gemaakt van de materialen. De ontwikkeling van goede interactieve content is erg arbeidsintensief. Het is echter de moeite waard als er grote aantallen studenten en leerlingen gebruik van kunnen maken. De contacten met het middelbaar onderwijs die hierdoor ontstonden waren zeer waardevol en helpen de kenniskloof tussen middelbaar en hoger onderwijs te overbruggen. Technische Universiteit Delft In samenwerking met de andere TU s is een instaptoets ontwikkeld, die bij alle studenten is afgenomen. Aansluitend daarop is opfrisonderwijs aangeboden (werkcolleges) en konden studenten gebruik maken van online oefen- en toetsmateriaal (MathMatch). In dit implementatieproject is een groot aantal studenten bereikt. Tevens heeft het opfrisonderwijs een vaste plek verworven in het onderwijsaanbod van de TUDelft en heeft het aandacht gekregen van docenten en opleidingen om de algebraïsche vaardigheden naar een hoger peil te brengen. Rijksuniversiteit Groningen Voor studenten van de opleiding Natuurwetenschappen zijn online toetsen, op basis van MapleTA ontwikkeld. Studenten die in eerste instantie onvoldoende scoorden, konden nog twee keer herkansen. Tussendoor zijn enkele werkcolleges aangeboden en konden studenten in zelfstudie met online leermaterialen aan de gang. Studenten oordeelden positief over de aangeboden mogelijkheden. Veel studenten die eerst onvoldoende scoorden haalden een hoger niveau op de herkansingen. Een overtuigend effect in het vervolgonderwijs kon nog niet worden aangetoond. De faculteit Bedrijfskunde was geïnteresseerd in de opzet en wil soortgelijke activiteiten ontplooien voor de eigen studenten. Universiteit van Amsterdam Voor studenten van de natuurwetenschappelijke opleidingen zijn er vaardigheidstrainingen georganiseerd. Er is uitdrukkelijk voor gekozen niet met een instaptoets te beginnen, maar pas halverwege de trainingen oefentoetsen te introduceren. De trainingen worden afgesloten met een toets waarmee een bonuspunt voor een reguliere cursus kan worden verdiend. In het kader van het implementatieproject zijn de toetsen ontwikkeld en/of verbeterd en hebben ze een betere plaats in het curriculum gekregen. Daarbij is gebruik gemaakt van MathMatch producten. Studenten oordeelden daar positief over. Het kennisniveau van de deelnemende studenten is gestegen, al heeft een korte vaardigheidstraining maar een beperkte invloed. Vrije Universiteit Voor studenten van 3 opleidingen is een college Basiswiskunde verzorgd. Bij dit college zijn 10 digitale zelftoetsen ontwikkeld, op basis van MapleTA. De studenten hebben maar weinig gebruik gemaakt van de zelftesten; 25 % maakte 5 of meer zelftesten. De studenten die de zelftesten maakten, scoorden wel beter op het tentamen. Studenten waardeerden het college Basiswiskunde, maar achten de zelftesten niet erg nuttig. De tentamenresultaten waren echter laag. Overwogen wordt om meer op persoonlijke begeleiding en ondersteuning in te zetten in plaats van voort te borduren op online mogelijkheden. Fontys Hogescholen Nationale Kennisbank Basisvaardigheden Wiskunde Rapport Midterm Evaluatie 16
Bij 4 opleidingen is een in n@tschool ontwikkelde toetsbank ingezet. De opleidingen hebben ingangstoetsen afgenomen, vooral als signaal naar de studenten. Na de toets konden studenten deelnemen aan cursussen en gebruik maken van online zelfstudiemogelijkheden. Na afloop is opnieuw een toets afgenomen. Alhoewel studenten positief oordeelden over de geboden mogelijkheden, kon er geen stevige stijging van het wiskundeniveau worden vastgesteld. Online zelfstudiemogelijkheden lijken voor deze doelgroepen nog niet erg geschikt. Mogelijk dat het substantieel verhogen van de wiskundekennis ook een langer traject nodig heeft dan slechts enkele maanden. Haagse Hogeschool Voor studenten van de opleiding Technische informatica zijn instap- en vervolgtoetsen ontwikkeld. Tussendoor zijn colleges en practica gegeven en is gebruik gemaakt van zelf ontwikkelde onderwijsmaterialen. Doel van de activiteiten was het verhogen van de wiskunde basisvaardigheden en doorstroming mogelijk maken naar universitair masteronderwijs. Alhoewel maar een beperkt aantal studenten heeft geparticipeerd, zijn beide doelen bereikt. Van alle NKBW implementatieprojecten zijn afzonderlijke eindrapportages beschikbaar (www.nkbw.nl). De afzonderlijke implementatieproject-eindrapportages zijn niet in deze eindrapportage opgenomen, om de omvang van deze eindrapportage beperkt te houden. Patronen in opfrisonderwijs De implementatieprojecten die in het kader van het project Nationale Kennisbank Basisvaardigheden Wiskunde zijn uitgevoerd kennen een grote diversiteit. Verschillende instellingen en onderwijssystemen, verschillende doelgroepen en omstandigheden vereisen steeds een specifieke invulling. Desalniettemin zijn er enkele grove patronen te herkennen. Opfrisonderwijs vooraf, parallel, of just in time Bij enkele opleidingen (OU, UM, UU/JBI) wordt er nadrukkelijk voor gekozen om studenten voorafgaande aan het reguliere onderwijs zonodig bij te spijkeren. Reeds vroegtijdig worden de studenten benaderd en geadviseerd een voorkennistoets te doen en eventueel ontbrekende kennis op te frissen of bij te spijkeren. Dergelijk voorbereid onderwijs is veelal niet verplicht, kosteloos, in zelfstudievorm en gaat uit van het eigen verantwoordelijkheidsbesef van studenten voor zijn of haar eigen studieloopbaan. Studenten die zich daar niet op aangesproken voelen nemen veelal niet deel en starten zonder verdere voorbereidingen het reguliere onderwijs. Het merendeel van de opleidingen biedt extra wiskunde onderwijs veelal parallel aan, aan het reguliere onderwijs. Vaak is er een starttoets om na te gaan of de wiskundekennis op voldoende niveau is. Als dat niet het geval is, kan worden bijgespijkerd, al dan niet verplicht en afgesloten met een eindtoets. Veelal valt het opfrisonderwijs buiten het normale studieprogramma en telt het niet mee bij de studielast. De starttoets is informatief voor studenten en docenten; men weet wat er te doen staat. Voor studenten is de toets nogal eens confronterend: men heeft immers het voorbereidend onderwijs succesvol afgesloten, maar scoort nu toch laag. Slechts in een enkel geval (Universiteit Maastricht, Management of learning en School of Governance en Universiteit Twente, faculteit Elektrotechniek / kansrekening) worden er verderop tijdens de opleiding mogelijkheden geboden om specifieke wiskundig vaardigheden te ontwikkelen die op dat moment relevant zijn voor de opleiding. Onduidelijk is of studenten die deel hebben genomen aan de bijspijker- en opfriscursussen bij de start van hun opleiding, in een later fase van hun studie, nog eens teruggrijpen op de betreffende cursussen. Juist de just in time leermogelijkheden zouden goed kunnen profiteren van altijd aanwezig online studiemogelijkheden. Zelfstudie of groepswerk Vrijwel alle opfris- en bijspijker cursussen die parallel aan het reguliere onderwijs worden gegeven, bestaan uit een combinatie van groepsactiviteiten (colleges, practica) en zelfstudie Nationale Kennisbank Basisvaardigheden Wiskunde Rapport Midterm Evaluatie 17
(eventueel met online materialen). De cursussen voorafgaande aan het reguliere onderwijs zijn alle vrijwel volledig gebaseerd op zelfstudie. Daardoor is ook studie op afstand mogelijk, hetgeen vooral interessant is voor studenten die van elders uit de wereld in Nederland willen komen studeren, of studenten die hun studie met andere activiteiten (werk, gezin) moeten combineren. De verhouding zelfstudie/groepswerk bij opfrisonderwijs parallel aan het reguliere onderwijs varieert behoorlijk. Bepalende factor lijkt hier vooral budget en beschikbare docentcapaciteit te zijn. Voor zover er om didactische redenen voor een zelfstudieaanpak wordt gekozen, komt duidelijk naar voren dat dat een goede opzet en aansturing vereist. De huidige generatie studenten lijkt nog niet in staat om een goed eigen leertraject te doorlopen in een open online leeromgeving. Conclusies Organisatie 1 De implementatieprojecten konden voortvarend worden opgezet en uitgevoerd, omdat ze aansloten bij initiatieven en behoeftes die al binnen de instellingen en opleidingen speelden. 2 Door de onderlinge onafhankelijke opzet van de implementatieprojecten ontstonden er geen vertragingen in de projectuitvoering. 3 Tussen de verschillende implementatieprojecten is weinig onderlinge kennisuitwisseling tot stand gekomen. Alleen de onderlinge review van de implementatieprojectvoorstellen en de algemene presentaties op bijeenkomsten en in rapportages heeft geleid tot het kennisnemen van elkaars activiteiten. 4 De eindrapportages van de implementatieprojecten waren alle van goede kwaliteit en tijdig gereed. Inhoudelijk 5 Er was binnen de implementatieprojecten veel ruimte voor een eigen invulling van doelstellingen en werkwijzen. In een vervolgproject kan duidelijker gestuurd worden, bijvoorbeeld om te komen tot een betere inzet van zelfstudiemateriaal, of contextgebonden wiskundeonderwijs. 6 Doordat de portal Wizmo te laat beschikbaar kwam kon daar geen gebruik van worden gemaakt in de implementatieprojecten, en was het tevens lastig de ontwikkelde materialen tijdig aan te leveren. Het realiseren van eigen oplossingen om online materialen beschikbaar te stellen heeft tot extra inspanningen geleid. 7 Er was nog te weinig online content beschikbaar. Ook waren delen van de content niet voor iedereen toegankelijk, wat het gebruik hinderde. Materiaal dat er wel was, was niet altijd geschikt voor zelfstudie. Didactisch 8 Bijspijker- en opfrisonderwijs moet een duidelijk positie in het curriculum (of als voorkennisvereiste) krijgen, wil het daadwerkelijk effect sorteren. 9 Online onderwijs draagt het risico in zich te verworden tot vrijblijvend onderwijs. Studenten (en docenten) zullen met deze nieuwe vorm van onderwijs om moeten leren gaan. Een strakke structurering lijkt voor veel studenten momenteel nog belangrijk. 10 Instaptoetsen waarop laag wordt gescoord worden door studenten als confronterend en demotiverend ervaren. Strategisch 11 De diversiteit in opleidingen vóór en ná de aansluiting is groot. Ook het beheersingsniveau van studenten over het onderwijs dat ze gevolgd hebben is divers. Hoe goed het onderwijs op middelbaar en hoger niveau ook op elkaar afgestemd wordt, er zal altijd behoefte zijn aan onderwijs om hiaten weg te werken. Het kan daarbij gaan om opfrissen, bijspijkeren, maar ook om bestudering van nieuwe onderwerpen, noodzakelijk voor een specifieke opleiding of cursus. Nationale Kennisbank Basisvaardigheden Wiskunde Rapport Midterm Evaluatie 18
4.4. Verslag Werkpakket Communicatie Algemeen Het is verstandig gebleken om een apart werkpakket in te richten voor communicatie. Als je over de aansluitproblematiek tussen twee systemen (voortgezet onderwijs en hoger onderwijs) wilt praten, dan zal je minimaal er voor moeten zorgen dat van beide partijen mensen om tafel gaan zitten om tot een gezamenlijke probleemaanpak te komen. In dit eindverslag blikken we nog kort terug op de ondernomen stappen. Bijeenkomsten Het betreft hier geen overzicht van alle bijeenkomsten die gehouden zijn in het kader van NKBW. Dat zou een lange lijst opleveren, voor besprekingen van het kernteam, stuurgroep, resonansgroep, teams van de diverse werkpakketten en de bijeenkomsten per participerende instelling. We beperken ons hier tot de bijeenkomsten die gehouden zijn in het kader van het op gang brengen van een goede communicatie over de doelstellingen, werkwijze en uitkomsten van het NKBW-project. datum doelgroep #mensen conclusie 23 april nkbwuitwisselingsbijeenkomst 75 pos: goede onderwerpen, levendig debat: 23 april kan gezien worden als de followup van de ontstaans-bijeenkomst van nkbw, maart 2006. Het was goed te constateren dat er een belangrijke stap was gezet in het debat over de aansluiting. neg: te weinig docenten uit het vo: docenten vo kunnen zich niet makkelijk vrij maken voor dergelijke studie -dagen. En, NKBW was op dit tijdstip van het project nog vrijwel onbekend in het vo. 10 november 13 en 14 november nvvw-studiedag (docenten wiskunde vo) totaal twee workshops 30 pos: herkenning (bij het vo) over de stappen die bij nkbw genomen zijn: in twee workshops (1 over de portal Wizmo en 1 over de analyse van vo- en ho-toetsen) werd duidelijk dat er een groeiende belangstelling is bij docenten vo om zich met de aansluitingsproblematiek bezig te houden. neg: te weinig docenten uit het ho: voor deze studiedag geldt dan weer dat ho-docenten niet apart afreizen naar een vo-bijeenkomst om daar in discussie te gaan. dit kan wellicht een jaar later (2008) effectiever worden uitgevoerd. surf-onderwijsdagen 25 pos: herkenning vanuit andere hoinstellingen (en ook andere vakken) dat met de uitkomsten van nkbw iets gedaan kan worden: opvallend was dat men sterke interesse heeft in de gebouwde constructie bij Nationale Kennisbank Basisvaardigheden Wiskunde Rapport Midterm Evaluatie 19
30 november Wizmo.nl, en dan met name vragen heeft over de relatie tussen portal en community (iets waar we bij NKBW ook nog weinig ervaring mee hebben). neg: te weinig mensen bereikt: de aantallen vielen tegen en het was een zeer uiteenlopende groep qua interesse (iets wat overigens te verwachten valt bij surf onderwijs dagen) nkbw-slotbijeenkomst 40 pos: goede slotbijeenkomst zowel het interne deel (voor het project) als het externe deel konden goed ingevuld worden met oog voor evaluatie en een toegespitste kijk vooruit richting een mogelijk nkbw-2 traject neg: iets te weinig mensen gezien de behaalde resultaten op de diverse punten was het goed geweest voor de disseminatie als een grotere groep mensen was komen luisteren (te veel concurrentie met andere prioriteiten in deze tijd van het jaar is het vermoeden) Wat in ieder geval bereikt is, is dat er in dit samenwerkingsverband veel kennis is van de netwerken uit beide gebieden (vo en ho). Hier kan in het vervolg eenvoudig op voortgebouwd worden. Website Gedurende het project is een website onderhouden: www.nkbw.nl Aantal unieke bezoekers per maand Voor interne communicatie is overigens gebruik gemaakt van Surfgroepen. Het kernteam heeft regelmatig met behulp van Breeze overleg gevoerd. Met NKBW is afgesproken dat deze website nog minimaal 1 jaar door het Fi zal worden gehost. Met de mensen van SIGMA zal afgestemd worden hoe de inhoud ook op andere plekken kan worden getoond (door fysiek kopieren van materiaal of verwijzen). Voor alle duidelijkheid: de website Wizmo.nl staat helemaal los van de projectwebsite nkbw.nl Nieuwsbrief De NKBW-nieuwsbrief is iedere maand uitgekomen. Alle berichten uit de twaalf nieuwsbrieven zijn na te lezen op: http://www.fi.uu.nl/nkbw/rss/welcome.html Wat betreft de actualiteit van de berichtgeving zal vanaf 1 december 2007 aangesloten worden op de berichtgeving vanuit SIGMA. Nationale Kennisbank Basisvaardigheden Wiskunde Rapport Midterm Evaluatie 20