Deliverable 4.8 en 4.9 onderwijsactiviteiten testfase 2 In dit document zijn de verslagen en evaluaties opgenomen van de onderwijsactiviteiten van het Onbetwist-project in testfase 2. Voor het opstellen van de verslagen en evaluaties was een sjabloon beschikbaar gesteld. Bij de Universiteit Maastricht zijn via de eigen instellings ELO opgaven beschikbaar gesteld aan studenten. Deze opgaven zullen in een later stadium opgenomen worden in de Onbetwist database. Bij de Universiteit Utrecht waren dit voorjaar geen onderwijsactiviteiten in het onderwijsproject Lineaire algebra. Bij de Universiteit Utrecht zijn deze zomer in het onderwijsproject voor Scheikunde items gebruikt uit de Digitale wiskunde omgeving van de UU, zowel als entree- als als posttoets. Bij de Universiteit Utrecht zijn afgelopen periode in het onderwijsproject voor Informatica items uit de Onbetwist database gebruikt, zowel als entree- als als posttoets. Bij de Universiteit van Amsterdam zijn afgelopen periode in het onderwijsproject voor Biomedische wetenschappen items gebruikt uit de Digitale wiskunde omgeving (van de UU). Bij de Universiteit van Amsterdam zijn afgelopen periode in het onderwijsproject voor Levenswetenschappen items gebruikt uit de Digitale wiskunde omgeving (van de UU). Bij de TU Eindhoven zijn items uit de Onbetwist database grootschalig ingezet bij een zomercursus voor eerstejaars. Bijna 2.000 studenten hebben items gemaakt, samen hebben ze ongeveer 300.000 maal een elektronische opgave gemaakt. Bij de Open Universiteit is bij het onderwijsproject Basiscursus wiskunde geen gebruik gemaakt van items uit de Onbetwist database omdat ze niet voldoende gemakkelijk beschikbaar waren, en er voldoende andere items voorhanden waren. Bij het onderwijsproject Voorbereidingscursus wiskunde A en T zijn wekelijks opgaven ingezet en gemaakt door studenten. Van de Onderwijsprojecten TUE/Lineaire algebra en UU/Economie zijn geen rapportage en evaluaties over de afgelopen periode ontvangen. Conclusie Uit de rapportages valt af te leiden dat er op het gebied van digitale toetsing en wiskunde aansluit- en eerstejaars onderwijs bij de instellingen veel gebeurt, maar dat er nog weinig gebruik gemaakt wordt van de Onbetwist database. Iedere instelling werkt vooralsnog
voornamelijk met eigen oplossingen en materialen. Perspectief is wel dat er items aangeleverd en ingevoerd zullen worden. Alleen in Eindhoven wordt grootschalig gebruik gemaakt van items die ook in de Onbetwist database voorkomen, al moeten veel van die items nog beoordeeld worden door de redactiecommissies. Hierna zijn de afzonderlijke rapportages opgenomen, voor zover ontvangen. Implementatieproject testfase 2 Verslag F.Beukers Universiteit Utrecht Er hebben geen activiteiten plaatsgevonden in dit blok Evaluatie Implementatieproject testfase 2 Hoe zijn de items en/of toetsen uit Onbetwist beschikbaar gesteld aan de studenten? instellings-elo, ) Egbert Mulder, Annik van Keer, Henk van der Kooij Universiteit Utrecht, Scheikunde, Onderwijsinstituut VWO-wiskunde Digitale Wiskunde Oefenomgeving, www.fi.uu.nl/dwo/sk Op papier
Hoe zijn de items en/of toetsen uit Onbetwist officiële toets, ) Hoeveel items en/of toetsen zijn gebruikt? Zijn er ook nog items en/of toetsen gebruikt buiten Onbetwist? Is de Onbetwist database voldoende gevuld met items en toetsen voor dit Hoe is gebruik gemaakt van Onbetwist-items en -toetsen gestimuleerd of afgedwongen? Welke tijdsinzet is gebruikt in deze fase van het project? Als entree- en posttoets en oefenmateriaal bij de Wiskunde Zomercursus Twee toetsen, entree- en posttoets, ca 20 per toets, en als oefenmateriaal tijdens de cursus Digitale Wiskunde Oefenomgeving, www.fi.uu.nl/dwo/sk Ja Klassikaal tijdens de Wiskunde Zomercursus. Deze besloeg 5 middagen (27-31 augustus 2012), 27 deelnemers (eerstejaars, tweedejaars recidivisten en premaster studenten) 60 uur Implementatieproject testfase 2 Johan Jeuring Universiteit Utrecht / Betawetenschappen / Informatica Verslag Onbetwist beschikbaar gesteld aan de studenten? instellings-elo, ) VWO-wiskunde Items worden voornamelijk elektronisch ter beschikking gesteld via instellings-wiki. Toetsen worden op papier afgenomen.
Onbetwist officiële toets, ) Hoeveel items en/of toetsen zijn gebruikt? Werden er ook nog items en/of toetsen gebruikt buiten Onbetwist? Was de Onbetwist database voldoende gevuld met items en toetsen voor dit Hoe werd gebruik van Onbetwist-items en -toetsen gestimuleerd of afgedwongen? Hoeveel uren zijn in deze fase van het project Onbetwist items worden ingezet bij de instaptoets en uiteindelijke toets, en bij de oefenitems door het jaar heen. Een toetsen, enkele tientallen items. Er worden ook nog items aangeboden uit Math-Bridge. Nog niet: het zou mooi zijn als de Freudenthal applets ook toegevoegd zouden worden op de een of andere manier. Door het te publiceren op de vakpagina s, het gebruik te demonstreren, en eventuele problemen met oefeningen te bespreken. Tijdens de feedback-bijeenkomsten worden alleen problemen met het oplossen van opgaven besproken. 11 Evaluatie Geef hiernaast een korte evaluatie van testfase 1, met als aandachtspunten: - zijn de voorgenomen activiteiten uitgevoerd? - zijn de voorgenomen doelen gehaald? - wat ging goed, wat ging slecht? - wat moet er komende fasen van het project worden veranderd? Ik kan de Freudenthal applets makkelijk gebruiken, maar het is me nog niet helemaal duidelijk hoe ik de Onbetwist database makkelijk in zou kunnen zetten. Implementatieproject testfase 2 en ontwikkelfase 3 UvA, 1 e jaar bacheloropleiding biomedische wetenschappen: Cursus Humane Fysiologie & ICT Wiskunde 2
Onbetwist beschikbaar gesteld aan de studenten? instellings-elo, ) Onbetwist officiële toets, ) Hoeveel items en/of toetsen zijn gebruikt? Werden er ook nog items en/of toetsen gebruikt buiten Onbetwist? Was de Onbetwist database voldoende gevuld met items en toetsen voor dit Hoe werd gebruik van Onbetwist-items en -toetsen gestimuleerd of afgedwongen? Hoeveel uren zijn in deze fase van het project Geef hiernaast een korte evaluatie van testfase 2, met als aandachtspunten: André Heck, Jan Hindrik Ravesloot UvA, FNWI VWO-wiskunde en Calculus (met name differentiaalvergelijkingen Homepage van docent bevatte het digitale lesmateriaal opgezet naar analogie van UvAe-klas en de DWO was de voornaamste digitale wiskunde oefenomgeving 4 weken in blok 5, met digitale wiskundeoefeningen om de wiskunde te leren die leidt tot begrip van Hodgkin-Huxley model in neurofysiologie. Studenten werden voorafgaand aan de twee colleges gevraagd om zelfstandig met het lesmateriaal te werken 18 DWO oefen-items zijn ontwikkeld, min of meer afgestemd op de studie levenswetenschappen. Verder zijn 5 Geogebra/Excel gebaseerde opdrachten en 13 pen-en-papier opdrachten met pencasts als uitwerking geïmplementeerd GeoGebra-gebaseerde opdrachten vallen buiten ONBETWIST kader Wat betreft basisvaardigheden (bijv. integreren van functies) wel, maar er was behoefte aan oefeningen in de context van levenswetenschappen om de studenten te motiveren, ook op het gebied van differentiaalvergelijkingen Minimumdeelname aan opgavenpractica In testfase 2 en ontw. Fase 3: 70 uur. Deze fase werd vooral gebruikt voor didactisch en inhoudelijk ontwerp van de cursus, om lesmateriaal op te bouwen en dit te gebruiken in de implementatie van de cursus in blok 5. Voorgenomen activiteiten voor ICT Wiskunde in blok 5 van het eerstestudiejaar
- zijn de voorgenomen activiteiten uitgevoerd? - zijn de voorgenomen doelen gehaald? - wat ging goed, wat ging slecht? - wat moet er komende fasen van het project worden veranderd? voor biomedische wetenschappen zijn gerealiseerd (voor 150 studenten). Uit de evaluatie is gebleken dat de leerdoelen te hoog gegrepen waren: studenten hadden veel moeite met de lesstof en hadden behalve oefening graag meer college gehad en zouden ook een werkcollege en/of vragenuur gewenst hebben. Ook hadden ze behoefte aan meer uitgewerkte voorbeelden. Het onderdeel is niet getentamineerd om geen struikelblok voor studenten te zijn bij eht vak Humane anatomie en fysiologie.. De cursus moet gereviseerd worden voor volgend jaar: de digitale aanpak kan gehandhaafd worden bij herhaling van wiskunde, maar het cursusmateriaal moet aan het wiskundeniveau van de studenten aangepast worden daar waar het om nieuwe lesstof gaat. Bij ICT wiksunde 1 in blok 1 zal al meer aandacht aan differentiaalvergelijkingen besteed worden in een college en practicum. Implementatieproject testfase 2 en ontwikkelfase 3 UvA, 1 e jaar bacheloropleiding levenswetenschappen: Cursus Biochemie & Celbiologie & ICT Wiskunde 1 André Heck, Tanneke den Blaauwen UvA, FNWI Onbetwist beschikbaar gesteld aan de studenten? VWO-wiskunde, i.h.b. rekenen met grootheden, wiskundige functies en hun afgeleiden. wiskunde van groeiprocessen, Elecktronisch: BlackBoard is communicatiemiddel en DWO is de digitale wiskunde oefenomgeving
instellings-elo, ) Hoe e de items en/of toetsen uit Onbetwist officiële toets, ) Hoeveel items en/of toetsen zijn gebruikt? Werden er ook nog items en/of toetsen gebruikt buiten Onbetwist? Was de Onbetwist database voldoende gevuld met items en toetsen voor dit Hoe werd gebruik van Onbetwist-items en -toetsen gestimuleerd of afgedwongen? Hoeveel uren zijn in deze fase van het project Geef hiernaast een korte evaluatie van testfase 2 ontwikkelfase 3, met als aandachtspunten: - zijn de voorgenomen activiteiten uitgevoerd? - zijn de voorgenomen doelen gehaald? - wat ging goed, wat ging slecht? - wat moet er komende fasen van het project worden veranderd? In week 1 een diagnostische toets; verder wekelijks in blok 1, met digitale wiskundeoefeningen om op het gewenste wiskunde A niveau (terug) te komen en met een nieuw stukje wiskunde (differentiaalvergelijkingen) kennis te maken. Nieuw is een herhaling van de diagnostische toets in week 8 om vooruitgang te peilen. Eerder ontwikkeld diagnostische vwowiskunde A toets (met 16 vragen) en toetsmateriaal (50 items) is verbeterd en opnieuw ingezet. Nieuw waren extra facultatieve oefeningen van VWO-wiskunde: het betrof 26 DWO activiteiten met in totaal 214 items. Sommige studenten hebben inderdaad van de extra onderdelen gebruik gemaakt Ja, toetsen op Prep-U niveau 5 uit de bioportal horende bij het studieboek Life. Wat betreft basisvaardigheden (bijv. rekenen, differentiëren van functies) wel, maar er blijft behoefte aan oefeningen in de context van levenswetenschappen om de studenten te motiveren. Een minimum slagingspercentage toegang geeft tot (deel)tentamens. In testfase 2 en ontw. Fase 3: 25 uur Deze fase werd vooral gebruikt om lesmateriaal te verbeteren en aan te passen. Voorgenomen activiteiten voor ICT Wiskunde 1 in blok 1 van het eerstestudiejaar voor levenswetenschappen zijn gerealiseerd (voor 550 studenten). Oorspronkelijke DWO modules zijn in kleinere blokken opgesplitst die wekelijks aangeboden werden. Dit lijkt te bevorderen dat studenten bij blijven en niet onnodig te veel vooruit werken. Eventuele technische problemen hebben dan ook minder nadelige gevolgen. Uit eerder DWO-materiaal kon gemakkelijk extra materiaal gehaald worden: hergebruik werkt in praktijk
Implementatieproject testfase 2 en ontwikkelfase 3 UvA, 1 e jaar bacheloropleiding levenswetenschappen: Cursus Methoden van onderzoek en statistiek In testfase 2 en ontw. Fase 3 was beoogd 20 uur werk te stoppen in uitbouw van lesmateriaal en testen in MapleTA server van UvA, met speciale aandacht aan implementatie en evaluatie. Dit is niet gebeurd vanwege overload van werkzaanmheden van betrokken personen (André Heck en Maarten Boerlijst), waardoor schwung uit dit onderdeel gekomen is. Ook stond installatie van een nieuwe Maple TA versie op stapel binnen UvA en zou implementatie beter hierin kunnen plaatsvinden. Werkzaamheden vinden nu in najaar plaats (cursus loopt door t/m blok 4) Implementatieproject testfase 2 Hans Cuypers TU/e Verslag Onbetwist beschikbaar gesteld aan de studenten? instellings-elo, ) Onbetwist Zomercursus 1ste jaars. Herhaling van de vwo-stof. Opgaven werden genomen uit het domein vwo en calculus. Via instellings-elo werden de vragen aan ongeveer 1900 studenten beschikbaar gesteld. In totaal is ongeveer 300.000 maal een elektonische opgave gedaan. De cursus werd afgesloten met een schriftelijke toets in de eerste collegeweek. Ja
officiële toets, ) Hoeveel items en/of toetsen zijn gebruikt? Ongeveer 200 Werden er ook nog items en/of toetsen gebruikt buiten Onbetwist? Was de Onbetwist database voldoende gevuld met items en toetsen voor dit Hoe werd gebruik van Onbetwist-items en -toetsen gestimuleerd of afgedwongen? Hoeveel uren zijn in deze fase van het project Nee Ja Deelname was voor aankomende studenten en daardoor in de zoemr niet verplicht. De toets in het begin van het collegejaar echter wel. Ongeveer 50 Evaluatie Geef hiernaast een korte evaluatie van testfase 2, met als aandachtspunten: - zijn de voorgenomen activiteiten uitgevoerd? - zijn de voorgenomen doelen gehaald? - wat ging goed, wat ging slecht? - wat moet er komende fase van het project worden veranderd? De voorgenomen activiteiten zijn uitgevoerd De doelen behaald. Niks Implementatieproject testfase 2 Léon Driessen Open Universiteit / Faculteit Informatica - Basiscursus wiskunde, docent: Bert Esmeijer - Voorbereidingscursus wiskunde A, docent Léon Driessen - Voorbereidingscursus wiskunde T,
docent Léon Driessen Verslag Onbetwist beschikbaar gesteld aan de studenten? instellings-elo, ) Onbetwist officiële toets, ) VWO wiskunde Via www.onbetwist.org Basiscursus wiskunde: - uiteindelijk is geen gebruik gemaakt van de items; in het reguliere onderwijsmateriaal was voldoende aanwezig, en de items waren niet gemakkelijk toegankelijk. Voorbereidingscursus wiskunde A en T: - Wekelijks, als extra oefening bij de lessen Hoeveel items en/of toetsen zijn gebruikt? Ongeveer 100 Werden er ook nog items en/of toetsen gebruikt buiten Onbetwist? Was de Onbetwist database voldoende gevuld met items en toetsen voor dit Hoe werd gebruik van Onbetwist-items en -toetsen gestimuleerd of afgedwongen? Hoeveel uren zijn in deze fase van het project Ja, de items en opgaven uit de boeken, en van de oefententamens. Nog niet. Het werd studenten geadviseerd. Enkelen gingen serieus er mee aan de slag. Uiteindelijk is het de verantwoordelijkheid van de studenten zelf. 20 uur Evaluatie Geef hiernaast een korte evaluatie van testfase 2, met als aandachtspunten: - zijn de voorgenomen activiteiten uitgevoerd? Bij de Basiscursus wiskunde is uiteindelijk niet meer gebruik gemaakt van de onbetwistitems. De toegang was nog lastig, het interface nog niet best.
- zijn de voorgenomen doelen gehaald? - wat ging goed, wat ging slecht? - wat moet er komende fasen van het project worden veranderd? Bij de Voorbereidingscursussen wiskunde A en T is het gelukt om studenten naar de items te verwijzen en een aantal heeft er hun voordeel mee gedaan. Belangrijk is dat de opgaven heel makkelijk toegankelijk zijn voor de studenten, en dat ze er zonder technisch gedoe mee aan de slag kunnen. Als er technisch dingetjes fout gaan, worden ze extra onzeker en haken heel snel af. De bruikbaarheid voor docenten en studenten zal dus in de komende fasen van het project sterk verbeterd moeten worden.