BAREFOOT - Building an Adult Resourced Environment for Online Outreach Training, Leonardo da Vinci - Transfer of Innovation

Transcriptie

1 BAREFOOT - Building an Adult Resourced Environment for Online Outreach Training, Leonardo da Vinci - Transfer of Innovation UK/11/LLP-LdV/TOI-415 Barefoot trainer- WP 6 Transfer Final report Zwolle, 4 juli 13

2 Inhoud Inleiding... 2 A. de Training Algemeen... 3 Lessons learned Delivery methods including support model Techniek... 5 Lessons learned Opbrengsten... 5 B. Het ontwikkelde materiaal Inhoud Ontwerp lesmateriaal Techniek C. Eindconclusie Barefoot trainer WP6 transfer Final report Page 1 of 17

3 Inleiding Dit rapport is gebaseerd op diverse bronnen: 1. Zelfevaluatie partners 2. Begin- en eind surveys van de course 3. Surveys ingevuld aan het eind van elke unit 4. Gesprekken met diverse partners Het rapport gaat over twee onderdelen, de evaluatie van de training als geheel en een evaluatie van het ontwikkelde materiaal. Barefoot trainer WP6 transfer Final report Page 2 of 17

4 A. de Training 1. Algemeen Alle zes de partners hebben de training aangeboden. In totaal zijn er 126 cursisten gestart, 89 hebben de training volledig doorlopen. Uiteindelijk zullen ongeveer 36 cursisten een EU-certificaat aanvragen en ontvangen. In alle partnerlanden bestond de groep uit mensen met een verschillend niveau mbt kennis van didactiek en ICT. De bestede tijd per cursist aan de cursus liep dan ook erg uiteen. Cursisten die gecertificeerd wilden worden besteedden over het algemeen meer tijd aan de cursus dan anderen. Daarnaast blijkt dat cursisten met een hoger niveau minder belang hechten aan het EU-certificaat. Als belangrijkste verklaring voor de uitval van cursisten werd voornamelijk het gebrek aan tijd van cursisten genoemd. Bijna alle cursisten bevelen de training aan (figuur1). 1% 1% % % % % Would you recommend the Barefoot trainer course? % Average End course YES End course NO Figure 1 Barefoot trainer WP6 transfer Final report Page 3 of 17

5 Met uitzondering van de Ierse cursisten en enkele Nederlandse cursisten voldeed de training aan hun verwachtingen. 15% 1% 5% % Did the content of the course met your expectations? Average YES NO Figure 2 Daar waar niet aan de verwachtingen werd voldaan werd dat o.a. toegeschreven aan een te laag niveau van het materiaal ( ) en de grote tijdsinvestering mbt de uit te voeren activiteiten (). Lessons learned Geef vooraf duidelijkere informatie over de opzet van de training: - Studiebelasting - Inhoud training, inclusief het niveau - Eisen die gesteld worden aan cursisten 2. Delivery methods including support model De partners gebruikten in grote lijnen twee soorten delivery methods: distance learning of blended learning. Partner Delivery Method Uitlevering Opdrachten Ondersteuning Apopsi Afstandsleren, indien gewenst 1op1 , ELO Mail, papier Mail, Skype sessies. BMC Blended learning: 15 2hour sessies, 8 f2f and 7 online ELO ELO Forumdiscussies, Facebookgroep KJU Blended learning: F2F bij start en eind cursus en elke unitwisseling ELO, , CDrom en papier Studenten leverden niets in Mail, Skype, F2F en ELO Blended learning: F2F start en Unit 1, units 2, 3 en 4 online, F2F - afsluiting ELO, papier, mail Niet bekend Peer2Peer, , google groups La LOCO Blended learning: Online bij start, F2F bij eind Unit 1, 2 en afsluiting training. Mail In F2F lessen F2F. Skype en mail voor technische zaken. Blended Learning: 4 2hour sessies en livestream, zelfstudie ELO ELO, Facebook, forum Skype, ELO, Facebook, Forum Barefoot trainer WP6 transfer Final report Page 4 of 17

6 In het supportmodel verschillen de partners BMC en van de anderen: zij gebruiken Facebook als ondersteuningsmiddel. Hierdoor ontstond er een informele vorm van leren. De partners zijn over het algemeen tevreden over hun aanpak, maar benoemden de volgende aandachtspunten: o o o Een online training moet duidelijke afspraken bevatten over wanneer materiaal ingeleverd moet worden en wanneer er gestart moet worden met een nieuw onderdeel. De cursisten liepen te ver uiteen om bv zinvolle discussies te voeren en samenwerkend te kunnen leren. Cursisten moeten (meer) prikkels krijgen hun training op tijd af te ronden Gebruik een ELO. Door technische problemen met sommige ELO s konden enkele partners pas later met een ELO starten. Een ELO structureert en organiseert. 3. Techniek Door problemen rond het inrichten van een aantal ELO s hadden vier partners technische problemen. Hierdoor werd of de training later gestart of men koos (tijdelijk) voor een andere leveringsmethode. Gebruikers ervoeren nauwelijks technische problemen in de toegankelijkheid van het materiaal, uitgezonderd de cursisten uit Ierland. Zij hadden op hun werkplek niet de beschikking over de vereiste afspeelsoftware (Flash) en mochten dit ook niet installeren. Daarnaast gaf soms de firewall problemen. Partners ervoeren voorts weinig flexibiliteit in het te gebruiken platform, zo kon er geen IPad of Iphone gebruikt worden. Lessons learned Van te voren moeten de minimale systeem eisen duidelijk worden omschreven en gecommuniceerd. Ook moet het materiaal op zo veel mogelijk platforms kunnen draaien (HTML5?). 4. Opbrengsten Voordat de training begon is aan de cursisten een vragenlijst gegeven. Hierin werd oa gevraagd naar het eigen vertrouwen in hun ict-vaardigheden, kennis rond beschikbare soft- en hardware en hun bewustzijn rond de mogelijkheden van het gebruik van ICT in het onderwijs. In onderstaande figuren is de opbrengst van het project op deze drie gebieden te zien. Duidelijk is dat het vertrouwen gestegen is (figuur 1 en 2) en dat er meer kennis rond soft- en hardware is (figuur 3 en 4). Ook is er meer bewustzijn ontstaan rond de mogelijkheden van het effectief gebruik van ICT in het onderwijs (figuur 5 en 6). Uitzondering is Ierland, waar geen van de cursisten zegt meer kennis van hard- en software te hebben opgedaan. Barefoot trainer WP6 transfer Final report Page 5 of 17

7 Lack of confidence in IT skills % % % % % Average Start Course YES Figure 3, before training I have more confidence in my own IT-skills 1 1 Strongly disagree 29 Disagree Agree Strongly agree Figure 4, after training (percentage) % % % % Knowledge of what software/hardware is available % Average Start Course YES Figure 5, before training Barefoot trainer WP6 transfer Final report Page 6 of 17

8 I have more knowledge about what soft- or hardware is available 1 1 Strongly disagree 25 Disagree Agree Strongly agree Figure 6, after training (percentage) 1% 1% % % % % Not sure how to use technology effectively in training % Average Start Course YES Figure 7, before training Barefoot trainer WP6 transfer Final report Page 7 of 17

9 I m more aware how to use technology effectively in my training 1 Strongly disagree 13 Disagree Agree Strongly agree Figure 8, after training (percentage) Het is interessant om te zien of de wijze waarop cursisten ICT in de les gebruiken gaat veranderen. We zien dat het gebruik van presentatiesoftware ongeveer gelijk zal blijven, maar de cursisten zijn van plan om vaker sociale software voor samenwerking en communicatie te gaan gebruiken. I will use presentation software (more) to support my training 1% 1% % % % % % Average Start Course YES End course YES Figure 9 Barefoot trainer WP6 transfer Final report Page 8 of 17

10 I will use collaboration software (more) to support my training 1% 1% % % % % % Average Start Course YES End course YES Figure 1 I will use communication tools for coaching (more) to support my training 1% 1% % % % % % Average Start Course YES End course YES Figure 11 De bereidheid van cursisten om sociale software in te gaan zetten blijkt ook uit de volgende figuur. Hierin geeft men aan ook zelf meer gebruik te gaan maken van deze software. Barefoot trainer WP6 transfer Final report Page 9 of 17

11 I am or will be a member of a social network eg Facebook 1% 1% % % % % % Average Start Course YES End course YES Figure 12 B. Het ontwikkelde materiaal In dit onderdeel van het rapport vindt u een weergave van de surveys die aan het eind van elke unit bij de gebruikers zijn afgenomen. Gevraagd is naar feedback over de inhoud, de relevantie daarvan en of het de cursisten geholpen heeft in hun dagelijkse werkpraktijk. Ook naar zaken als het niveau, en gekozen opdrachten is een mening gevraagd. Tenslotte is ook specifiek gevraagd naar layout, gebruiksgemak, leesbaarheid en technische problemen. In dit rapport laten we hier niet alle verzamelde data zien. We gebruiken grafieken die exemplarisch zijn voor de gestelde vraag. Opgemerkt moet worden dat over het algemeen het aantal ingevulde surveys per unit steeds minder werd naarmate men verder in de cursus kwam. Barefoot trainer WP6 transfer Final report Page 1 of 17

12 2. Inhoud a. Zijn de onderwerpen behandeld die mij interesseren? Het materiaal sluit in grote meerderheid aan bij het interessegebied van de cursisten, behalve bij. the learning focused on issues that interest me. 1 Strongly disagree 4 Disagree Agree Strongly agree Figure 13, survey Unit 1 (percentages) b. Heb ik dingen geleerd die belangrijk zijn voor mijn (professionele) opleidingspraktijk? De grote meerderheid van de aangeboden onderwerpen is relevant voor het werk van de cursisten. Dit uitgezonderd, die bij Unit 1 en in mindere mate bij Unit 2 het materiaal niet als belangrijk ervaart. Je kunt je afvragen of deze cursisten afkomstig zijn uit de Barefoot-doelgroep. what I learnt is important for my (professional) training practice. Strongly disagree 13 Disagree Agree Strongly agree Figuur 14, survey Unit 2 (percentages) Barefoot trainer WP6 transfer Final report Page 11 of 17

13 c. Heb ik dingen geleerd die de kwaliteit van mijn lessen/trainingen kunnen verbeteren? En: heb ik dingen geleerd die goed aansluiten bij mijn (professionele) opleidingspraktijk? Beide vragen zijn door alle partners (uitgezonderd ) positief beantwoord. Unit 3 is door alle partners positief beoordeeld als het gaat om de kwaliteit van lessen te kunnen verbeteren. what I learnt connects well with my (professional) training practice. 1 Strongly disagree 17 Disagree 1 5 Agree Strongly agree I learnt how to improve my (professional) training practice Strongly disagree 25 Disagree Agree Strongly agree Figure 15, Survey Unit 3 (percentages) Barefoot trainer WP6 transfer Final report Page 12 of 17

14 d. Was de Unit op het juiste niveau qua moeilijkheid (niet te makkelijk niet te moeilijk)? Het niveau is over het algemeen prima. vond het materiaal te simpel, zij vinden het meer geschikt om als basismateriaal te gebruiken. Opmerkingen die bij deze vraag gemaakt zijn: meer (praktijk)voorbeelden, er wordt te veel informatie overgedragen. was at the correct level of difficulty (not too easy not to difficult) 1 Strongly disagree Disagree 5 75 Agree Strongly agree 1 15 Figure 16, Surveu Unit 4 (percentages) e. De Unit bevat duidelijke vragen en activiteiten. Gemiddeld gezien scoren de vragen en activiteiten voldoende. Opvallend is echter dat deze vraag over de hele linie lager scoort dan andere waarderingsvragen. Alhoewel nog steeds voldoende, scoort Unit 2 hier het laagst. Advies is om alle vragen en activiteiten nog eens tegen het licht te houden en waar nodig te herschrijven. was at the correct level of difficulty (not too easy not to difficult) 1 1 Strongly disagree 5 Disagree Agree Strongly agree Figuur 17, Survey Unit 1 (percentages) Barefoot trainer WP6 transfer Final report Page 13 of 17

15 f. De Unit bevat goed uitgelegde informatie. De informatie in de Units wordt in het algemeen als helder uitgelegd ervaren. 1 1 contains well explained information Strongly disagree Disagree Agree Strongly agree Figuur 18, survey Unit 3 (percentages) g. Overige opmerkingen mbt de inhoud Een paar citaten: It would also have been useful to release all the SCORM packages for the module as one to provide learning for the assessment, given that later modules refer to areas in the assessment. As this is a part-time course andwe are working, it would be useful to have learning material as far in advance as possible to allow for adequate time for planning and completion of assessments (Unit 1). Geef naast het noemen van de voorbeelden ook de kosten er van weer (Unit 2). Provide downloadable copies or printed copies of information. Deepen the information, more tools to help improve performance in classroom (Unit 3). Very usefull due to the practical examples (Unit 4) 2. Ontwerp lesmateriaal b. Layout In het algemeen vindt men de layout prima, met een paar kanttekeningen: o Er is veel tekst gebruikt, lastig om die tekst te lezen o Er wordt te veel gebruik gemaakt van de virtuele tutor (TOM) o De graphics zijn rafelig c. Gebruiksgemak Over het algemeen simpel in gebruik. Opmerkingen: o De navigatie is OK, maar terugbladeren is lastig. Ook wordt het niet door kunnen klikken bij fout beantwoorde opdrachten als kinderachtig ervaren. Soms is het lastig om door te klikken naar het volgende onderdeel o Er wordt niet opgeslagen waar je gebleven bent o De gegeven antwoorden worden niet opgeslagen. Barefoot trainer WP6 transfer Final report Page 14 of 17

16 d. Leesbaarheid De leesbaarheid wordt als redelijk ervaren o De tekstgrootte verandert steeds o Door de gelinieerde achtergrond soms slecht te lezen o meer een tekstboek online o te veel tekst en lange zinnen 3. Techniek De meeste partners liepen tegen technische problemen aan bij de start van de training. Did you encounter technical problems? YES NO 7% 93% 88% 75% 57% 64% 77% 3% 7% 12% 25% 43% 36% 23% TOTAL Figuur 19, survey Unit 1 (percentages) Dit lag in de meeste gevallen niet aan het materiaal, maar aan de distributie er van (bv de ELO). De slechte score van lag aan het feit dat zij geen zipbestanden konden uitpakken en er geen Flash was geïnstalleerd op de werk-pc s. Barefoot trainer WP6 transfer Final report Page 15 of 17

17 C. Eindconclusie De training in zijn geheel heeft opgeleverd wat er van verwacht was. Cursisten hebben meer vertrouwen gekregen in hun eigen ICT-vaardigheden en zijn zich meer bewust geworden van de mogelijkheden van ICT om hun eigen lespraktijk te verbeteren. Er is geen beste manier gevonden om de training te geven. Zowel blended learning in meerdere varianten en distance learning zijn in het geval van de Barefoottrainingen effectief gebleken. De belangrijkste uitkomst voor dit soort van training is dat er een strakke planning, begeleiding en structuur moet zijn voor cursisten én trainers. Met betrekking tot het materiaal kan gezegd worden dat het in grote lijnen voldoet. Kanttekeningen zijn er te maken met betrekking tot de leesbaarheid en de mate van interactiviteit. Barefoot trainer WP6 transfer Final report Page 16 of 17