TOA: Toolkit én schatkist Ruim 1,7 miljoen toetsen afgenomen. Wat weten we nu?
Taal en rekenen 2 jaar onderweg en wat heeft ons dit nu gebracht? Bekijk de resultaten van 2 jaar meten. Bureau ICE is in 2007 gestart met de TOA. Nu werken meer dan 700 scholen met 450.000 leerlingen met de TOA en zijn er ruim 1,7 miljoen toetsen af genomen. Bij de 0-meting bij de start van het schooljaar 2011-2012 zijn ruim 200.000 toetsen afgenomen. In 2010 waren dat er voor de 0-meting nog een kleine 40.000. De Toolkit Onderwijs en Arbeidsmarkt is met ruim 350 toetsen niet alleen een schatkist met toetsen maar bevat vooral een schat aan informatie over de leer lingen. Bijvoorbeeld over hoe zij scoren op Referentie niveaus Taal en Rekenen. En hoe ze zich ontwikkelen. Want na 2 jaar toetsen tekent zich ook een eerste beeld af van het rende ment van in spanningen om gedurende het mbo-onderwijs de taal- en rekenvaardigheid van leerlingen te ver beteren. Top vijf van bevindingen: 1 2 3 4 5 Het belang van een 0-meting wordt breed erkend: niet alleen het aantal afnamen groeide van 40.000 toetsen in 2010 naar ruim 100.000 toetsen in 2011, maar scholen kiezen er ook vaker voor meerdere vaardigheden te meten bij de instroom. Bij instroom in het mbo leest meer dan de helft van de leerlingen van de mbo-1 opleidingen onder niveau. Zij moeten twee niveaustappen maken om de eindnorm te kunnen halen. Voor niveau 4-leerlingen geldt dat ongeveer 75% van de leerlingen bij instroom leest op niveau en dus in het mbo nog één niveaustap moet maken. Het niveau waarmee leerlingen instromen in het mbo wijkt in 2011 nauwelijks af van het beeld van 2010. Bij een tweede meting gedurende het mbo-onderwijs blijken leerlingen voor rekenen, lezen en luisteren gemiddeld genomen vooruit te gaan ten opzichte van hun 0-meting. 1.7 miljoen Totaal aantal afnamen Beheerders/docenten 14.200 700 scholen Leerlingen 570.000 210.000 Aantal afnamen 0-meting 2011 350 Aantal toetsen op 1 maart 2012 80 Aantal toetsen ontwikkeld in 2011
Taal en rekenen 2 jaar onderweg en wat heeft ons dit nu gebracht? Bekijk de resultaten van 2 jaar meten. Rekenen Totaal aantal deelnemers 2010: 9.798 Totaal aantal deelnemers 2011: 25.209 2010 2011 27% 26% 37% 33% 28% 27% Vergelijk uw eigen resultaten met de landelijke uitkomsten! Lager dan 8% 4% 3% 1% 1% 1% Lager dan Lager dan 0345-656610 Lezen Totaal aantal deelnemers 2010: 14.484 Totaal aantal deelnemers 2011: 39.639 2010 2011 46% 45% Luisteren Totaal aantal deelnemers 2010: 12.065 Totaal aantal deelnemers 2011: 32.317 2010 2011 56% 56% 25% 23% 9% 9% 12% 8% 1 11% 3% Lager dan Lager dan Lager dan 2 2 17% 15% 7% 5% 2% 2% 1% Lager dan Lager dan Lager dan Taalverzorging Totaal aantal deelnemers 2010: 2.088 Totaal aantal deelnemers 2011: 17.955 2010 2011 11% 8% 33% 32% 47% 44% 13% 11% Lager dan Schrijven Totaal aantal deelnemers 2010: 3.154 Totaal aantal deelnemers 2011: 4.162 2010 2011 15% 16% 22% 2 29% 19% 31% 36% 1% 5% 6% Lager dan Lager dan Lager dan Achterstand is groot Bij de invoering van de Referentieniveaus bij de start van het schooljaar 2010-2011 kon met behulp van de toetsen uit de TOA gelijk op grote schaal gemeten worden bij de instroom in het mbo. Zo hebben we met behulp van deze 0-meting direct vanaf het begin van de in voering van de nieuwe niveausystematiek de stand van zaken kunnen peilen: met welk referentie niveau stromen de leerlingen in in het mbo? En dus feitelijk, hoe verlaten ze het vmbo? Het verschilt per vaardigheid maar over het algemeen stromen de leerlingen met een achterstand in het mbo in en moet het overgrote deel van de leerlingen voor de verschillende vaardigheden nog één of zelfs twee niveau stappen zetten gedurende hun onderwijstijd op het mbo.
Taal en rekenen 2 jaar onderweg en wat heeft ons dit nu gebracht? Bekijk de resultaten van 2 jaar meten. Gaan de niveau 4-leerlingen het centrale examen halen? Slagen voor het examen taal en rekenen wordt een grote uitdaging voor mbo-4 leer lingen. Bij de instroom nu beheerst 22% van de leerlingen lezen. Voor luisteren is dat 41% en voor rekenen 1%. Dit betekent dat het overgrote deel van de leerlingen voor alle vaardigheden nog minimaal één niveaustap moet zetten en een deel zelfs twee niveaustappen. Met name bij rekenen zijn de problemen groot: 42% blijkt hier bij instroom op niveau binnen te komen. Rekenen mbo 4 Eerste toetsmoment Laatste toetsmoment (bij dezelfde leerlingen) 46% 38% 34% 24% 12% 4% 9% 6% 8% 13% 4% 2% Lager dan Lager dan Lager dan Lezen mbo 4 Eerste toetsmoment Laatste toetsmoment (bij dezelfde leerlingen) 5 Luisteren mbo 4 Eerste toetsmoment Laatste toetsmoment (bij dezelfde leerlingen) 65% 36% 34% 51% 36% 1% 1% 6% 4% 17% 9% 17% 17% 1 4% 1% 1% 11% 6% 6% 2% 17% Lager dan Lager dan Lager dan Lager dan Lager dan Lager dan haalbaar als norm voor niveau 1 en 2? De discussie is nog volop bezig. Wat moet de norm worden voor examinering van taal en rekenen voor niveau 1 en 2? De intakegegevens van de niveau 1 en 2 leerlingen in het mbo laten bij de intake van het schooljaar 2011-2012 opnieuw zien dat niveau te ambitieus lijkt voor het overgrote deel de leerlingen om te behalen gedurende hun korte traject. Op de korte termijn is het invoeren van een harde norm in de vorm van een centraal examen taal en rekenen met consequenties voor diplomering een groot risico: veel leerlingen zullen in dat geval geen mbo-diploma kunnen behalen.
Taal en rekenen 2 jaar onderweg en wat heeft ons dit nu gebracht? Bekijk de resultaten van 2 jaar meten. Met de TOA meten van primair onderwijs tot en met hoger onderwijs De Referentieniveaus zijn bedoeld om doorlopende leerlijnen taal en rekenen te gaan faciliteren van basisonderwijs tot en met beroepsonderwijs. Met behulp van de Referentieniveaus en daaraan gekoppelde toetsen is het dan ook vanaf 2010-2011 mogelijk geworden om op de verschillende drempels van het onderwijs te meten. Met de taal- en rekentoetsen uit de TOA speciaal gericht op de doelgroep jongeren van 12-16 hebben we kunnen vaststellen waar leerlingen hun achterstand oplopen. De eerste kleinschalige onderzoeken in het basisonderwijs laten zien dat maar net de helft van de basisschoolleerlingen het beoogde niveau behaalt voor lezen en rekenen. Onderzoek gedurende het vmbo laat zien dat leerlingen in het vmbo niet stilstaan: er zit groei in hun taal- en rekenvaardigheid bij het stijgen van de leerjaren. /publicaties 6 5 4 3 2 1 Intake mbo 1-2011 6 5 4 3 2 1 Intake mbo 2-2011 Lager dan Lager dan Lager dan Lagerdan Lagerdan Lagerdan Rekenen 56% 19% 2 5% Lezen 43% 33% 11% 13% Luisteren 17% 44% 9% 3 Schrijven 36% 22% 8% 12% Taalverzorging 32% 45% 21% 3% 7 6 5 4 3 2 1 Intake mbo 3-2011 Lager dan Lager dan Lager dan Rekenen 23% 38% 6% 31% 1% 1% Lezen 3% 2 15% 51% 3% 9% Luisteren 1% 9% 9% 64% 1% 16% Schrijven 6% 19% 24% 46% 1% 4% Taalverzorging 6% 31% 53% 1 Rekenen 42% 32% 9% 16% Lezen 15% 41% 13% 3 1% Luisteren 3% 3 9% 56% 2% Schrijven 24% 29% 14% 32% Taalverzorging 13% 45% 37% 5% 6 5 4 3 2 1 Intake mbo 4-2011 Lagerdan Lagerdan Lagerdan Rekenen 15% 42% 3% 34% 4% 1% Lezen 4% 11% 56% 7% 22% Luisteren 1% 6% 49% 2% 41% Schrijven 2% 2% 28% 36% 12% 21% Taalverzorging 2% 21% 57% 2 Is rendement zichtbaar? Nu we voor het tweede jaar op rij werken met de Referentieniveaus zijn er gegevens beschikbaar van leerlingen die na de intake een vervolgmeting hebben afgelegd. De eerste voorzichtige conclusies dienen zich nu aan: leerlingen van mbo 4 lijken vooruit te gaan op het gebied van lezen, luisteren en rekenen. Maar we hebben meer gegevens en dus meer tijd nodig voor verder onderzoek. En dan bijvoorbeeld ook: welke aanpak werkt en welke niet? Kwalitatief onderzoek op basis van kwantitatieve gegevens. Wordt vervolgd dus
Op zoek naar betrouwbare en valide schoolexamens? De TOA biedt uitkomst! Het centrale deel van het examen is voor niveau 4 geregeld. Voor de overige niveaus zijn scholen zelf verantwoordelijk voor de invulling van de examinering van lezen en luisteren. Daarnaast moeten alle niveaus van het mbo zelf zorg dragen voor een valide en betrouwbare examinering van de productieve vaardigheden schrijven, spreken en gesprekken. De TOA biedt de mogelijkheid om met generieke examens de complete examinering te dekken. De TOA bevat meer dan voldoende leestoetsen, luistertoetsen, schrijftoetsen, spreektoetsen en gespreksvaardigheidstoetsen om de complete examinering (inclusief herkansingen) uit handen te nemen. De beoordeling kan volledig in de TOA worden uitgevoerd. Voor lezen en luisteren gaat dat automatisch. Voor de productieve vaardigheden (schrijven, spreken, gesprekken) maakt het nieuwe, globale beoordelingsmodel een snelle, efficiënte beoordeling van examens mogelijk. Bovendien kan met de beoordelaarstool ook de kwaliteit van de beoordelaars eenvoudig gemonitored worden. Zo is het met de TOA niet alleen eenvoudig om validiteit en betrouwbaarheid van de examinering te borgen voor lezen en luisteren maar ook van de van de productieve vaardigheden. De TOAtoetsen zijn dan ook niet voor niets onlangs weer voor alle vaardigheden op alle niveaus goedgekeurd door de Inspectie voor het Onderwijs. Wilt u schoolexamens die wat inhoud betreft aansluiten op een specifieke opleiding? Maar wilt u niet inboeten aan betrouwbaarheid en validiteit? De TOA biedt de mogelijkheid om met de goedkeuring van Bureau ICE uw eigen maatwerktoetsen in de TOA op te nemen. Voor meer informatie over opleidingsspecifieke toetsen in de TOA kunt u contact opnemen met Bureau ICE, 0345 656610. De TOA is hét instrument ter voorbereiding op het centraal examen De centrale examens kristalliseren zich meer en meer uit. Voor verschillende ROC s een moment om bestaande toetsen te vergelijken met de uitkomsten van de pilotexamens. Hoe? Door dezelfde leerlingen zowel mee te laten doen aan de pilotexamens als ook een TOA-toets voor te leggen. De eerste experimenten van mbo s laten zien dat de TOA lees- en luistertoetsen een betrouwbare voorspelling geven van de uitkomsten van de centrale examens. Reden om de TOA te blijven gebruiken voor de voortgang van taal en rekenen want slagen voor een niveau in de TOA biedt 92% kans op slagen bij de centrale examens. Verkrijg nu uw TOA-licentie! Vraag nu een vrijblijvend gesprek aan!
De belangrijkste vernieuwingen in de TOA (schooljaar 2011-2012) Voortdurend werken we samen met onze gebruikers aan de verdere ontwikkeling van de TOA. Dit is inherent aan een digitaal, webbased systeem maar ook in lijn met de filosofie van Bureau ICE: tevredenheid door kwaliteit. De 10 belangrijkste veranderingen: 1 2 3 4 5 6 7 8 9 10 Beheer en administratie automatisch door koppelingen met o.a. Magister en N@T school Nieuwe toetsen voor alle vaardigheden op alle niveaus voor Nederlands ( t/m ) Nieuwe toetsen voor alle vaardigheden voor Engels en Duits (A1, A2, B1 en B2) Basistoetsen, speciaal voor leerlingen voor wie niveau nog moeilijk te halen is Een rapportagetool zodat scholen zelf snel en eenvoudig eigen rapportages kunnen uitdraaien Een nieuw globaal beoordelingsmodel om sneller en efficiënter examinering van productieve vaardigheden uit te kunnen voeren Per toets een TIK (Toets Informatie Kaart) zodat alle belangrijke informatie per toets in één overzicht beschikbaar is Groepsrapporten en individuele rapporten met uitgebreide overzichten met één druk op de knop beschikbaar Doorlopende leerlijn technisch mogelijk door dekkend systeemoverdracht PO-VO-MBO-HBO Interbeoordelaarsbetrouwbaarheid nu veel eenvoudiger te borgen met de beoordelaarstools in de TOA Sinds 1991 Staatsexamens Nederlands als Tweede Taal. Sinds 1996 toetsing in het kader van inburgering.
De TOA is een middel, geen doel Welke vaardigheden ga je wanneer toetsen? Welke toets zet je op welk moment in? Wat ga je doen met de uitkomsten? Welke gevolgen heeft de score voor leerlingen? Hoe borg je dat examentoetsen niet gebruikt worden als intaketoets? Hoe examineer je taal en rekenen? Hoe borg je de voortgang richting het examen? Allemaal vragen die horen bij de inzet van de TOA. Samen met instellingen die de TOA (gaan) inzetten, bespreken we deze en nog veel meer vragen om zo te komen tot een toetsplan voor Taal en Rekenen. Zo voorkom je dat een instelling én een leerling veel tijd en energie steken in de afname van toetsen en er vervolgens niets mee (kunnen) doen. Taalassessoren opleiden Het beoordelen van de schrijftoetsen en ook de spreek- en gesprekstoetsen gaat niet automatisch. Hier zijn menselijke beoordelaars voor nodig. En die hebben weer training nodig om te borgen dat de uitslagen (voldoende) betrouwbaar zijn. Belangrijk, zeker daar waar het examinering betreft. Het trainen van de be oordelaars hoort dan ook onlos makelijk bij de inzet van de TOA voor schrijven, spreken en gesprekken. Met korte, efficiënte trainingen helpt Bureau ICE beoordelaars op weg. Willen beoordelaars zich verder ontwikkelen, dan kan worden gekozen voor de training tot professional. Wil een instelling nog verder gaan, dan kunnen beoordelaars ook opgeleid worden tot trainer. Als een instelling voor deze laatste optie kiest, kunnen ze beoordelaars laten opleiden die vervolgens intern eigen, nieuwe beoordelaars kunnen opleiden. Geïnteresseerd? Voor alle soorten trainingen kunt u contact met ons opnemen. TOA verder uitgebreid met Moderne Vreemde Talen Altijd al heeft de TOA toetsen bevat voor Engels en Duits. Een nieuwe serie toetsen voor Duits en Engels zijn onlangs aan de toolkit toegevoegd. Zo kunt u zowel in de intake als bij de voortgang en examinering gebruik kunt maken van de toetsen uit de TOA. Voor alle vaardigheden voor alle niveaus (A1 t/m C1) zijn voldoende taaltoetsen beschikbaar, bovendien goedgekeurd door de Inspectie voor het Onderwijs. Na de zomer wordt het aanbod toetsen Moderne Vreemde Talen uitgebreid met toetsen Frans.
De TOA van Bureau ICE is officieel goedgekeurd door de onderwijsinspectie. Doorlopende leerlijn kan via de TOA gefaciliteerd worden. Bureau ICE voert nu al 20 jaar de Staatsexamens en 15 jaar de Inburgeringsexamens uit in samenwerking met CITO. 1,7 miljoen toetsen afgenomen. Dekkend toetsaanbod voor alle niveaus alle vaardigheden voor minimaal 1 intake, 2 keer een voortgangstoets, examen en herkansing. Geen systeem problemen of problemen bij het afnemen van de TOA toetsen. 600.000 + leerlingen actief in de TOA. 14.000 docenten en beheerders werken met de TOA en wij ontvangen maar 2 functionele vragen naar onze gratis helpdesk per dag. Landelijke dekking van de TOA dus ook vergelijkingen op alle niveaus voor managementanalyse. Door het grote volume kunnen wij de TOA voordelig aanbieden. Met TOA gegarandeerd een beter toetsplan: minder toets afnames, meer toetskwaliteit en meer sturing vanuit de toetsresultaten. Gebruikers zeer tevreden over de TOA en ondersteuning vanuit Bureau ICE. U kunt dit navragen bij 25 ROC s die breed met de TOA werken. Betrouwbaarheid en validiteit gewaarborgd op basis van onze expertise en continue metingen en onderzoek. Automatiseren van administratie en beheer. Voorspellende waarde TOA ten op zichte van COE (centraal ontwikkeld examen) ligt rond de 8. TOA: eenheid in toetsing, overdraagbaarheid van gegevens, kwaliteit en voordeel.
Bureau ICE is al meer dan 20 jaar een begrip op het gebied van toetsing en examinering. Meer informatie? Neem contact met ons op! Zie ook: Zie ook: www.toets.nl Postbus 189 4100 AD Culemborg Godfried Bomansstraat 4 4103 WR Culemborg T 0345 65 66 10 F 0345 54 98 46 www.ice-opleidingen.nl Bank 68.27.35.221 Kvk Tiel 11028.918 BTW NL810615939 B01 ISO 9001-2000 gecertificeerd