Toetsresultaten invoeren & Instrumentbeheer

Transcriptie

1 FAQ Toetsresultaten invoeren & Instrumentbeheer Hoe maak ik zelf een toets aan in ESIS? In ESIS kunnen eigen toetsdefinities aangemaakt worden. Via de standaardrollen Supervisor en Interne begeleider is het mogelijk om zowel toetsen als observaties toe te voegen. Onder Beheer spreken we niet van toetsen en/of observaties maar van Instrumenten. Stap 1: Ga naar Beheer > Instrumenten > Instrumenten. Klik op <Toevoegen>. Hier heeft u de keuze uit 3 opties: - geen gegevens hergebruiken - gegevens van een ander instrument gebruiken - gegevens van een instrument-bestand importeren. Het voordeel van de laatste 2 opties is dat de benodigde velden ingevuld worden a.d.h.v. het gekozen instrument/bestand. Indien u geen instrument heeft wat u kunt hergebruiken, kiest u optie 1. Maak uw keuze en 1

2 Stap 2: Instrument details In dit scherm vult u de instrumentgegevens in: Veld Korte naam Naam Omschrijving Instrument type Vormingsgebied Invoermethode Uitgever Methode gebonden Toon opmerking Vervallen Toelichting Hier kunt u ook een volgnummer gebruiken om overzicht te houden over de door u ingevoerde toets, bijvoorbeeld REK01. Deze korte naam verschijnt in de keuzelijst bij de toetsinvoer (Modules > Toetsresultaten). Hier kunt u dezelfde naam als de korte naam noteren, maar dat mag ook een andere naam zijn die verhelderd om welke toets het gaat. Indien gewenst kunt u hier een korte omschrijving geven van de toets. Hier kunt u de keuze maken tussen een toets of een observatie. U kunt hier kiezen uit de vormingsgebieden die in uw ESIS-omgeving aanwezig zijn. Op basis van het geselecteerde vormingsgebied wordt de ordening van toetsresultaten in overzichten georganiseerd. Bij een eigen toets kunt u dit veld niet wijzigen. De invoermethode dient een ruwe score te zijn. Indien gewenst kunt u hier de uitgever van de toets vermelden. Staat standaard op Nee. Indien de toets die u aanmaakt een methode geboden toets is kunt u hier Ja selecteren. Als u dit aanvinkt, kan er bij de toetsinvoer een opmerking worden ingevuld. Indien u niet langer gebruik wil maken van de aangemaakte toets, maar deze wel in gebruik is geweest, kunt u hier een vinkje plaatsen. De ingevoerde resultaten blijven beschikbaar, maar er kunnen geen nieuwe resultaten worden ingevoerd. 2

3 Voorbeeld ingevuld scherm Instrumenten details Klik als (in ieder geval) alle (verplichte) velden zijn ingevuld op <Volgende>. Stap 3: Instrumenten scoring: In het scherm Instrumenten scoring vult u de benodigde gegevens in. Veld Label ruwe score Vaardigheidsscore Item registratie Toelichting Dit veld wordt standaard ingevuld met Score. Indien gewenst kunt u dit aanpassen door hier een andere termen in te vullen. Als u er voor kiest om in plaats van de ruwe score direct de vaardigheidsscore te laten invoeren bij Modules > Toetsresultaten (invoeren van de toetsresultaten), selecteert u hier Ja. Standaard staat deze optie op Nee. Hier geeft u aan of per item van deze toets een score ingevoerd moet worden als het toetsresultaat wordt ingevoerd. Indien u hier Ja selecteert, wordt bij onderdeel Instrumentversie u gevraagd om alle items in te voeren. U selecteert hier Ja als u bijvoorbeeld een foutenanalyse wilt 3

4 Externe partij en Externe code Scoringsmethodes maken. De optie staat standaard op Nee. Deze velden zijn niet van belang bij het aanmaken van een eigen toets. Deze worden gebruikt om een ruwe- of vaardigheidsscore om te rekenen naar een andere schaal, zoals Cito A-E of Cito I-V. U kunt een scoringsmethode invullen door middel van het <+>. U kunt hier meer scoringsmethoden aanmaken. U kunt kiezen voor bestaande scoringsmethode of voor een zelf gedefinieerde scoringsmethode. De door Rovict gedefinieerde scoringsmethoden zijn afgestemd op de meeste landelijke toetsen. Het zal in de praktijk niet vaak voor komen dat u een nieuwe scoringsmethode moet aanmaken. Scoringsmethoden die door Rovict zijn aangemaakt kunnen niet worden gewijzigd. Wel kunt u hierbij de gewenste signalen en kleuren opgeven. Afbeelding scherm Instrumenten scoring met item registratie Ja Bij een Toets kan opgegeven worden dat gebruik gemaakt wordt van itemregistratie (zie afbeelding hierboven). Dit wil zeggen dat u later bij de invoer van de toetsresultaten gebruik kunt maken van een itemformulier, waar per opdracht aangegeven wordt hoe het item gemaakt is. 4

5 Afbeelding met de verschillende scoringsmethoden. U komt in het scherm Instrument afname momenten. In ESIS wordt nog geen gebruik gemaakt van Instrument afname momenten. U laat dit scherm dus leeg. Stap 4: Instrument versie overzicht: Klik op <Toevoegen>. 5

6 Indien u reeds een instrumentversie heeft aangemaakt kunt u de gegevens hiervan hergebruiken. Bij het aanmaken van de 1 e instrumentversie laat u de selectie Ik wil geen gegevens hergebruiken staan. Stap 5: Instrumentversie details: In het scherm Instrumentversie details vult u de versiegegevens in. 6

7 Toelichting op enkele velden Veld Korte naam Overzicht label Tot en met Vervallen Toelichting De korte naam van de toetsversie zoals die in de keuzelijsten in ESIS getoond wordt, bijvoorbeeld bij de toetsinvoer. Zorg er voor dat dit label uniek is binnen één toets. Alleen dan wordt bij het groepsoverzicht Meerdere toetsresultaten alle versies getoond in het overzicht. Hier vult u het aantal opgaven van de toets in. Het veld Aantal opgaven wordt ingevuld zodra u de itemcategorieën in stap 6 heeft ingevuld. Als Vervallen is aangevinkt, is deze toetsversie niet meer beschikbaar in de keuzelijst bij het invoeren van de resultaten. Het is nog wel mogelijk om resultaten af te drukken. Indien in stap 3 is aangegeven dat voor deze toets geen gebruik gemaakt wordt van een Vaardigheidsscore, verschijnt het volgende scherm: Stap 6: Item categorieën: In het scherm Item categorieën voegt u de betreffende toetscategorieën toe. Veld Nummer Korte naam Omschrijving Gewicht Toelichting Het nummer van de categorie. De korte naam van de categorie zoals die in de overzichten wordt getoond. De omschrijving van de categorie. De omschrijving wordt nergens getoond behalve in de definities. Het gewicht van de categorie. Bij toetsen is het gewicht altijd 1. Andere waarden worden niet gebruikt. 7

8 Stap 7: Instrumentversie items: In het scherm Instrumentversie items voegt u alle items van de toetsversie toe. Vul met behulp van de knoppen <Toevoegen> en <Opslaan> de items van de toetsversie toe: Toelichting op enkele velden Veld Item nummer Label links Label rechts Categorie Scoringswijze Toelichting Het nummer van de opgave. Veel toetsversies bestaan uit 2 of meer delen. Bij ieder deel begint de opgavenummering weer bij 1. Advies:Neem de opgavenummers bij het definiëren niet één op één over, omdat anders de opgavenummers dubbel voorkomen en dat is lastig voor de gebruikers. Ieder volgend deel de opgavenummers ophogen eerst met 200 en daarna met 100 op. Dus zo: 1 (opgaven deel 1) (opgaven deel 2) (opgaven deel 3) Hier vult u de tekst in die getoond moet worden bij het invullen van de toetsresultaten waarbij de itemscore geregistreerd moet worden. Dit kan bijvoorbeeld de hele opgave zijn of alleen het antwoord. Dit veld laat u leeg. Hier wordt de categorie bepaald waartoe het item behoort. De keuzelijst bevat de categorieën die in het vorige scherm zijn gedefinieerd. Hier selecteert u de gewenste scoringswijze. ESIS bevat een standaardlijst met scoringswijzen die aan items gekoppeld kunnen worden. Indien gewenst kunt u zelf scoringswijzen toevoegen. U kunt bestaande scoringswijzen ook wijzigen of verwijderen. Hiervoor gaat u 8

9 Standaard selecteren naar Beheer > Instrumenten > Algemeen Scoringswijze. Hier wordt bepaald of en welk antwoord als standaard vooraf al is geselecteerd. Deze optie altijd aanvinken. Standaard staat de selectie op Goed. De waarde van de antwoordalternatieven is altijd: Goed=1, rest=0. Als alle items zijn toegevoegd, klikt u op <Gereed> en vervolgens op <Volgende>. Stap 8 Omrekening overzicht: Via Beheer > Instrumenten > Omrekening wordt een overzicht getoond van de beschikbare omrekeningen van de instrumentversies. U kunt omrekeningen toevoegen, inzien/wijzigen of verwijderen. Onder een omrekening wordt verstaan de vertaling van de scores naar de categorie waar deze volgens de documentatie van het instrument toe behoort. Een voorbeeld van een omrekening is die van vaardigheidsscore naar Cito-A-E categorie. In de omrekentabel kunt u aangegeven hoe de ingevulde waarden omgerekend moeten worden tot scores. U kunt een voor u bekende toets als voorbeeld nemen om te beoordelen wat u hier invult. In het scherm Omrekening overzicht selecteert u voor de Scoringsmethode, Versie, Normeringstype en Bron. De A-E en I-V omrekeningen kennen beide twee normeringstypes: - Leerling: de norm is gebaseerd op het gemiddelde van alle leerlingen - Landelijk: de norm is gebaseerd op het gemiddelde van alle groepsgemiddelden Deze landelijke norm wordt gebruikt voor groepshistorie overzichten, de normering van groepsgemiddelden en in het opbrengstoverzicht groepsanalyse en in de trendanalyse leerlingen. Een toetsversie dient altijd tenminste één omrekening te hebben. En de omrekening dient altijd tenminste één omrekeningregel te hebben in de omrekeningtabel (scherm 44.32). Klik op <Volgende> In het scherm Omrekeningtabel vult u de omrekentabel per versie in. Hieronder een voorbeeld hoe u deze kunt invullen: Van Tot en met Score 0 12 O M V G 9

10 Twee bijzonderheden: 1. De grenswaarden van de scores altijd in twee decimalen aansluitend opgeven. Dus is de volgende Van waarde 2,00, dan moet de voorgaande Tot en met waarde 1,99 zijn. Ookal kan de invoer later slechts in hele getallen worden ingevoerd. 2. Als het scherm Omrekentabel nog leeg is en de eerste regel moet nog gedefinieerd worden, dan is het nodig om eerst in het Van veld 0 in te voeren en deze waarde op te slaan. Pas dan kan de eerste omrekenregel worden toegevoegd. Omrekeningtabellen worden mee gekopieerd bij het kopiëren van een versie. Het instrument is nu met een instrumentversie toegevoegd in ESIS en kan gebruikt worden. In plaats van een toets een observatie instrument aanmaken? Ook een observatie instrument maakt u aan via Beheer > Instrumenten > Instrumenten. Hier klikt u op <Toevoegen> en selecteert bij Instrumenttype Observatie. De werkwijze voor het aanmaken van en Observatie is identiek aan het aanmaken van een toets. Bij een observatie moet bij Scoringswijze gekozen worden voor itemregistratie, anders is het niet mogelijk de te observeren items toe te voegen. 10