IMPLEMENTATIEHANDLEIDING

Transcriptie

1 IMPLEMENTATIEHANDLEIDING VOOR DE APPLICATIEBEHEERDER TESTVISION ONLINE TVO-VERSIE: 10 DATUM: DECEMBER 2016

2 INHOUDSOPGAVE Inhoudsopgave Werken met deze implementatiehandleiding Inleiding De onderdelen van TestVision Online Rollen en taken Hoe beginnen? Voor wie is deze handleiding bedoeld? Domeinen inrichten Inleiding Wat is belangrijk om te weten? Scenario s voor het inrichten van domeinen Scenario voor één domein Scenario s voor twee of meer domeinen Instellingen bepalen Inleiding Kandidaatvelden: Wat is belangrijk om te weten? Taalinstellingen: Wat is belangrijk om te weten? Wachtwoord per Wat is belangrijk om te weten? Beoordelingsinstellingen: Wat is belangrijk om te weten? Standaardteksten aanpassen Inleiding Wat is belangrijk om te weten? Vraagstatus uitbreiden Inleiding Wat is belangrijk om te weten De betekenis van vraagstatussen Voorbeelden van uitbreidingen op de vraagstatus Applicatiebrede vraagkenmerken instellen Inleiding Wat is belangrijk om te weten? Voorbeelden van applicatiekenmerken Skins beheren Inleiding Wat is belangrijk om te weten? Safe Exam Browser gebruiken Inleiding Wat is belangrijk om te weten? Begrippenlijst TestVision Online Index... 21

3 1. WERKEN MET DEZE IMPLEMENTATIEHANDLEIDING 1.1 Inleiding Deze handleiding geeft u informatie over hoe u TestVision Online het best kunt gebruiken binnen uw organisatie. Het is geen Help of uitleg over hoe de knoppen werken, maar het beschrijft hoe u de verschillende mogelijkheden van TestVision Online optimaal kunt inzetten, zoals het inrichten van domeinen en het gebruiken van vraagkenmerken. In dit eerste hoofdstuk beschrijven we kort de onderdelen van TestVision Online voor de verschillende gebruikers, de rollen en taken die moeten worden belegd en welke zaken als eerste moeten worden geregeld. Deze handleiding gaat specifiek in op de rol van applicatiebeheerder. Meer informatie over het werken met TestVision Online vindt u in de Help in het programma zelf en op de website. 1.2 De onderdelen van TestVision Online In onderstaande tabel ziet u de onderdelen van TestVision Online voor de verschillende gebruikers. Applicatiebeheerder Domeinen Instellingen Standaardteksten Kenmerken Skins Safe Exam Browser Toetsmomenten Domeinbeheerder Ontwikkelaar Kandidaat Ontwikkelaars Kenmerken Toetstemplates Ontwikkelen: Vragen Toetsen Afname en Resultaten: Gepubliceerde toetsen Kandidaten Afnames Beoordelen Learning Analytics Toets maken Resultaat bekijken 1.3 Rollen en taken Om goed te kunnen werken met TestVision Online zal een aantal rollen moeten worden toebedeeld aan medewerkers, inclusief de bijbehorende taken. 2

4 Het betreft de volgende rollen en taken: Rol Applicatiebeheerder (1 per organisatie) Domeinbeheerder (1 of meer per domein) Ontwikkelaar (1 of meer per domein) Taken Domeinen creëren Domeinbeheerders invoeren Applicatiebrede instellingen beheren Ontwikkelaars invoeren Rechten aan ontwikkelaars toekennen Domeinkenmerken instellen Toetstemplates instellen Vragen en toetsen ontwikkelen en beheren Kandidaten invoeren Afnames plannen Het beoordelingsproces coördineren Open vragen beoordelen Resultaten beheren Learning Analytics gebruiken Soms kunnen meer rollen bij dezelfde persoon worden belegd. Als wordt gewerkt met één domein, kan de applicatiebeheerder bijvoorbeeld ook domeinbeheerder zijn. En domeinbeheerders zullen vrijwel altijd (ook) ontwikkelaar zijn. Voor de taken geldt dat ze niet altijd door iedereen zullen worden uitgevoerd. Zo kan het beheren van domeinkenmerken en toetstemplates het best bij één domeinbeheerder worden belegd. Ontwikkelaars hebben, zeker in grotere organisaties, vaak specialistische taken. Zo zullen er ontwikkelaars zijn die zich uitsluitend bezig houden met het ontwikkelen van vragen en toetsen en de kwaliteitsbewaking daarvan en ontwikkelaars die alleen verantwoordelijk zijn voor het plannen van afnames en het beheren van de resultaten. In kleinere organisaties zijn ontwikkelaars vaak verantwoordelijk voor het totale ontwikkeltraject en voeren ze dus alle taken van de ontwikkelaar uit. 1.4 Hoe beginnen? Nadat TestVision Online door de systeembeheerder is geïnstalleerd en geconfigureerd, richt de applicatiebeheerder een of meer domeinen in en wijst hij per domein één of enkele domeinbeheerders aan. Ook stelt de applicatiebeheerder de applicatiebrede instellingen in. Vervolgens kunnen de domeinbeheerders aan de slag met het inrichten van hun domein, het invoeren van ontwikkelaars en het instellen van toegang en rechten. Daarna is het de beurt aan de ontwikkelaars. We adviseren nieuwe gebruikers om eerst de korte instructiefilmpjes te bekijken die beschikbaar zijn op Deze geven een goede eerste indruk van de werking van TestVision Online. Vervolgens kunt u rondkijken in de verschillende onderdelen van TestVision Online en indien nodig daarbij de Help te raadplegen. 3

5 1.5 Voor wie is deze handleiding bedoeld? Deze handleiding is bedoeld voor degene die als applicatiebeheerder domeinen inricht, domeinbeheerders aanstelt en applicatiebrede instellingen bepaalt. In elk hoofdstuk van deze handleiding wordt een ander onderdeel beschreven. De applicatiebeheerder leest daarnaast één keer per jaar het aantal toetsmomenten uit. Dit wordt in deze implementatiehandleiding niet nader toegelicht. Voor domeinbeheerders en ontwikkelaars is een aparte implementatiehandleiding beschikbaar. Voor kandidaten is er een uitgebreide Help en geen aparte handleiding. 4

6 2. DOMEINEN INRICHTEN 2.1 Inleiding Voordat u met TestVision Online aan de slag gaat, moet u bepalen of u binnen uw organisatie met twee of meer domeinen wilt werken, of dat één domein volstaat. Domeinen zijn als het ware een afspiegeling van de structuur van een organisatie, bijvoorbeeld afdelingen van een bank, faculteiten van een universiteit of vakgroepen/secties van een school voor voortgezet onderwijs. We beschrijven in dit hoofdstuk enkele scenario s voor één of meer domeinen. U kunt aan de hand van deze scenario s bepalen welke inrichting het best past bij u organisatie. 2.2 Wat is belangrijk om te weten? In de Help van TestVision Online staat beschreven hoe u domeinen toevoegt en ontwikkelaars toevoegt en hen beheerrechten geeft. Domeinbeheerders hebben binnen hun domein de volgende rechten: toevoegen van ontwikkelaars; instellen van rechten voor zichzelf en voor andere ontwikkelaars; instellen van vraagkenmerken specifiek voor hun domein; definiëren van toetstemplates specifiek voor hun domein. Vragen, toetsen en afnames kunnen alleen binnen het domein waarin ze ontwikkeld zijn, gebruikt worden. Vragen die gebruikt moeten worden binnen een andere domein, kunnen vanuit het oorspronkelijke domein naar dat domein geëxporteerd worden. Domeinen kunnen niet worden gesplitst of samengevoegd. Een eenmaal gemaakte inrichting van meer domeinen kan niet eenvoudig worden aangepast. Statistische analyse van vragen en toetsen kan alleen per domein uitgevoerd worden. Ontwikkelaars zijn domeinoverstijgend. Als een domeinbeheerder een ontwikkelaar invoert, kunnen andere domeinbeheerders diezelfde ontwikkelaar toegang geven tot hun domein. Een ontwikkelaar kan dus werken in verschillende domeinen. De rechten voor een ontwikkelaar kunnen per domein verschillend worden ingesteld. Kandidaten zijn domeinoverstijgend. Kandidaten die door een ontwikkelaar in een bepaald domein zijn ingevoerd, zijn beschikbaar in elk domein en kunnen in elk domein toetsen maken. Resultaten van kandidaten kunnen alleen per domein ingezien worden. In een volgende versie van TestVision Online zal er een mogelijkheid komen om rapportages te maken van resultaten over de domeinen heen. 5

7 2.3 Scenario s voor het inrichten van domeinen Met domeinen maakt u een strikte scheiding tussen vragen, toetsen en afnames van afdelingen, opleidingen, faculteiten et cetera. Binnen een domein kan een verdere scheiding aangebracht worden door het inrichten van een mappenstructuur en het instellen van startmappen. Dit gebeurt niet door de applicatiebeheerder, maar door de domeinbeheerder Scenario voor één domein SCENARIO 2.1: U RICHT VOOR UW ORGANISATIE ÉÉN DOMEIN IN. WANNEER GEBRUIKT U DIT SCENARIO? Dit scenario is geschikt voor (kleine) organisaties met een eenvoudige organisatiestructuur en een beperkt aantal medewerkers. Er is geen reden om vragen en toetsen strikt gescheiden te houden. HOE RICHT U DE APPLICATIE IN? WAT IS HET EFFECT? TestVision Online wordt standaard met twee domeinen geleverd: het domein waarin u kunt gaan werken en een domein met een voorbeelddatabase. U kunt de naam van het werkdomein eventueel wijzigen. De door u aangestelde domeinbeheerder(s) richt(en) een mappenstructuur in zoals beschreven in de implementatiehandleiding voor domeinbeheerders en ontwikkelaars. In deze situatie is het heel goed mogelijk dat u ook domeinbeheerder bent. Een applicatie met één werkdomein, waardoor alle vragen en toetsen altijd beschikbaar zijn en alle resultaten van een kandidaat ingezien kunnen worden Scenario s voor twee of meer domeinen SCENARIO 2.2A: U RICHT VOOR EEN AANTAL DUIDELIJK ONDERSCHEIDEN ONDERDELEN EEN APART DOMEIN IN. WANNEER GEBRUIKT U DIT SCENARIO? Dit scenario is geschikt voor instellingen voor wetenschappelijk onderwijs en grote organisaties met duidelijk onderscheiden onderdelen of afdelingen, waartussen weinig of geen overlap bestaat. Vragen en toetsen worden alleen binnen één onderdeel gebruikt. Voorbeelden: Een universiteit richt aparte domeinen in voor elke faculteit: Bètawetenschappen Diergeneeskunde Geesteswetenschappen Een bank richt apart domeinen in voor afzonderlijke onderdelen: Sparen Beleggen Hypotheken 6

8 HOE RICHT U DE APPLICATIE IN? U richt voor elk onderdeel of afdeling een domein in en voegt aan elk domein één of meer domeinbeheerders toe. De door u aangestelde domeinbeheerders richten een mappenstructuur in zoals beschreven in de implementatiehandleiding voor domeinbeheerders en ontwikkelaars. Voor het domeinoverstijgende onderdeel Kandidaten kunnen de domeinbeheerders in overleg een mappenstructuur inrichten waarbij de domeinen het hoogste niveau in de structuur vormen. Deze mappenstructuur is normaal gesproken zichtbaar in elk domein. De domeinbeheerder kan echter de toegang van ontwikkelaars in zijn domein beperken door zijn domeinmap in te stellen als startmap. Hierdoor zijn alleen de kandidaten van zijn domein beschikbaar. Als een kandidaat toch beschikbaar moet zijn in een ander domein (bijvoorbeeld een student die twee studies doet, of een keuzevak doet bij een andere faculteit), kan dit gerealiseerd worden door een kandidaatreferentie te plaatsen in een publieke hulpmap waarop ontwikkelaars in beide domeinen rechten hebben. TIP! Als u zeker weet dat kandidaten nooit in meer dan één domein getoetst zullen worden, kunt u aan de domeinen een kandidaatstartpunt toevoegen. De domeinen zien dan nooit elkaars kandidaten. Omdat het onderdeel Kandidaten wel gewoon domeinoverstijgend blijft, moet u er wel voor zorgen dat de verschillende domeinen met verschillende aanmeldnamen werken. Dit kunt u bijvoorbeeld doen door de aanmeldnaam te laten beginnen met een code. Als u dit namelijk vrij laat, kan het gebeuren dat in meer domeinen de aanmeldnaam Jansen moet worden gebruikt, en dat is niet mogelijk. WAT IS HET EFFECT? Een applicatie met meer dan één domein, waarbij vragen, toetsen en afnames per domein gescheiden zijn. Kandidaten kunnen desgewenst alleen beschikbaar worden gemaakt in het domein dat voor hen relevant is. TIP! U kunt in deze situatie ook gewoon één werkdomein inrichten en dit vervolgens door de domeinbeheerder(s) zo laten inrichten dat er sprake is van gescheiden toegangen per afdeling of onderdeel voor (een deel van) de ontwikkelaars. Zie voor meer informatie hierover hoofdstuk 2 van de implementatiehandleiding voor domeinbeheerders en ontwikkelaars. SCENARIO 2.2B: U RICHT VOOR EEN AANTAL ONDERDELEN DIE ELK EEN DWARSDOORSNEDE VORMEN BINNEN DE ORGANISATIE EEN APART DOMEIN IN. WANNEER GEBRUIKT U DIT SCENARIO? Dit scenario is geschikt voor bijvoorbeeld scholen. Vragen en toetsen worden gescheiden per vakgroep of sectie, kandidaten zijn in een klassenstructuur beschikbaar in elk domein. Voorbeeld: Een VO-instelling richt aparte domeinen in voor elke vakgroep: Nederlands Wiskunde Engels 7

9 HOE RICHT U DE APPLICATIE IN? WAT IS HET EFFECT? U richt voor elk onderdeel een domein in en voegt aan elk domein één of meer domeinbeheerders toe. De door u aangestelde domeinbeheerders richten een mappenstructuur in zoals beschreven in de implementatiehandleiding voor domeinbeheerders en ontwikkelaars. Voor het domeinoverstijgende onderdeel Kandidaten kan een mappenstructuur worden ingericht op bijvoorbeeld afdeling (VMBO, HAVO, VWO) en klas. Een applicatie met meer dan één domein, waarbij vragen, toetsen en afnames per domein gescheiden zijn. Kandidaten zijn in een andere indeling (bijvoorbeeld klassen in plaats van vakgroepen) beschikbaar in elk domein. SCENARIO 2.2C: U RICHT APARTE DOMEINEN IN VOOR HET SCHEIDEN VAN VRAGEN EN TOETSEN IN VERBAND MET DE VEREISTE BEVEILIGING VAN OFFICIËLE EXAMENS. WANNEER GEBRUIKT U DIT SCENARIO? HOE RICHT U DE APPLICATIE IN? WAT IS HET EFFECT? Dit scenario is geschikt voor instellingen die zowel examens afnemen die officieel worden gecontroleerd en goedgekeurd als meer vrijblijvende toetsen. Bijvoorbeeld: een verzekeraar neemt niet alleen officiële WFTexamens af, maar ook voortgangstoetsen. De vragen die in de officiële toetsen worden gebruikt, mogen in geen geval in de andere toetsen worden gebruikt. U richt twee domeinen in: een voor de officiële toetsen en een voor de overige toetsen. U voegt aan elk domein één of meer domeinbeheerders toe. De door u aangestelde domeinbeheerders richten een mappenstructuur in zoals beschreven in de implementatiehandleiding voor domeinbeheerders en ontwikkelaars. Voor het domeinoverstijgende onderdeel Kandidaten richten de domeinbeheerders in overleg een geschikte mappenstructuur in. Een applicatie met meer dan één domein, waarbij vragen, toetsen en afnames per domein gescheiden zijn. Kandidaten zijn in een andere indeling beschikbaar in elk domein. TIP! U kunt er ook voor kiezen om naast het domein voor de officiële examens meer domeinen voor de voortgangstoetsen te maken, bijvoorbeeld per afdeling of onderdeel (zie scenario 2.2A). Maar u kunt de domeinbeheerders ook een scheiding naar afdelingen laten maken binnen één domein (zie voor meer informatie hierover hoofdstuk 2 van de implementatiehandleiding voor domeinbeheerders en ontwikkelaars). 8

10 3. INSTELLINGEN BEPALEN 3.1 Inleiding In het onderdeel Instellingen kunt u een aantal instellingen aanpassen die van belang zijn voor het beheren van kandidaten, de manier waarop kandidaten zich kunnen aanmelden, het versturen van wachtwoorden en het beoordelen van open vragen. 3.2 Kandidaatvelden: Wat is belangrijk om te weten? In de Help van TestVision Online staat beschreven hoe u de Kandidaatvelden kunt aanpassen. De velden Aanmeldnaam, Weergavenaam, Wachtwoord en adres en Extra tijd zijn altijd actief. De velden Geslacht, Voornaam, Voorletters, Tussenvoegsel, Achternaam en Geboortedatum kunt u optioneel actief maken. De velden Aanmeldnaam, Weergavenaam en Wachtwoord zijn altijd zichtbaar voor de kandidaat. De overige velden kunt u optioneel zichtbaar maken. Voor elk veld kunt u instellen of de gegevens door de kandidaat zelf gewijzigd mogen worden. Wees hiermee voorzichtig, vooral bij de eigenschap Extra tijd. Deze is bedoeld om kandidaten extra tijd te geven bij de toetsafname, bijvoorbeeld omdat ze dyslectisch zijn. Als u dit instelbaar maakt voor kandidaten, kunnen ze dit zelf aanzetten en dat is waarschijnlijk niet wenselijk. Bij het invoeren van kandidaten door ontwikkelaars zijn de velden Aanmeldnaam, Weergavenaam en Wachtwoord altijd verplicht. Als u het wachtwoord per naar de kandidaten wilt laten versturen, moet ook het veld adres verplicht worden ingevoerd. 3.3 Taalinstellingen: Wat is belangrijk om te weten? In de Help van TestVision Online staat beschreven hoe u de Taalinstellingen kunt aanpassen. Bij de beginwaarde van de interfacetaal kunt u kiezen tussen Nederlands en Engels. Deze instelling bepaalt alleen de interface, niet de inhoud van de toetsen. Als er in uw organisatie zowel Nederlandssprekende als Engelssprekende kandidaten zijn, moet u vragen, toetsen en afnames eventueel in beide talen ontwikkelen. Voor domeinbeheerders en ontwikkelaars is de Nederlandse en Engelse interfacetaal beschikbaar. Zij kunnen daarvoor zelf kiezen bij de persoonlijke instellingen bij het inloggen. Voor de kandidaatgegevens Aanmeldnaam en Weergavenaam kunt u in zowel het Nederlands als het Engels een andere veldnaam instellen. Als het student ID of personeelsnummer als aanmeldnaam gebruikt wordt, kunt u dat aangeven in de veldnaam. 9

11 Instellingen zijn applicatiebreed. Het is dus niet mogelijk om voor het ene domein Nederlands als beginwaarde van de interfacetaal in te stellen, en voor het andere domein Engels. 3.4 Wachtwoord per Wat is belangrijk om te weten? In de Help van TestVision Online staat beschreven hoe u kunt instellen dat een wachtwoord per .wordt verzonden. Standaard wordt er geen mail met het wachtwoord verstuurd aan de kandidaat. Dit kunt u hier aanpassen. Als u het wachtwoord per naar de kandidaten wilt laten versturen, moet ook het veld adres verplicht worden ingevoerd door de ontwikkelaar. Een ontwikkelaar kan er bij het invoeren van een nieuwe kandidaat dan eventueel voor kiezen om TestVision Online zelf een wachtwoord te laten genereren U kunt de standaardtekst van de indien gewenst aanpassen. 3.5 Beoordelingsinstellingen: Wat is belangrijk om te weten? In de Help van TestVision Online staat beschreven hoe u de Beoordelingsinstellingen kunt aanpassen. Standaard worden niet beantwoorde open vragen door TestVision Online direct beoordeeld (met Niet beantwoord en 0 punten). In sommige uitzonderingssituaties kan het zijn dat u deze vragen toch door een beoordelaar wilt laten beoordelen. Daarvoor kunt u deze standaardinstelling aanpassen. Dit geldt dan voor alle domeinen. Daarnaast kunt u hier de optie beschikbaar stellen waardoor coördinatoren van een afname ervoor kunnen kiezen om aan beoordelaars een mailnotificatie te laten versturen zodra er een te beoordelen kandidaat klaar staat. U kunt de standaardtekst van de indien gewenst aanpassen, bijvoorbeeld dat de beoordelaar de toets binnen een afgesproken periode moet beoordelen. Deze aanpassing geldt dan voor alle domeinen. 10

12 4. STANDAARDTEKSTEN AANPASSEN 4.1 Inleiding In TestVision Online kunt u de standaardteksten (beginwaarden) voor feedback, Geen leerstofverwijzing en Toelichtingen op scoringsregels naar eigen inzicht aanpassen. De feedbackteksten zijn beschikbaar voor: een goed antwoord; een gedeeltelijk goed antwoord; een fout antwoord; een onbeantwoorde vraag; een nog niet beoordeelde vraag. Toelichtingen zijn beschikbaar voor de scoringsregels: Gedwongen raden; Correctie voor raden. 4.2 Wat is belangrijk om te weten? In de Help van TestVision Online staat beschreven hoe u de standaardteksten kunt aanpassen. U kunt de standaardteksten (beginwaarden) van TestVision Online van zowel de feedbackteksten als de toelichtingen op de scoringsregels altijd terugzetten. Het is belangrijk om binnen uw organisatie een eventuele aanpassing van de standaardteksten goed af te stemmen. U kunt standaardteksten aanpassen voor zowel de Nederlandse als de Engelse interfacetaal. Bij het maken van een toets worden standaardfeedbackteksten en de standaard tekst bij geen leerstofverwijzing alleen aan de kandidaat getoond als: de ontwikkelaar bij een vraag geen eigen feedback en/of geen leerstofverwijzing heeft ingevoerd én; in de toetstemplate is ingesteld dat de kandidaat feedback en/of leerstofverwijzing mag opvragen. De toelichting op de scoringsregel wordt alleen aan de kandidaat getoond als in de toetstemplate is ingesteld dat deze toelichting zichtbaar is op het instructiescherm. De instellingen zijn applicatiebreed. Het is dus niet mogelijk om voor een bepaald domein afwijkende standaardteksten in te stellen. 11

13 5. VRAAGSTATUS UITBREIDEN 5.1 Inleiding Alle vragen in TestVision hebben een status: Aan, Uit of Afgeschreven. Het is mogelijk (maar niet noodzakelijk) om deze vraagstatus uit te breiden met een aantal statuswaarden. Als u van de uitbreiding gebruikmaakt, kunt u dus verschillende waardes toekennen aan een vraag met een bepaalde status. Dit kunt u bijvoorbeeld gebruiken om een zogenaamde workflow in te regelen. We beschrijven hier enkele mogelijke uitbreidingen op de vraagstatus. Als u de uitbreiding activeert, verandert de interface voor ontwikkelaars in het onderdeel Vragen. Ze zien in het vraagoverzicht niet alleen de status van de vraag maar ook de bijbehorende waarde. Het wijzigen van de status gaat via een lijst in een apart venster Vraagstatus wijzigen. HIER ZIT U EEN VRAAGOVERZICHT MET DE GEWONE INTERFACE, ZONDER UITBREIDING VAN DE VRAAGSTATUS. IN DIT VOORBEELD ZIET U HET EFFECT VAN HET UITBREIDEN VAN DE VRAAGSTATUS OP DE INTERFACE VOOR DE ONTWIKKELAARS. 12

14 We adviseren u met klem om over de uitbreiding van de vraagstatus vooraf te overleggen met bijvoorbeeld de domeinbeheerder(s) en/of een aantal ontwikkelaars met veel zicht op het ontwikkelproces van vragen. 5.2 Wat is belangrijk om te weten In de Help van TestVision Online staat beschreven hoe u de vraagstatus kunt uitbreiden door waardes toe te voegen en te bewerken. Standaard is de uitbreiding niet geactiveerd. Omdat er altijd minimaal één waarde per vraagstatus (Aan, Uit, Afgeschreven) moet zijn, zijn er wel drie waarden voorgedefinieerd, te weten In ontwikkeling (Uit), Vastgesteld (Aan) en Verouderd (Afgeschreven). U kunt deze waarden naar eigen inzicht wijzigen. De vraagwaarden worden alfabetisch geclusterd binnen de drie vraagstatussen (zie de voorbeelden in paragraaf 5.4). U kunt zelf de gewenste standaardwaarde opgeven. Deze waarde wordt automatisch gekoppeld aan een nieuwe vraag. Als u de uitbreiding activeert als er al vragen zijn ontwikkeld, moet u opgeven welke statuswaarde u wilt toekennen aan de vragen die op dat moment al in de database zijn opgenomen. Dit moet u doen voor elk van de drie statussen Aan, Uit en Afgeschreven. Zodra een statuswaarde is gekoppeld aan een vraag, kunt u de bijbehorende status niet meer wijzigen. U kunt statuswaarden uitzetten, waardoor ze niet meer kunnen worden gebruikt. Vragen met deze statuswaarde, behouden de waarde. De statuswaarde kan echter niet meer aan (nieuwe) vragen worden gekoppeld. Als u de uitbreiding deactiveert, krijgen alle bestaande vragen weer alleen de vraagstatus Aan, Uit of Afgeschreven, zoals past bij de gekoppelde statuswaarde. Dit kan niet ongedaan gemaakt worden. 5.3 De betekenis van vraagstatussen Vragen kunnen drie statussen hebben: Uit, Aan en Afgeschreven. Vragen met de status Aan zijn gewoon te gebruiken. De statussen Uit en Afgeschreven zijn bedoeld om vragen die (tijdelijk) niet gebruikt of afgenomen mogen worden te beheren. De betekenis van deze statussen is als volgt: Status Uit Afgeschreven Vraag De vraag kan worden opgenomen in toetsen, maar een toets met een of meer vragen die uit staan, kan niet (opnieuw) worden gepubliceerd. Deze status kunt u bijvoorbeeld gebruiken voor een vraag die nog niet af is. Als de vraag al eerder in een toets is gepubliceerd en daarna wordt uitgezet, blijft de vraag gewoon beschikbaar voor afname. De vraag kan niet aan nieuwe of bestaande toetsen worden toegevoegd. In bestaande toetsen blijft de 13

15 vraag gewoon beschikbaar. U kunt deze status bijvoorbeeld gebruiken voor een vraag die al vaak is gebruikt of is verouderd. 5.4 Voorbeelden van uitbreidingen op de vraagstatus Er zijn diverse uitbreidingen op de vraagstatus denkbaar. U kunt er een beknopte of juist uitgebreidere workflow van het vraagontwikkelproces mee inrichten. Bij de beknopte workflow hoeft u alleen maar de uitbreiding te activeren en eventueel de waardes naar wens iets aan te passen. De cursieve waarden zijn in deze voorbeelden de standaardwaardes. U kunt de uitbreiding ook gebruiken om de betekenis van de statussen duidelijker te maken. Beknopte workflow Voorbeeld Uitgebreide workflow Voorbeeld Betekenis status In ontwikkeling (Uit) Vastgesteld (Aan) Vervallen (Afgeschreven) Aanpassing nodig (Uit) In ontwikkeling (Uit) Onder redactie (Uit) Geanalyseerd (Aan) Goedgekeurd (Aan) Afgekeurd (Afgeschreven) Te vaak gebruikt (Afgeschreven) Verouderd (Afgeschreven) Nog niet afnemen (Uit) Gereed voor afname (Aan) Niet meer gebruiken (Afgeschreven) 14

16 6. APPLICATIEBREDE VRAAGKENMERKEN INSTELLEN 6.1 Inleiding TestVision Online heeft geen vooraf vastgelegde kenmerken voor vragen. Elke organisatie kan zelf kiezen welke kenmerken ze wil gebruiken. Natuurlijk moet dit wel op instellingsniveau worden vastgelegd. Daarbij maken we onderscheid tussen applicatiekenmerken, die voor alle domeinen hetzelfde zijn en domeinkenmerken, die per domein kunnen worden vastgelegd. De ontwikkelaars kunnen vraagkenmerken gebruiken voor het beheer van de vragen, maar ook bij het samenstellen van toetsen. In dit hoofdstuk beschrijven we onder meer een aantal voorbeelden voor het gebruik van applicatiekenmerken. Voorbeelden van domeinkenmerken vindt u in de implementatiehandleiding voor domeinbeheerders en ontwikkelaars. De beheerders van de verschillend domeinen moeten vooraf in overleg bepalen welke kenmerken voor alle domeinen moeten gelden en welke niet. De kenmerken die voor alle domeinen moeten gelden, voert u in als applicatiekenmerken. De kenmerken die alleen voor de domeinen gelden, voeren de domeinbeheerders zelf in als domeinkenmerken. 6.2 Wat is belangrijk om te weten? In de Help van TestVision Online staat beschreven hoe u applicatiekenmerken kunt toevoegen en bewerken. We maken onderscheid tussen verplichte en niet-verplichte kenmerken. Een verplicht kenmerk wordt automatisch met een standaardwaarde aan een nieuwe vraag gekoppeld. Een niet verplicht kenmerk moet door de ontwikkelaar handmatig aan de vraag worden gekoppeld. Een kenmerk kent een aantal waarden, die u zelf kunt definiëren. De waarden worden (in een lijstvenster) in alfabetische volgorde aan de ontwikkelaar getoond. Een kenmerk heeft altijd een standaardwaarde, die u zelf opgeeft. Dit is de waarde die automatisch aan de vraag wordt toegekend. De ontwikkelaar kan (via een lijstvenster) een andere waarde kiezen. Een kenmerk moet uniek zijn. Op applicatie- en domeinniveau mogen dus niet dezelfde kenmerken voorkomen. U kunt een kenmerk of kenmerkwaarde uitzetten. Het kenmerk of de waarde kan dan niet meer door ontwikkelaars worden gebruikt. Een standaardwaarde kan niet worden uitgezet. Het uitzetten van kenmerken of waardes heeft geen consequenties voor toetsmatrijzen van bestaande toetsen. Kenmerken en kenmerkwaardes kunnen alleen verwijderd worden als ze niet gebruikt worden bij vragen en/of in toetsmatrijzen. 15

17 6.3 Voorbeelden van applicatiekenmerken Op applicatieniveau kunt u bijvoorbeeld vraagkenmerken invoeren voor het vastleggen van de moeilijkheidsgraad en de taxonomiecode, maar ook een kenmerk waarmee de ontwikkelaar de ontwikkelstatus van een vraag kan vastleggen. Voorbeeld van applicatiekenmerk Moeilijkheid Taxonomie (Bloom) Taxonomie (Bloom, uitgebreid) Taxonomie (Romizowski) Taxonomie (Romizowski uitgebreid) Voorbeelden van bijbehorende kenmerkwaardes (cursieve waarde is de standaardwaarde) Gemiddeld Makkelijk Moeilijk 1 Kennis 2 Begrip 3 Toepassen 1 Kennis 2 Begrip 3 Toepassen 4 Analyseren 5 Evalueren 6 Creëren 1 F 2 B 3 RV 4 PV 1.1 Ff 1.2 Fp 2.1 Bb 2.2 Bp 3.1 Rc 3.2 Rpm 3.3 Ri 3.4 Rr 4.1 Pc 4.2 Ppm 4.3 Pi 4.4 Pr TIPS! U kunt de kenmerkwaardes nummeren om een logische volgorde aan te brengen. Gebruik een 0 als voorloopcijfer (01, 02, 03 ) om ook met meer dan tien waardes de gewenste volgorde te verkrijgen. Als er binnen uw organisatie vragen en toetsen worden gemaakt in meer talen, kunt u ervoor kiezen om voor taal een (verplicht) applicatiekenmerk in te voeren. 16

18 7. SKINS BEHEREN 7.1 Inleiding Een skin bepaalt hoe een toets er voor de kandidaat uitziet (kleurgebruik, achtergrond, lettertype en grootte). Standaard wordt bij TestVison Online één skin meegeleverd. Nieuwe skins kunnen gedownload worden van de TestVision website, en u kunt ook een skin (laten) ontwikkelen in uw huisstijl. 7.2 Wat is belangrijk om te weten? In de Help van TestVision Online staat beschreven hoe u skins kunt toevoegen en bewerken. Er is altijd een skin als standaard aangewezen. Deze skin wordt automatisch gekoppeld aan een nieuwe afname. Als u extra skins heeft toegevoegd, kunt u een andere skin als standaard instellen. U kunt per domein instellen welke skins beschikbaar moeten zijn en welke skin de standaardskin is. Als er meer skins beschikbaar zijn, kan een ontwikkelaar altijd een andere skin kiezen dan de standaardskin. U kunt een skin uitzetten. De skin kan dan niet meer worden gebruikt in nieuwe afnames. Voor bestaande afnames blijft de skin gewoon beschikbaar. De standaardskin kan niet worden uitgezet. Skins kunnen alleen verwijderd worden als ze uit staan en in geen enkele afname gebruikt worden. Skins kunnen vanuit TestVision Online worden gedownload, bijvoorbeeld om deze te bewerken tot een iets andere skin die als tweede skin gebruikt wordt. Aan één afname kunnen maximaal drie skins worden gekoppeld. De kandidaten kunnen dan zelf kiezen in welke skin ze de toets willen maken en kunnen tussentijds wisselen tussen de skins. 17

19 8. AFNAMELOCATIES BEHEREN 8.1 Inleiding Door IP-controle op afnamelocaties beschikbaar te maken en locaties met IP-adressen in te voeren, kunnen ontwikkelaars bij een afname instellen dat een toets alleen op specifieke locaties gemaakt kan worden. Op andere locaties is de afname dan niet zichtbaar voor de kandidaten. 8.2 Wat is belangrijk om te weten? In de Help van TestVision Online staat beschreven hoe u afnamelocaties met IP-adressen kunt toevoegen en bewerken. Geef elke locatie een goed herkenbare naam, bijvoorbeeld de naam van het lokaal. Degene die de afname instelt moet namelijk op basis hiervan de gewenste locaties kunnen kiezen. Bij elke locatie moet u de bijbehorende IP-adressen of IP-ranges invoeren. Het gebruik van masks in de IP-adressen wordt niet ondersteund, daarvoor kunt u de range gebruiken. IP-controle wordt pas actief als de ontwikkelaar (afnameorganisator) aan een afname één of meer van de door u ingevoerde afnamelocaties koppelt. 18

20 9. SAFE EXAM BROWSER GEBRUIKEN 9.1 Inleiding Safe Exam Browser (SEB) is een webbrowseromgeving die het mogelijk maakt om veilig digitaal te toetsen. De software verandert elk device (computer, laptop, tablet et cetera) in een veilig werkstation. Het regelt de beschikbaarheid van toegestane websites en applicaties en voorkomt het gebruik van verboden hulpmiddelen op het device tijdens het examen. 9.2 Wat is belangrijk om te weten? In de Help van TestVision Online staat beschreven hoe u sleutels voor de SEB kunt toevoegen en bewerken. U moet verschillende configuraties maken voor de verschillende systemen (Mac, Windows). Voor elke configuratie genereert SEB een configuratiebestand met een unieke sleutel. Deze sleutel kan in TestVision Online ingevoerd worden. U kunt op deze manier meer configuraties aan TestVision Online koppelen. U kunt configuratiesleutels (tijdelijk) aan- of uitzetten om de beveiliging strenger of juist minder streng te maken. Voor meer informatie over SEB verwijzen wij u naar de documentatie die beschikbaar is op Hier kan de software gratis gedownload worden. 19

21 BEGRIPPENLIJST TESTVISION ONLINE Begrip Domein Kenmerk Safe Exam Browser Skin Toetstemplate Omschrijving Een domein is een afgebakende omgeving van vragen, toetsen en afnames. Een zelf te definiëren eigenschap van vragen, zoals moeilijkheid, taxonomiecode, onderwerp. Bij een kenmerk horen kenmerkwaardes. Een webbrowseromgeving die het mogelijk maakt om veilig digitaal te toetsen. De skin van een toets bepaalt hoe de toets er voor de kandidaat uitziet (kleurgebruik, achtergrond, lettertype en grootte). Een door de domeinbeheerder vast te leggen combinatie van instellingen op de instructie- en resultaatpagina die gekoppeld kan worden aan een toets. 20

22 INDEX Applicatiebeheerder 3 Applicatiekenmerk 16 Beoordelingsinstellingen 10 Domeinbeheerder 3 Domeinen inrichten 5 één domein 6 meer dan één domein 6, 7, 8 startmap kandidaten instellen 7 Domeinoverstijgend 5 Feedbackteksten 11 Instellingen 9 Interfacetaal 9 Kandidaatgegevens 9 Kandidaatstartpunt 7 Kandidaatvelden 9 Kenmerk niet verplicht 15 standaardwaarde 15 verplicht 15 Ontwikkelaar 3 Rollen 2 Safe Exam Browser 18 Standaard skin 17 Taalinstellingen 9 Taken 2 Toelichting scoringsregels 11 Uitbreiden vraagstatus 12 Vraagstatus 13 Aan 13 Afgeschreven 13 Uit 13 uitbreiden 12 Wachtwoord per