RU Tips en Trucs voor PeerMark en PaperAssignment Voor een meer algemene FAQ zie ook de website van Turnitin: http://turnitin.com/nl/support-services/faqs Inhoud RU Tips en Trucs voor PeerMark en PaperAssignment... 1 1. PeerMark: Roster Sync, ofwel synchronisatie studenten naar Turnitin... 2 2. PeerMark: Studenten al een review laten schrijven terwijl inleveren (PaperAssignment) nog open staat.... 2 3. Peer Mark: Kan ik Turnitin laten bepalen welke studenten elkaar reviewen?... 3 4. Peer Mark: Hoe zorg ik er voor dat studenten in koppels elkaar reviewen?... 4 5. PeerMark: Kan ik het ook aan de studenten zelf overlaten wie elkaar reviewt?... 5 6. PaperAssignment: Kunnen studenten meerdere bestanden per opdracht inleveren?... 6 7. TII: Hoe kom je bij het (verborgen) Class Homepage venster van je cursus?... 7 8. TII: Wat betekenen alle datum instellingen (start- end en postdate) bij een PaperAssignment en bij een PeerMark?... 7 9. PaperAssignment: Wat moet ik invullen bij de Optional Settings?... 8 10. PeerMark: Hoe vul ik de drie instellingen van de PeerMark Settings goed in?... 9 11. PeerMark: Hoe werkt SelfAssignment?... 10 12. PaperAssignment: Wat betekenen de 3 verschillende opties voor OriginalityCheck op de PaperAsignment?... 10 13. GradeMark: Delen en gebruiken van QuickMarksets... 10 14. GradeMark: Delen en gebruiken van Rubrics... 11 15. PeerMark: Wanneer kunnen studenten starten met het schrijven van een review?... 12 16. PeerMark: Wanneer kunnen studenten hun ontvangen review lezen?... 13 17. PaperAssignment: Na een review moeten studenten hun aangepaste paper opnieuw inleveren. Hoe en waar regel je dat goed?... 13 18. PaperAssignment: Zijn de nieuw ingeleverde opdrachten te vergelijken met de originele en te controleren op verwerking van de reviews?... 13 19. TII: Hoe zet ik een goede cyclus op?... 13 1
1. PeerMark: Roster Sync, ofwel synchronisatie studenten naar Turnitin Zorg er voor dat alle in de Blackboard cursus ingeschreven studenten automatisch in de Turnitin database verschijnen! Normaliter verschijnen de in de cursus ingeschreven studenten pas in de Turinitin database zodra ze een Turnitin opdracht in de cursus in hebben geopend. Om de lijst met studenten automatisch te importeren, voordat de studenten de opdracht hebben bekeken of ingediend, kun je als docent de zogenaamde Roster Sync-functie gebruiken. Dat is in elk geval handig en noodzakelijk als je vooraf wilt instellen dat elke student ook een PeerReview zal moeten schrijven. Ga hiervoor naar Control Panel, Course Tools, Turnitin Assignments. Selecteer hier een willekeurige PaperAssignment. In het tabje Assigment Inbox vind je (rechts in het midden) de optie Roster Sync. Door op de knop Roster Sync te klikken zullen alle voor de cursus ingeschreven studenten worden geüpload naar de Turnitin database. Deze functie kan later ook worden gebruikt om inmiddels uitgeschreven studenten uit de cursus te verwijderen. Bovendien zorgt deze functie er voor dat je na deze synchronisatie als docent namens alle in de cursus ingeschreven studenten een opdracht kunt indienen. Ze zijn immers allemaal bekend bij Turnitin. 2. PeerMark: Studenten al een review laten schrijven terwijl inleveren (PaperAssignment) nog open staat. Hoe kunnen studenten gedurende langere tijd een Paper inleveren (via Paper Assignment), terwijl studenten uit dezelfde cursus al een Peer Review op dezelfde Paper moeten schrijven? Maak gebruik van de optie om Papers langer dan de due-date te laten inleveren door bij het aanmaken van de Paper Assignment bij de Optional Settings de optie Allow submissions after the due date? op YES te zetten. Zie de afbeelding hieronder. Stel de due-date van de Paper Assignment zodanig in dat die (vrijwel onmiddellijk) valt na de start-date en in elk geval voor de datum waarop je de PeerReview opdracht wilt laten starten. Zet vervolgens de post-date (die in Turnitin in ook wel bekend staat als class-end-date) op een datum ergens aan het eind van het studiejaar. 2
Maak vervolgens de PeerMark Assignment (selecteer de hiervoor gemaakte Paper Assignment als basis-opdracht) en zet de Startdatum op de gewenste datum ergens na de Inleverdatum (due date) van de Paper Assignment. Dat kan desgewenst ook direct erna zijn, maar nooit ervoor. Geef tevens een Due en Post date op voor deze PeerReview opdracht. Die liggen dan, waarschijnlijk kort na elkaar, ook ergens aan het eind van het studiejaar/semester of blok. Klik daarna op Show More options. Hier kun je desgewenst instellen of studenten alle ingeleverde papers ofwel alle ingeleverde papers en alle peer-reviews mogen lezen. Maar ook kun je hier in stellen wat de uiterste inleverdatum voor de Paper Assignments is om nog mee te worden genomen in de pool van te reviewen werkstukken. N.B.: Om die pool van te reviewen studenten in elk geval op orde te hebben voer je de RosterSync functie uit, zie punt 1! De PeerMark opdracht heeft bij voorkeur een niet anonieme, als je wilt werken met afspraken wie welke student reviewt, anders is er grote kans op ongelijke verdeling van de papers over de reviewers. Wil je als docent de gegeven PeerMarks al graden dan zou je de due date naar voren moeten halen, iets wat praktisch onmogelijk is als de PaperAsignment nog loopt, doordat inleveren na de due-date is toegestaan. Werk in dat geval bijvoorbeeld met semester/periode PeerMark Assignments, daarvan kun je wel verschillende start- en due dates instellen. LET OP: Als je de distributie van de PeerMark Assignment aan Turnitin overlaat (zie punt 3 hieronder) en studenten door het systeem een paper toegewezen krijgen, dan zal er vrijwel zeker geen één op één verdeling zijn van reviewers en gereviewde papers. Sommige papers zullen vaker gereviewd worden (toegekend worden aan meerdere studenten) en andere papers zullen nooit gereviewd worden. Je kunt dit alleen voorkomen door afspraken te maken en middels een gepubliceerde tabel studenten een paper van een collega-student toe te kennen. Daarvoor moeten de papers dan niet-anoniem zijn. Een andere optie kan zijn om studenten zelf afspraken te laten maken om bijvoorbeeld in koppels of drietallen elkaars werk te laten reviewen. Zie daarvoor ook de punten verderop: (4 en 5) Hoe zorg ik er voor dat studenten in koppels elkaar reviewen? en Kan ik het ook aan de studenten zelf overlaten wie elkaar reviewt? 3. Peer Mark: Kan ik Turnitin laten bepalen welke studenten elkaar reviewen? Ja, Turnitin kan dat, maar het werkt niet goed. Alleen in het ideale geval dat alle studenten een paper hebben geleverd op het moment dat de PeerMark opdracht van start gaat is er kans dat de distributie op een random wijze goed wordt uitgevoerd, dat wil zeggen dat iedere student (die een paper heeft ingeleverd) bijvoorbeeld één review schrijft en één review ontvangt. Voer in elk geval eerst de RosterSync functie uit, zie punt 1. Zie de afbeelding hierna. Vul bij [Step 2] van de instellingen (Distribution) achter [Papers automatically distrubuted by PeerMark] in het aantal Reviews per student. Om een één op één review te krijgen wordt dat in dit voorbeeld het 3
getal 1. Papers zullen bij deze manier van distribueren anoniem worden aangeboden ter review. 4. Peer Mark: Hoe zorg ik er voor dat studenten in koppels elkaar reviewen? Je kunt PeerMark koppels laten maken om studenten elkaar wederzijds of bijvoorbeeld opvolgend in alfabet te laten reviewen. Dat kan dan een anonieme review zijn. Doe wel altijd eerst een RosterSync (zie punt 1) op de gekoppelde PaperAssignment. Het maken van koppels is, zeker bij grotere aantallen veel werk. De settings van de Peer Mark Assignment, kunnen bijvoorbeeld zijn zoals hieronder bij stap 1. Daarbij kan het een bewuste keuze zijn oom ook studenten die nog geen paper hebben ingeleverd toch al wel een review te laten schrijven op een paper van een andere student. Bij stap 2, zie volgende afbeelding, regel je de distributie. Klik dan op [Show more distribution options] en via de button [Pair Students] wijs je de koppels toe. Als gezegd, dat is bij een grote groep erg veel werk. 4
In stap 3 voeg je eventueel nog open en gesloten vragen toe, die de student moet beantwoorden als leidraad voor het schrijven van de review. 5. PeerMark: Kan ik het ook aan de studenten zelf overlaten wie elkaar reviewt? Je zou, o.a. om werk te besparen de studenten onderling zelf afspraken kunnen laten maken wie elkaar reviewt door ze te vragen om zelf koppels of drietallen te vormen. Het alternatief is een tabel die de docent publiceert, waarin staat welke student een review maakt voor welke andere student. Het reviewen is bij deze opties dus niet anoniem. 5
Bij stap 1, Assignment, stel je instructies op en vink je aan dat namen zichtbaar zullen zijn. Vink bij stap 2, Distribution, niet de optie [ automatically..] aan maar wel [Paper(s) selected by the student] en vul daar het gewenste aantal in, bijvoorbeeld 1. 6. PaperAssignment: Kunnen studenten meerdere bestanden per opdracht inleveren? Studenten kunnen meerdere versies van een bestand inleveren. Hiervoor dien je als docent de Paper Assignment settings als volgt aan te passen: - Als je een opdracht aanmaakt, klik op het plusje bij Optional settings. - Zet Generate Originality Reports for student submissions op immediately (can overwrite reports until due date) * Dit geeft studenten de mogelijkheid om continu papers opnieuw in te leveren tot de inleverdatum. (Let wel: Het kan 24 uur duren om originaliteitsrapporten te verwerken voor opnieuw ingediende papers!). Hiermee worden eerder ingediende papers overschreven! Wil je studenten de mogelijkheid bieden om meerdere versies te laten indienen zonder vorige versies/inzendingen te overschrijven, dan moet je gebruik maken van zogenaamde Revision Assignments. Een Revision Assignment is gebaseerd op een basis Paper Assigment. Het is als het ware een duplicaat van de basis-opdracht (incl. standaard- en optionele) instellingen, maar kan nieuwe Start-, Due- en Post data hebben. Hiermee kunnen studenten herziende (revisie) en aangepaste opdrachten opnieuw inleveren met behoud van het eerder ingediende werkstuk. 6
Opmerking: voor elke nieuwe herziende opdracht dien je als docent een nieuwe Revision Assignment aan te maken. * Met de optie On due date wordt alleen een originaliteitsrapport gegenereerd op de inleverdatum van de opdracht. Met deze optie worden alle papers die zijn ingediend voor de opdracht met elkaar vergeleken wanneer de originaliteitsrapporten worden aangemaakt. 7. TII: Hoe kom je bij het (verborgen) Class Homepage venster van je cursus? Edit via het Course Menu een PeerMark Assignment. Ga vervolgens naar het tabje Edit Assignment en klik hier op de knop (onderaan) Cancel. Je zit nu op de "Turnitin-Class homepage" van je cursus. Deze homepage geeft allereerst een goed overzicht van alle Turnitin Assignments in je deze cursus, met de koppelingen tussen PeerMark en PaperAssignment, start-, due- en postdates en statussen van de opdrachten Vanuit deze homepage kun je: - Een opdracht toe voegen aan je cursus-homepagina door op de knop 'Add Assignment' te klikken. - Door op de knop 'View' van een opdracht te klikken de inbox van de opdracht bekijken en inzendingen die zijn ingediend voor de opdracht. Via More actions' in het Menu: - De Edit settings' van de opdracht. - Ook zelf (namens studenten) inzendingen indienen door op de optie 'Submit' te klikken. - Via 'Delete Assignment' de opdracht verwijderen. 8. TII: Wat betekenen alle datum instellingen (start- end en postdate) bij een PaperAssignment en bij een PeerMark? Start-date en end-date lijken wel voor zich te spreken. De post-date is de datum waarop de resultaten beschikbaar zijn voor de student. Bij een PaperAssignment zijn dat dus de beoordelingen en opmerkingen die middels GradeMark door de docent zijn gegeven. Bij PeerMark zijn dat de reviews van de collega-studenten. Let op: Op basis van de post-date wordt de feedback en de eventuele gegeven beoordeling gepubliceerd via Turnitin. Maar de gegeven beoordeling is al wel zichtbaar voor die datum in het Grade-Centre als de betreffende kolom niet tijdelijk verborgen is voor de student. 7
9. PaperAssignment: Wat moet ik invullen bij de Optional Settings? Een aantal opties spreken voor zich, maar hieronder over enkele ervan wat opmerkingen, zie ook de afbeelding hiervoor en hierna. a. Allow submissions after the due date? Dit kan handig zijn als je studenten papers wilt laten reviewen terwijl de inleverperiode voor de PaperAssignment eigenlijk nog moet lopen. Zie punt 2 in deze FAQ. b. Generate Originality Reports for student submissions Immediately/On due date/? Zie verderop punt 11. c. Exlude small matches? Behalve om achteraf, bij de rapportage, bronnen uit te sluiten kun je ook vooraf instellen, in aantallen woorden of in percentage, dat kleine overeenkomsten worden uitgesloten van controle. d. Attach a rubric/form to this assignment? Geeft de mogelijkheid om direct, of later, een Rubric te koppelen aan deze PaperAssignment, waardoor beoordeling door verschillende docenten uniformer wordt. 8
10. PeerMark: Hoe vul ik de drie instellingen van de PeerMark Settings goed in? a. De datums? Startdate moet liggen NA de due-date van de eraan gekoppelde PaperAssignment. Bij een doorlopende opdracht (Paperassignment) is daarom de overweging om de duedate vroeg te laten vallen maar allow submission after the due date aan te zetten. b. Distribution? Zie de punten 2 t/m 5 vooraan in dit documennt c. Questions? Om studenten enigszins te leiden bij het schrijven van een review kunnen zowel gesloten als open vragen geformuleerd worden. Door beantwoording van deze vragen is de student zich bewust van de criteria waaraan de paper en de review moet voldoen. 9
11. PeerMark: Hoe werkt SelfAssignment? Self-review kan toegevoegd worden aan of in de plaats komen van de PeerReview. Vink daarvoor de optie [Require self-review aan]. Als er hiernaast geen review nodig is op een paper van een andere student staan de aantallen daarboven op 0. 12. PaperAssignment: Wat betekenen de 3 verschillende opties voor OriginalityCheck op de PaperAsignment? a. Immediately, first report is final: De plagiaatcontrole gebeurt direct na het inleveren van de paper. Een tweede inzending is bij deze optie ook niet meer mogelijk. b. Immediately, can overwrite reports until due date De plagiaatcontrole gebeurt direct na het inleveren van de paper. Een eventuele tweede inzending wordt ook gecheckt. c. On due date De plagiaatcontrole gebeurt pas op de datum die is ingesteld als due date. Advies is om te kiezen voor ofwel optie a ofwel optie c. Bij optie c worden de documenten op de due date ook onderling vergeleken doordat alle ingeleverde papers dan al in de database zijn opgeslagen. Optie a. is handig als het tijdstip van inleveren van de papers erg ver uit elkaar kan liggen en de student verder moet werken op basis van de feedback op de eerste ingeleverde paper. 13. GradeMark: Delen en gebruiken van QuickMarksets QuickMarksets zijn in de huidige uitvoering in Turnitin( zomer 2015) niet gekoppeld aan een cursus in Blackboard maar aan een persoon. Dat wil zeggen dat een collega-docent uw QuickMarksets niet zonder meer ziet en kan gebruiken. Daarvoor moet de coördinator van de cursus de te gebruiken QuickMarkset delen met alle docenten van de cursus. Helaas kan dat nu nog niet anders dan door de set te exporteren en het geëxporteerde bestand vervolgens toe te sturen aan alle docenten van de cursus, die dan deze set weer dienen te importeren. 10
Om een QuickMarkset te exporteren klik je in de cursus via het Control Panel -> Course Tools -> Turnitin Assignments een willekeurige Turnitin Assignment aan. Vervolgens klik je op de tab [Libraries] en daaronder onder de titel "Libraries" op de subtab [QuickMark Manager]. Zie de afbeelding hieronder. Onder SETS selecteer je de te exporteren QuickMarkset. Klik daarna op de te exporteren set (in dit voorbeeld Opmaak Citering Theorie) en klik rechts op de knop Delen: Kies voor Export Set en sla het bestand op onder de voorgestelde naam. Stuur het bestand vervolgens naar je collega-docenten met het verzoek de set te importeren. Daarbij volgen ze dezelfde stappen als hiervoor beschreven, maar waar jij kiest voor Export Set kiest je collega voor Import Set. Daarna kan de collega-docent gebruik maken van de QuickMarkset. 14. GradeMark: Delen en gebruiken van Rubrics Net als een bij QuickMarksets is een persoon eigenaar van een Rubric en kan een Rubric gedeeld worden door deze te exporteren en te sturen aan collega's die de Rubric dan weer importeren, zie ook de toelichting verderop. Toch kunnen alle docenten de Rubric gebruiken die bijvoorbeeld door de coördinator van de cursus is aangemaakt. Dat verdient ook de voorkeur, ook omdat het een extra export- en import actie scheelt. Je stelt de standaard Rubric, die bij de beoordeling van de ingeleverde papers van betreffende Assignment moet worden gebruikt, in bij de Optional Settings van de Assignment, zie linker afbeelding hieronder. Het resultaat is dat de collega-docent nu gebruik kan maken van de door u ingestelde Rubric bij deze Assignment. De toe te passen Rubric wordt zichtbaar als de collega-docent bij het beoordelen van de paper op het "Rubric-symbool" rechtsonder in het GradeMark scherm klikt. 11
Als je toch een Rubric wilt exporteren, bijvoorbeeld om deze door een collega-docent te laten gebruiken en of aanpassen in een andere cursus, doe je dat als volgt: Je klikt in de cursus via het Control Panel -> Course Tools -> Turnitin Assignments een willekeurige Turinitin Assignment aan. Vervolgens klik je op de tab [Libraries] en daaronder onder de titel "Libraries" op de subtab [Rubric/Form Manager]. Klik vervolgens op het keuzelijstje links voor de actuele Rubric en selecteer de Rubric die je wilt exporteren Zie de afbeelding hieronder. klik rechts op de knop Delen: Kies voor Export en sla het bestand op onder de voorgestelde naam. Stuur het bestand vervolgens naar uw collega-docenten met het verzoek de Rubric te importeren. Daarbij volgen ze dezelfde stappen als hiervoor beschreven, maar waar jij kiest voor Export kiest je collega voor Import. Daarna kan de collega-docent gebruik maken van de Rubric in een andere cursus en deze desgewenst aanpassen. Tip 1: Als je gebruik maakt van de optie om de scores op basis van de Rubric toe te passen als berekend cijfer, via "Apply Rubric percentage to Grade" dan verwerkt Turnitin de cijfers uitsluitend als gehele (dus afgeronde) cijfers en synchroniseert die cijfers ook naar het Gradecentre. Je kunt dit alleen handmatig corrigeren in het Gradecentre. Die scores worden niet gesynchroniseerd naar Turnitin. Tip 2: Indien er al een beoordeling was door een andere docent was dan worden de ingevulde waarden overschreven door eventuele wijzigingen van een volgende beoordelaar. Het berekende cijfer wordt pas doorgevoerd, ook naar het Gradecentre, na toepassing van "Apply Rubric percentage to Grade" 15. PeerMark: Wanneer kunnen studenten starten met het schrijven van een review? Als de start-date van de PeerMark is geweest (en de due-date van de PaperAssignment). Maar als 12
je wilt dat studenten toch al kunnen reviewen terwijl de opdracht nog open staat, lees dan de aanwijzingen bij punt 2, "Studenten al een review laten schrijven terwijl inleveren nog open." 16. PeerMark: Wanneer kunnen studenten hun ontvangen review lezen? Na de post-date van de PeerReview. Die post-date ligt uiteraard na de due-date van de PeerMark. 17. PaperAssignment: Na een review moeten studenten hun aangepaste paper opnieuw inleveren. Hoe en waar regel je dat goed? Het beste is een nieuwe PaperAssignment aan te maken en die te voorzien van een duidelijke naam, bijvoorbeeld: Paper-2014-tweede inlevering 18. PaperAssignment: Zijn de nieuw ingeleverde opdrachten te vergelijken met de originele en te controleren op verwerking van de reviews? Alleen door ze naast elkaar te leggen of op twee schermen naast elkaar te zetten. 19. TII: Hoe zet ik een goede cyclus op? Van Concept paper, via PeerMark door studenten en een eventuele bespreking en waardering van die reviews naar een definitieve Paper? En waar vindt plagiaat controle in deze cyclus plaats? Daar willen we graag later nog eens op terugkomen. Het heeft natuurlijk alles te maken met de doelstellingen van uw cursus. In overleg met jouw ICTiO ondersteuner en eventueel didactische ondersteuning (OO) kun je die cyclus opzetten. In principe is een redelijke (en tamelijk volledige) cyclus in de vraagstelling al gedefinieerd: a. ConceptPaper (PaperAssignment) b. (OriginalityCheck) (en/of bij punt f) c. PeerMark door studenten (PeerMark) d. Eventuele bespreking en waardering van die reviews (Terugkoppeling aan studenten) e. Definitieve Paper (PaperAssignment) f. (OriginalityCheck) (en/of bij punt b) g. Beoordeling door de docent (Grademark met QuickMarks en/of Rubrics) 13