Project Portfolio Usability Testverslag Test 1: Portfolio Thomas Meiborg Lennart Kuyvenhoven: Test Monitor & Recruiter Thomas Meiborg: Data Logger, Tech Monitor & Recruiter Klas GI1C 1
Inhoudsopgave Test Locatie: blz. 3 Planning: blz. 3 Deelnemers: blz. 3 Beschrijving Portfolio: blz. 4 Doel Test: blz. 5 Observaties: blz. 6 Data: blz. 6 Survey: blz. 7 Problemen: blz. 8 Suggesties: blz. 8 2
Test Locatie De test is uitgevoerd in het Usability lab van de HKU, locatie Hilversum. Voor de test gebruikten we de computers, monitors en de camera die in het lab aanwezig waren. Ook hadden we allebei onze laptop meegenomen, zodat we zo nodig een computer konden vervangen. Thomas gebruikte zijn laptop als verwerker voor zijn observaties. Ik gebruikte hier een dummy voor. Planning De test werd uitgevoerd op maandag 12 oktober, van 9.15 tot 11.00. 8.45 9.30: wij waren bezig met het voorbereiden van de test. Het klaarzetten van de apparatuur duurde echter langer dan verwacht, waardoor we pas een kwartier later konden beginnen. 9.30 10.05: de eerste sessie was met Remco Raven en duurde 35 minuten. 10.10 10.31: de tweede sessie was met Andi Kesaulija en duurde 21 minuten. 10.40 11.01: de derde sessie was met Hedwig Klamer en duurde 21 minuten. Wij hadden verwacht dat elke sessie gemiddeld 20 minuten zou duren. De eerste sessie liep erg uit, maar de andere twee kwamen dichter bij onze verwachting. Deelnemers Naam: Remco Raven Geslacht: man Leeftijd: 19 Foto: Naam: Andi Kesaulija Geslacht: man Leeftijd: 22 jaar Foto: 3
Naam: Hedwig Klamer Geslacht: vrouw Leeftijd: 18 jaar Beschrijving Portfolio Wij hebben het portfolio van Thomas Meiborg getest. Dit portfolio is bedoeld om medestudenten en docenten een beeld van Thomas te geven. Ze moeten weten wie hij is, waar hij voor staat en wat voor werk hij maakt. Ook moeten docenten zijn gemaakte werk op zijn portfoliosite kunnen vinden. Wij hebben voornamelijk de navigatie van de site en de lay-out getest op efficiëntie, effectiviteit en voldoening. Het wireframe van de indexpagina. Dit was het ontwerp voor de lay-out van het portfolio. 4
De sitemap van het portfolio. Dit was het ontwerp voor de navigatie van het portfolio. Doel test Het portfolio zelf heeft twee doelen. Ten eerste is het portfolio bedoelt om medestudenten te informeren over de student zelf. Wat kan deze student, waar staat hij of zij voor, wat voor werk maakt hij/zij etc. Ten tweede moet het portfolio ook docenten informeren over het werk dat de student verricht, zowel het eigen werk als het werk voor school. Docenten moeten de gemaakte opdrachten snel terug kunnen vinden. Wij hebben getest of deze doelen bereikt worden volgens de onderstaande drie invalshoeken: Efficiëntie: kan de gebruiker de informatie die hij zoekt snel vinden? Loopt de navigatie soepel of moet de gebruiker zoeken om informatie te vinden? Effectiviteit: vindt de gebruiker de informatie die hij ook daadwerkelijk zoekt? Is de informatie tot the point of staan er onnodige dingen bij? Voldoening: is de gebruiker tevreden na een bezoek aan het portfolio? Heeft de gebruiker nu een duidelijk beeld van de student of mist hij nog informatie? 5
Observaties De volgende dingen vielen op: Remco las het portfolio heel uitgebreid. Hierdoor duurde een opdracht vaak wat langer, samen met het feit dat de tekst aan de lange kant was. Andi vond het eigen werk duidelijk interessant, want hij bekeek tijdens de survey de pagina s met eigen werk. Data Om de efficiëntie, effectiviteit en voldoening van het portfolio te testen hebben wij de deelnemer gedurende de test de acht opdrachten. De Data Logger heeft gedurende de test genoteerd hoeveel tijd nodig was om een opdracht te voltooien en hoeveel kliks daarbij nodig waren. Sessie 1: Remco Raven 1. Kun je vertellen van wie het portfolio is en welke studie deze persoon volgt? Tijd: 19 sec - Kliks: 0 2. Waarom volgt deze persoon deze studie? Gelieve zo beknopt mogelijk. Tijd: 45 sec - Kliks: 2 3. Kan je zijn persona s terugvinden? Tijd: 5 sec - Kliks: 2 4. Kan je zijn CV vinden? Tijd: 12 sec - Kliks: 3 5. Noem twee hobbies/interesses van deze persoon. Tijd: 1 min - Kliks: 1 6. Voor hoeveel spelers is de toelatingsopdracht geschikt? Tijd: 25 sec - Kliks: 3 7. Heb je genoeg informatie om deze persoon in te schatten? Ja 8. Verstuur een reactie via het formulier. Tijd: 36 sec - Kliks: 2 Sessie 2: Andi Kesaulija 1. Kun je vertellen van wie het portfolio is en welke studie deze persoon volgt? Tijd: 9 sec - Kliks: 0 2. Waarom volgt deze persoon deze studie? Gelieve zo beknopt mogelijk. Tijd: 50 sec - Kliks: 1 3. Kan je zijn persona s terugvinden? Tijd: 5 sec - Kliks: 2 4. Kan je zijn CV vinden? Tijd: 7 sec - Kliks: 2 5. Noem twee hobbies/interesses van deze persoon. Tijd: 30 sec - Kliks: 1 6. Voor hoeveel spelers is de toelatingsopdracht geschikt? Tijd: 20 sec - Kliks: 2 6
7. Heb je genoeg informatie om deze persoon in te schatten? Ja 8. Verstuur een reactie via het formulier. Tijd: 25 sec - Kliks: 2 Sessie 3: Hedwig Klamer 1. Kun je vertellen van wie het portfolio is en welke studie deze persoon volgt? Tijd: 5 sec - Kliks: 0 2. Waarom volgt deze persoon deze studie? Gelieve zo beknopt mogelijk. Tijd: 47 sec - Kliks: 1 3. Kan je zijn persona s terugvinden? Tijd: 6 sec - Kliks: 2 4. Kan je zijn CV vinden? Tijd: 5 sec - Kliks: 2 5. Noem twee hobbies/interesses van deze persoon. Tijd: 65 sec - Kliks: 1 6. Voor hoeveel spelers is de toelatingsopdracht geschikt? Tijd: 35 sec - Kliks: 2 7. Heb je genoeg informatie om deze persoon in te schatten? Ja 8. Verstuur een reactie via het formulier. Tijd: 28 sec - Kliks: 2 Survey Na afloop van de test stelde de Test Monitor nog wat vragen. Sessie 1: Remco Raven 1. Wat viel je op? Antwoord: de achtergrond viel op, Remco vond hem leuk. Ook het feit dat Thomas veel eigen werk had gepubliceerd vond hij goed. 2. Wat vond je goed aan het portfolio? Antwoord: Remco vond het handig dat opdrachten door links geopend werden in een nieuw tabblad. 3. Wat vond je minder goed? Antwoord: de tekst mocht wat minder zijn van Remco. 4. Wil je verder nog iets toevoegen? Antwoord: Remco had verder niets toe te voegen. Sessie 2: Andi Kesaulija 1. Wat viel je op? Antwoord: Andi vond de achtergrond ook in het oog springen, als was het vreemd dat de achtergrond anders was om sommige pagina s 2. Wat vond je goed aan het portfolio? Antwoord: het eigen werk vond Andi interessant. Ook was de site volgens hem duidelijk. 3. Wat vond je minder goed? 7
Antwoord: Andi zou zelf de tekst wat hebben ingekort. Ook maakte de achtergrond de tekst soms wat moeilijker te lezen. 4. Wil je verder nog iets toevoegen? Antwoord: Andi had verder niks toe te voegen. Sessie 3: Hedwig Klamer 1. Wat viel je op? Antwoord: het viel Hedwig op dat de achtergrond op sommige pagina s anders was. Het kleurenschema vond ze positief in het oog springen. 2. Wat vond je goed aan het portfolio? Antwoord: het portfolio was duidelijk volgens Hedwig. Ook vond ze het portfolio persoonlijk en ze vond het leuk dat Thomas veel over zichzelf vertelde. 3. Wat vond je minder goed? Antwoord: de tekst werd wederom aan de lange kant bevonden. Ook zou Hedwig de achtergrond overal hetzelfde maken. 4. Wil je verder nog iets toevoegen? Antwoord: Thomas moet consistent zijn. Ook zou Hedwig het aanraden om zijn CV op te fleuren zodat die in het oog springt. Problemen Na de test was het duidelijk dat het portfolio duidelijk is en een goed beeld van Thomas gaf. Het grootste probleem was duidelijk dat de tekst lang was en hierdoor niet uitnodigde tot lezen. Ook was de tekst niet altijd heel leesbaar, doordat de achtergrond witte lijnen bevatte en de tekst zelf ook wit was. Suggesties om deze problemen op te lossen Om de bezoeker wat meer uit te nodigen tot het lezen van de tekst moet de tekst korter worden. Ook de achtergrond moet verandert worden zodat de tekst leesbaar is. Remco en Andi vonden de achtergrond echter gaaf, dus het is waarschijnlijk ook een goede oplossing om de tekstkleur aan te passen. 8