3.2 ONTWIKKELEN TESTEN

Transcriptie

1 3.2 ONTWIKKELEN TESTEN COMPUTERVAARDIGHEDEN VAN DOELPUBLIEK ESF PROJECT : EEN SERIOUS GAME ALS OPLEIDINGSTOOL VOOR VEILIGHEID EN PREVENTIE Barbara Plovie, Projectmedewerker Toegepaste Psychologie Howest Helga Peeters, Lector Toegepaste Psychologie Howest Joost Ingels, Projectmedewerker DAE-Research. Samuel Eeckhaut, Projectmedewerker DAE-Research. Vanhoucke Maarten, Projectmedewerker Industrieel Ontwerpen Howest INHOUD Introductie... 2 User Groep... 2 Verloop... 2 Opzet van de User - test... 3 Bevraging van algemene gegevens... 3 Bevraging van reeds bestaande ervaringen... 3 Aanreiken van verschillende bestaande serious games... 4 Observatie tijdens het spelen van de Games... 6 Vragenlijst omtrent de Serious Games... 6 Bevraging van de ervaringen met de gespeelde games... 7 Bijlage : Vragenlijst SGGO Project... 7 Persoonlijke gegevens... 8 Intro: Ervaring met Games... 8 Game 1a: Spelen van seveso game. Observatie Game 1b: Spelen van seveso game. Vragenlijst Game 2a: Spelen van Ludomedic game. Observatie Game 2b: Spelen van Ludomedic game. Vragenlijst Game 3a: Spelen van Ping. Observatie Game 3b: Spelen van Ping game. Vragenlijst Samenvatting. Wat zijn de ervaringen met games

2 INTRODUCTIE In kader van de ontwikkeling van een online opleiding rond brandpreventie en veiligheid binnen het AZ Groeninge is het cruciaal dat de huidige computervaardigheden van de doelgroep, het personeel binnen AZ Groeninge, in kaart gebracht wordt. Op basis van deze informatie kan bij de ontwikkeling van de Serious Game binnen dit project rekening gehouden worden met de behoeften en competenties van de toekomstige gebruikers. Op deze manier kan een Serious Game ontwikkeld worden die zo nauw mogelijk aansluit bij de leefwereld en visie van de verschillende personeelsleden binnen het AZ Groeninge. USER GROEP Binnen de user test wordt beoogd de competenties van toekomstige gebruikers te bevragen. Daar binnen het AZ Groeninge een ruime waaier aan personeel met een verschillende beroepsmatige functie tewerkgesteld is, wordt getracht om deze diversiteit tijdens de user test te exploreren. Om de ruime diversiteit op beroepsmatig niveau zo concreet mogelijk te benaderen, zullen tijdens de user test personeelsleden bevraagd worden die binnen verschillende functies tewerkgesteld zijn binnen het AZ Groeninge. Hierbij werd geopteerd om in kader van deze test personeel te rekruteren uit vier verschillende categorieën, namelijk : - Geneesheer, gespecialiseerde arts, chirurg, - Verpleegkundigen uit verschillende afdelingen - Administratief personeel - Onderhoudspersoneel (poetshulp, keukenpersoneel, technici, ) Naast een diversiteit op beroepsmatig niveau verschilt de toekomstige gebruikersgroep ook op andere beïnvloedbare aspecten. Dit betreft proximale factoren zoals het geslacht, de leeftijd, de etniciteit, sociaal economische status,. Om rekening te houden met de heterogeniteit van het personeel op dit gebied, wordt tijdens de user test een uiteindelijke user - groep van 16 verschillende persona vooropgesteld. Dit betreft telkens 4 persona uit elk van de vier categorieën ( zoals hierboven weergegeven), die onderling verschillen in geslacht, leeftijd, etniciteit,. Op deze manier wordt getracht een representatieve weergave te bekomen betreffende de computervaardigheden waar het personeel binnen het AZ Groeninge over beschikt. VERLOOP De user test wordt gepland in het begin van maart 2013, de specifieke datum dient nog vastgelegd te worden in overleg. Getracht wordt de volledige user groep in één dag te testen, om op deze manier kosten en tijd te drukken. Tijdens de user test zullen 3 tot 4 verschillende projectmedewerkers binnen HOWEST beschikbaar gesteld worden om alles in goede banen te leiden en de verschillende gebruikers bij te staan. Om de collectering van de benodigde informatie zo ruim mogelijk te maken zullen de 12 vooropgestelde persona niet allemaal op eenzelfde moment de user test doorlopen. Hier wordt geopteerd om de groep op te splitsen in 3 subgroepen van telkens 4 personen. 2

3 Datum en Tijdstip Medewerkers HOWEST AZ - Groeninge../03/2013.u. -.u. 1. Eeckhaut Samuel Ingels Joost Plovie Barbara Helga Peeters 4.../03/2013.u. -.u.../03/2013.u. -.u. 1. Eeckhaut Samuel 2. Ingels Joost 3. Plovie Barbara 4. Helga Peeters 1. Eeckhaut Samuel 2. Ingels Joost 3. Plovie Barbara 4. Helga Peeters OPZET VAN DE USER - TEST Het personeel dat gerekruteerd wordt om aan de user test deel te nemen zal op een kwalitatieve en kwantitatieve methode bevraagd worden omtrent hun computervaardigheden en hun ervaringen met het spelen van games. Hiervoor werd door de projectmedewerkers binnen de verschillende opleidingen van HOWEST een test-formulier opgesteld. Dit volledige formulier is terug te vinden in bijlage 1 van dit document. De test is opgebouwd uit verschillende onderdelen die in volgende alinea individueel uitgeschreven worden. BEVRAGING VAN ALGEMENE GEGEVENS Een eerste deel van de bevraging tijdens de user test betreft de algemene gegevens van het individu. Deze gegevens worden in kaart gebracht aan de hand van een kwantitatieve vragenlijst. Hierbij werden vragen opgesteld die concreet het geslacht, de leeftijd, de etniciteit en de beroepsmatige functie binnen het AZ Groeninge in kaart brengen. In bijlage 1 wordt dit deelaspect van de bevraging weergegeven op de eerste pagina. BEVRAGING VAN REEDS BESTAANDE ERVARINGEN Een tweede luik binnen de user test betreft de bevraging van het individu omtrent reeds verworven ervaring met digitale media. Deze bevraging heeft als doel na te gaan of het individu over een eigen computer beschikt, hoe vaak men deze gebruikt en met welke doeleinden, of men reeds ervaring heeft met het spelen van games en welk genre games dit betreft. Hiervoor werden 7 vragen opgesteld met multiple choice antwoordmogelijkheden. Elk individu wordt gevraagd deze vragen te beantwoorden naar eigen persoonlijke mening of visie. Na het invullen van deze specifieke vragen betreffende de ervaringen van het individu, volgt een kwalitatieve bevraging door één of meerdere van de projectmedewerkers. Deze kwalitatieve bevraging, aan de hand van een interview, heeft als doel meer specifieke informatie te verzamelen omtrent de ervaringen 3

4 van elk individu. Hierbij krijgt ieder individu de mogelijkheid om toe te lichten waarom ze voor een bepaalde antwoordoptie gekozen hebben. Gegevens die door de persona worden aangereikt tijdens deze bevraging worden genoteerd en bijgehouden door de projectmedewerkers. AANREIKEN VAN VERSCHILLENDE BESTAANDE SERIOUS GAMES Het belangrijkste onderdeel van de user test betreft het aanreiken van verschillende bestaande Serious Games. Elk individu binnen de user groep zal worden gevraagd om afzonderlijk 3 Serious Games te spelen die beschikbaar zijn via het internet. Aan de hand van het spelen van deze games wordt getracht na te gaan wat de ervaringen van de user groep zijn omtrent het spelen van deze games. Hierbij wordt vertrokken vanuit het oogpunt welke besturingsmechanismen, instructies, graphics, perspectieven, scenario s, omgevingen,, als meest aantrekkelijk worden beschouwd. Deze gegevens zijn cruciaal voor de ontwikkeling van de Serious Game voor de uiteindelijke doelgroep van het project, zodat deze zo nauw mogelijk aansluit bij de capaciteiten en leefwereld van deze groep. Tijdens de user test zullen 3 Serious Games worden aangeboden die onderling van elkaar verschillen op basis van de in vorige alinea omschreven aspecten. Dit betreft volgende games, namelijk : S E V E S O Doel van deze game : Aan de hand van deze Serious Game tracht men aan te tonen welke stappen men dient te ondernemen indien er zich een industrieel ongeval voordoet en een giftige rook in de omgeving vrijkomt. 4

5 L U D O M E D I C Doel van deze game : Men tracht aan de hand van deze Serious Game jonge patiëntjes beter te laten begrijpen wat hun ziekte inhoud en hoe men de ziekte tegemoet gaat. Deze game wordt ook gebruikt als methodiek om de dokters te helpen bij het uitleggen van de ziekte en behandeling aan hun patiënten (en diens ouders). P I N G Doel van deze game : 5

6 Dit betreft een Online Serious Game die voornamelijk wordt gebruikt in secundaire scholen. Deze game tracht een basis te bieden om met leerlingen van de 2de en 3de graad secundair onderwijs een gesprek aan te gaan over armoede en wat het betekent om arm te zijn. De speler kruipt in de huid van Jim of Sofia, die door omstandigheden op straat belanden en hun eigen weg moeten vinden. OBSER VATI E TI JDENS HET SP ELEN V AN DE GAMES Tijdens het spelen van de afzonderlijke Serious Games zal elk individu worden bijgestaan door één of meerdere projectmedewerkers. Zij hebben hierbij als voornaamste functie, het individu te observeren tijdens het spelen van elke game afzonderlijk. Uit het oogpunt dat elke observator bij elk individu dezelfde aspecten in kaart brengt, werd een observatielijst opgesteld. Deze lijst is voor elke game afzonderlijk beschikbaar in bijlage 1 op pagina s 3, 5 en 7. Gegevens verzameld aan de hand van deze observaties zullen na het spelen van de games teruggekoppeld worden naar het individu. Dit gebeurt aan de hand van een kwalitatief interview, waarbij het individu de ruimte krijgt bepaalde gedragingen en reacties tijdens het spelen van de games toe te lichten. VR AGENLI JST O MTRENT D E S ERI OUS GAMES Telkens wanneer het individu binnen de user groep één van de games voltooid heeft, zal worden gevraagd een korte kwantitatieve vragenlijst in te vullen omtrent de net voltooide game. Deze vragen polsen naar de user experience van het individu betreffende het spelen van de game. De vragen werden geselecteerd uit de gevalideerde CEGEQ (Core Elements Of the Gaming Experience Questionnaire). Aan de hand van deze vragen zullen 5 aspecten omtrent de ervaring met games in kaart gebracht worden. Deze verschillende aspecten worden bevraagd aan de hand van specifieke items die worden weergegeven in bijlage 1 pagina s 4, 6 en 8. Volgende aspecten worden in kaart gebracht : - Controle : De mate waarin de speler over voldoende controle beschikte tijdens het spelen van de game. Of werden ze belemmerd tijdens het spelen van de game door aan de game gerelateerde elementen? Vragen : 1, 3, 4 en 5 - Plezier : De mate waarin de speler plezier beleefde aan het spelen van de game. Vragen : 2 - Mogelijkheden : De mate waarin de game aansluit bij de leefwereld van de speler. Vragen : 6, 7, 8 en 9 - Ownership De mate waarin de speler zich persoonlijk betrokken voelde tijdens het spelen van de game. Vragen : 10 en 11 - Game Play De mate waarin de game op zich als aantrekkelijk beschouwd werd door de speler. Vragen : 12, 13, 14, 15 en 16 Deze verschillende vragen worden ingevuld aan de hand van een likert schaal met 7 antwoordmogelijkheden. Hierbij dient het individu telkens aan te duiden in welke mate men het al dan niet eens is met bepaalde uitspraken omtrent de game. De items van deze vragenlijst krijgen een score van 1 tot en met 7, in 6

7 overeenstemming met het nummer op de schaal die aangeduid werd bij het item. Items die vertrekken vanuit een negatieve vraagstelling, namelijk items 9, 12 en 15 worden omgescoord. Hierbij vertrekt men van een score 8 waarvan men het getal aftrekt in overeenstemming met de schaal die men aangeduid heeft bij desbetreffende items. De uiteindelijke scores kunnen zowel kwalitatief als kwantitatief gebruikt worden. Opmerkelijke scores op items kunnen teruggekoppeld worden naar het individu tijdens het kwalitatieve interview na het spelen van alle games. Daarnaast kunnen de individuele scores vergeleken worden met verschillende normtabellen op basis van geslacht en leeftijd. Hierbij kan worden nagegaan of ze de voltooide game al dan niet positief beoordelen. BEVRAGING VAN DE ERVARINGEN MET DE GESPEE LDE GAMES Een laatste luik binnen de user test betreft de bevraging van het individu omtrent de ervaringen met de net voltooide games. Deze bevraging heeft als doel na te gaan welke games het meest aantrekkelijk gevonden worden op basis van afzonderlijke aspecten zoals, perspectief, besturingsmechanisme, graphics, instructies,. Hiervoor werden 6 afzonderlijke vragen opgesteld met multiple choice antwoordmogelijkheden. Elk individu wordt gevraagd deze vragen te beantwoorden naar eigen persoonlijke mening of visie. Na het invullen van deze specifieke vragen betreffende de ervaringen van het individu, volgt een kwalitatieve bevraging door één of meerdere van de projectmedewerkers. Deze kwalitatieve bevraging, aan de hand van een interview, heeft als doel meer specifieke informatie te verzamelen omtrent de ervaringen van elk individu. Hierbij krijgt ieder individu de mogelijkheid om toe te lichten waarom ze voor een bepaalde antwoordoptie gekozen hebben. Daarnaast kan tijdens deze kwalitatieve bevraging dieper ingegaan worden op bemerkingen die voortvloeien uit de observaties en vragenlijsten omtrent de verschillende games. Gegevens die door de persona worden aangereikt tijdens deze bevraging worden genoteerd en bijgehouden door de projectmedewerkers. BIJLAGE : VRAGENLIJST SGGO PROJECT Zie pagina 8 7

8 Volgnr : Vragenlijst 2- SGGO Project Dit document bevat een aantal vragenlijsten betreffende de games die u zult spelen. Gelieve deze vragenlijst VOLLEDIG in te vullen naar uw Persoonlijke MENING. Op voorhand alvast hartelijk bedankt voor uw medewerking. Persoonlijke gegevens Geslacht : Man O Vrouw O Geboortedatum:../../.. (dag/maand/jaar) Moedertaal :. Beroep :. Intro: Ervaring met Games Vraag 1 Heb je thuis een computer? A B C nee ja, maar zonder internet ja, met internet Vraag 2 Vraag 3 Vraag 4 Vraag 5 Hoe vaak zit je achter de computer? (thuis /op het werk) A nooit, want ik heb thuis geen computer B nooit, maar ik heb thuis wel een computer C ongeveer ÈÈn keer per maand D ongeveer ÈÈn keer per week E (bijna) iedere dag Hoe vaak gebruik je de computer om informatie op internet te zoeken? (thuis /op het werk) A nooit B ongeveer ÈÈn keer per maand C ongeveer ÈÈn keer per week D (bijna) iedere dag Hoe vaak gebruik je de computer voor tekstverwerking? (thuis/op het werk) A nooit B ongeveer ÈÈn keer per maand C ongeveer ÈÈn keer per week D (bijna) iedere dag Heb je reeds een online-cursus gevolgd via het internet? A nee B ja (doorvragen via kwalitatief interview) 8

9 Vraag 6 Vraag 7 Vraag 8 Hoe vaak gebruik je de computer voor spelletjes of games? A nooit B ongeveer ÈÈn keer per maand C ongeveer ÈÈn keer per week D (bijna) iedere dag Hoe vaak speel je een casual-game? (vb. farmville, angry birds, ) A nooit B ongeveer ÈÈn keer per maand C ongeveer ÈÈn keer per week D (bijna) iedere dag E Ik begrijp de vraag niet Hoe vaak speel je een triple A game? (vb. Assassins Creed, FIFA, Half-life, ) A nooit B ongeveer ÈÈn keer per maand C ongeveer ÈÈn keer per week D (bijna) iedere dag E Ik begrijp de vraag niet Vraag 9 Hoe vaak speel je een MMO? (vb.wow, Guildwars, Eon,.. ) A nooit B ongeveer ÈÈn keer per maand C ongeveer ÈÈn keer per week D (bijna) iedere dag E Ik begrijp de vraag niet 9

10 Game 1a: Spelen van seveso game. Observatie. Observatie tijdens spelen van seveso game. 1 Zijn de instructies duidelijk voor de speler? Ja/nee 2 Neemt de speler voldoende tijd om de instructies door te nemen? Ja/nee 3 Begrijpt de speler wat hij moet doen? Ja/nee 4 Bestuurt de speler de avatar vlot tijdens het spelen? Ja/nee 5 Besteedt de speler tijd aan onnodige taken? Ja/nee. 6 Bereikt de speler de vooropgestelde doelen? Ja/nee doel 1: in huis gaan Ja/nee doel 2: ramen en deuren dicht Ja/nee doel 3: bericht luisteren Ja/nee 7 Ergert de speler zich tijdens het game? Ja/nee 8 Andere bemerkingen? 10

11 Game 1b: Kwalitatief interview seveso game. Wat vindt u van het Seveso game? (algemeen, niet sturen) Wat vindt u van de instructies? (specifiek omtrent de instructies) Wat vindt u van de spelervaring? (specifiek omtrent de spelervaring) 11

12 Game 1c: Kwantitatieve vragenlijst seveso game. Deze vragenlijst peilt naar uw ervaringen bij het spelen van het seveso game. Gelieve deze vragenlijst volledig in te vullen naar uw persoonlijke mening. UITSPRAAK Helemaal NIET NIET MEE EENS Eerder NIET Neutraal Eerder MEE EENS Helemaal De besturing van deze game werkte vlot. Ik zou de game nogmaals willen spelen. Ik had controle over de game. Het perspectief waaruit ik mijn personage bekeek was duidelijk. De opdrachten in de game waren duidelijk. De interface van de game was duidelijk. Ik vond de grafische stijl van de game mooi. Ik zou graag veel tijd spenderen aan het spelen van deze game. Ik verveelde me tijdens het spelen van de game. De game bleef me continu motiveren om verder te spelen. Ik had het gevoel dat wat gebeurde in de game door mijn eigen toedoen gebeurde. De game was oneerlijk. Ik verstond de regels van de game. De game was uitdagend. De game was te moeilijk. Het scenario in de game was interessant. Andere bemerkingen?

13 Game 2a: Spelen van Ludomedic game. Observatie. Observatie tijdens spelen van Ludomedic game. 1 Zijn de instructies duidelijk voor de speler? Ja/nee 2 Neemt de speler voldoende tijd om de instructies door te nemen Ja/nee 3 Begrijpt de speler wat hij moet doen? Ja/nee 4 Bestuurt de speler de avatar vlot tijdens het spelen? Ja/nee 5 Besteedt de speler tijd aan onnodige taken? Ja/nee. 6 Bereikt de speler de vooropgestelde doelen? Ja/nee doel 1: kaarten nemen in kast Ja/nee doel 2: bad nemen Ja/nee doel 3: naar gelijkvloers gaan Ja/nee 7 Ergert de speler zich tijdens het game? Ja/nee 8 Andere bemerkingen? 13

14 Game 2b: Kwalitatief interview Ludomedic game Wat vindt u van het Ludomedic game? (algemeen, niet sturen) Wat vindt u van de instructies? (specifiek omtrent de instructies) Wat vindt u van de spelervaring? (specifiek omtrent de spelervaring) 14

15 Game 2c: Kwantitatieve vragenlijst Ludomedic game. Deze vragenlijst peilt naar uw ervaringen bij het spelen van het Ludomedic game. Gelieve deze vragenlijst volledig in te vullen naar uw persoonlijke mening. UITSPRAAK Helemaal NIET NIET MEE EENS Eerder NIET Neutraal Eerder MEE EENS Helemaal De besturing van deze game werkte vlot. Ik zou de game nogmaals willen spelen. Ik had controle over de game. Het perspectief waaruit ik mijn personage bekeek was duidelijk. De opdrachten in de game waren duidelijk. De interface van de game was duidelijk. Ik vond de grafische stijl van de game mooi. Ik zou graag veel tijd spenderen aan het spelen van deze game. Ik verveelde me tijdens het spelen van de game. De game bleef me continu motiveren om verder te spelen. Ik had het gevoel dat wat gebeurde in de game door mijn eigen toedoen gebeurde. De game was oneerlijk. Ik verstond de regels van de game. De game was uitdagend. De game was te moeilijk. Het scenario in de game was interessant. Andere bemerkingen?

16 Game 3a: Spelen van Ping. Observatie. Observatie tijdens spelen van Ping game. 1 Zijn de instructies duidelijk voor de speler? Ja/nee 2 Neemt de speler voldoende tijd om de instructies door te nemen Ja/nee 3 Begrijpt de speler wat hij moet doen? Ja/nee.. 4 Bestuurt de speler de avatar vlot tijdens het spelen? Ja/nee 5 Besteedt de speler tijd aan onnodige taken? Ja/nee 6 Bereikt de speler de vooropgestelde doelen? Ja/nee doel 1: wandelen naar 1 ste contact Ja/nee doel 2: spreken met 1 ste contact Ja/nee doel 3: wandelen naar immo Ja/nee. 7 Ergert de speler zich tijdens het game? Ja/nee. 8 Andere bemerkingen? 16

17 Game 3b: Kwalitatief interview ping game. Wat vindt u van het Seveso game? (algemeen, niet sturen) Wat vindt u van de instructies? (specifiek omtrent de instructies) Wat vindt u van de spelervaring? (specifiek omtrent de spelervaring) 17

18 Game 3b: Kwantitatieve Vragenlijst Ping game. Deze vragenlijst peilt naar uw ervaringen bij het spelen van het Ping game. Gelieve deze vragenlijst volledig in te vullen naar uw persoonlijke mening. UITSPRAAK Helemaal NIET NIET MEE EENS Eerder NIET Neutraal Eerder MEE EENS Helemaal De besturing van deze game werkte vlot. Ik zou de game nogmaals willen spelen. Ik had controle over de game. Het perspectief waaruit ik mijn personage bekeek was duidelijk. De opdrachten in de game waren duidelijk. De interface van de game was duidelijk. Ik vond de grafische stijl van de game mooi. Ik zou graag veel tijd spenderen aan het spelen van deze game. Ik verveelde me tijdens het spelen van de game. De game bleef me continu motiveren om verder te spelen. Ik had het gevoel dat wat gebeurde in de game door mijn eigen toedoen gebeurde. De game was oneerlijk. Ik verstond de regels van de game. De game was uitdagend. De game was te moeilijk. Het scenario in de game was interessant. Andere bemerkingen?

19 Samenvatting. Wat zijn de ervaringen met games. Deze vragenlijst peilt naar uw ervaringen bij het spelen van de drie games. Gelieve deze vragenlijst volledig in te vullen naar uw persoonlijke mening. Vraag 1 Welk game geniet uw voorkeur naar perspectief? A 1ste game, seveso B 2de game, ludomedic C 3de game, ping Vraag 2 Welk game geniet uw voorkeur naar besturing? A 1ste game, seveso B 2de game, ludomedic C 3de game, ping Vraag 3 Welke game geniet uw voorkeur naar graphics? A 1 ste game, seveso B 2 de game, ludomedic C 3 de game, ping Vraag 4 Vraag 5 Welke game geniet uw voorkeur betreffende de weergave van instructies? A 1 ste game, Seveso B 2 de game, Ludomedic C 3 de game, ping Bracht 1 of meerdere van de games frustratie bij u naar boven? A Geen enkel van de games B 1 ste game, Seveso C 2 de game, Ludomedic D 3 de game, Ping Andere bemerkingen?.. 19

20 20