ALLES OVER ASSESSMENTS JANNEKE OOSTROM 1
MODERNE VS. TRADITIONELE INSTRUMENTEN 2 Expertisesessie SJT, Digitaal rollenspel, Gaming & Assessment
MODERNE VS. TRADITIONELE INSTRUMENTEN 3 Expertisesessie SJT, Digitaal rollenspel, Gaming & Assessment
INHOUD > Wat zijn de kenmerken van moderne instrumenten? > Wat meten we met de tests? > Wat voorspellen we met de tests? > Benadelen we bepaalde kandidaten? > Conclusies 4 Expertisesessie SJT, Digitaal rollenspel, Gaming & Assessment
KENMERKEN Realistisch Belangrijke aspecten van de baan worden nagebootst Gedrag uit het verleden is de beste voorspeller van toekomstig gedrag 5 Expertisesessie SJT, Digitaal rollenspel, Gaming & Assessment
KENMERKEN Antwoordformat meerkeuze (SJT) of open vragen (webcamtest, digitaal rollenspel) 6 Expertisesessie SJT, Digitaal rollenspel, Gaming & Assessment
KENMERKEN Scoringsmethoden SJTs: vergeleken met antwoorden referentiegroep (automatisch) Webcamtest/rollenspel: achteraf beoordeeld door experts 7 Expertisesessie SJT, Digitaal rollenspel, Gaming & Assessment
MODERN VS. TRADITIONEEL Standaardisatie vs realisme Mate van standaardisatie Papieren SJTs Multimedia SJTs Webcam tests Assessment centers Realisme van de test 8 Expertisesessie SJT, Digitaal rollenspel, Gaming & Assessment
WAT METEN WE DE TESTS? SJT review door Christian et al. (2010) Construct Percentage 1 Leiderschap 37.50% 2 Heterogeen 33.09% 3 Interpersoonlijke 12.50% vaardigheden 4 Persoonlijkheidstrekken 9.56% 5 Overig 7.35%
ALGEMENE KENNIS? 10 Expertisesessie SJT, Digitaal rollenspel, Gaming & Assessment
BELANG MODEL 11 Expertisesessie SJT, Digitaal rollenspel, Gaming & Assessment
WAT METEN WE MET DE TESTS? Moderator SJT: antwoordinstructie! Would do? Should do? Persoonlijkheid Cognitieve capaciteiten Begripsvaliditeit (attitudes vs. kennis) Sociaalwenselijk antwoorden Groepsverschillen
WAT VOORSPELLEN WE MET DE TESTS? Schmidt & Hunter, 1998
WAT VOORSPELLEN WE MET DE TESTS? Christian et al. (2010) Video-SJT (.47) betere voorspeller dan papieren SJT (.20) van interpersoonlijk gedrag Lievens et al. (2012) Webcamreacties betere voorspeller van trainingsprestatie politieagenten dan geschreven reacties Belang realisme!
BENADELEN WE BEPAALDE KANDIDATEN? Instrument D-waarden Amerika D-waarden Nederland Intelligentietests 1.00* 0.38 0.64** Persoonlijkheidsvragenlijsten -0.04 0.21* -0.21 0.23** Papieren SJT 0.40*? Multimedia SJT 0.31* 0.38** Webcamtest? 0.14*** * Ployhart & Holtz, 2008 ** De Meijer, Born, Van Zielst, Van der Molen, 2010 *** De Soete, Lievens, Oostrom, & Westerveld, 2014
BENADELEN WE BEPAALDE KANDIDATEN? Gulobovich & Ryan (2011):
BENADELEN WE BEPAALDE KANDIDATEN? Binnen SJTs (Whetzel & McDaniel, 2008): > Should do instructie d = 0.39 > Would do instructie d = 0.34 Binnen webcamtest (De Soete et al.): > Uitspreken d 0.10 > Uitschijven d 0.30 > Transcripten d 0.20
CONCLUSIES AC Multimedia SJT Webcamtest Afnamegemak Laag Hoog Hoog Realisme Hoog Gemiddeld-hoog Hoog Standaardisatie Laag-gemiddeld Hoog Gemiddeld-hoog Voorspellende waarde Relatief hoog Relatief hoog Relatief hoog Begripsvaliditeit Onduidelijk Algemene kennis Algemene kennis Reacties Positief Positief Positief Groepsverschillen Laag- gemiddeld Laag Laag Ontwikkelkosten Gemiddeld Hoog Hoog Afnamekosten Hoog Laag Gemiddeld 18 Expertisesessie SJT, Digitaal rollenspel, Gaming & Assessment
Bedankt voor de aandacht Contact: j.k.oostrom@vu.nl 19 Expertisesessie SJT, Digitaal rollenspel, Gaming & Assessment
STELLING 1 Zolang antwoorden nog niet automatisch gescoord worden, hebben deze instrumenten weinig toegevoegde waarde 20 Expertisesessie SJT, Digitaal rollenspel, Gaming & Assessment
STELLING 2 De instrumenten zijn meer geschikt voor werving, training, coaching dan voor selectie 21 Expertisesessie SJT, Digitaal rollenspel, Gaming & Assessment