Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1

Transcriptie

1 Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 Vragenlijst afgenomen in het LISS panel Versie 2.0 datum April 2015 auteur M.IJ.C. [Maarten] Streefkerk T: E: M.IJ.C.Streefkerk@uvt.nl Postbus 90153, 5000 LE Tilburg Warandelaan 2, Gebouw T, 2e verdieping

2 CentERdata, Tilburg, 2015 Alle rechten voorbehouden. Niets uit deze uitgave mag worden verveelvoudigd, opgeslagen in een geautomatiseerd gegevensbestand, of openbaar gemaakt, in enige vorm of op enige wijze, hetzij elektronisch, mechanisch, door fotokopieën, opnamen of op enige andere manier, zonder voorafgaande schriftelijke toestemming van de uitgever.

3 Inhoudsopgave 1 Projectbeschrijving Inleiding Codeboek Descriptives Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 1/19

4 1 Projectbeschrijving Title: Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 Datafile: jq13a Funding sources: MESS Project Investigator: Christopher Antoun Project description: The purpose of this research is to investigate issues raised by mobile web surveys related to two error sources: non-response error and measurement error. Sample: Random selection from a pool of LISS panel members interested in smartphones research. Overview of the response: Selected number of household members 694 (100.0%) Non-response: 95 ( 13.7%) Response: 599 ( 86.3%) Complete: 589 ( 84.9%) Incomplete: 10 ( 1.4%) Date of data collection: October 2013 Titel: Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 Databestand: jq13a Financiering: MESS Project Onderzoeker: Christopher Antoun Projectbeschrijving: Het doel van dit project is om zaken te onderzoeken die naar voren komen bij mobiele webvragenlijsten, welke zijn gerelateerd aan twee soorten foutenbronnen: nonrespons fouten en meetfouten. Steekproef: Willekeurige selectie uit een pool van in smartphone onderzoek geïnteresseerde LISS panelleden. Responsoverzicht: Selectie aantal huishoudleden: 694 (100,0%) Nonrespons: 95 ( 13,7%) Respons: 599 ( 86,3%) Compleet: 589 ( 84,9%) Incompleet: 10 ( 1,4%) Datum van dataverzameling: oktober 2013 Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 2/19

5 2 Inleiding In oktober 2013 is in het LISS panel 1 de vragenlijst Mobiele vragenlijsten deel 2 invullen op een smartphone afgenomen. De vragenlijst is voorgelegd aan 694 panelleden en 589 respondenten vulden de vragenlijst volledig in (responspercentage 84,9%). Het onderzoek bestaat uit drie vragenlijsten, in september is bij een groep in smartphone onderzoek geïnteresseerde panelleden een baseline vragenlijst afgenomen. In oktober is de helft van deze groep gevraagd een mobiele versie van een vragenlijst op een smartphone in te vullen. De andere helft vulde de vragenlijst in op een PC (geen tablet). Panelleden zonder smartphone kregen er een in bruikleen. In december wordt dezelfde vragenlijst afgenomen, dan wordt de andere helft gevraagd de vragenlijst mobiel in te vullen. 1 Verwijzing naar LISS panel data in tekst: This paper makes use of data of the LISS (Longitudinal Internet Studies for the Social sciences) panel administered by CentERdata (Tilburg University, The Netherlands). Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 3/19

6 3 Codeboek Dit codeboek bevat de vragenlijst zoals deze in het LISS panel is afgenomen. De variabelennamen worden vet weergegeven en corresponderen met de namen in de dataset. De routing van de vragenlijst wordt bij de desbetreffende variabele cursief weergegeven. open: antwoordvak; geen limiet aan lengte van het antwoord string: antwoordvak waarbij een maximum aantal karakters kan worden ingevoerd (standaard 255) empty: vraag kan onbeantwoord gelaten worden De range waarbinnen de respondent een antwoord kon geven bij numerieke variabelen is cursief afgebeeld in het codeboek wanneer deze niet zichtbaar was voor de respondent. Wanneer geen grenzen waren gesteld aan de range waarbinnen een antwoord kon vallen, staat dit in het codeboek weergegeven als integer. De zogenoemde fills (variabele tekst) worden tussen rechte haken [] weergegeven. Variabelen tussen accolades {} maken geen deel uit van de dataset, maar de bijbehorende vragen of teksten waren wel onderdeel van de vragenlijst. nomem_encr 2 Nummer van lid huishouden versleuteld jq13a_m Jaar en maand van de veldwerkperiode ingelezen variabele jq13a001 In welke groep is men ingedeeld? 3 1 groep A - PC 2 groep B - eigen smartphone 3 groep C - PC 4 groep D - leensmartphone ingelezen variabele jq13a002 Welk type smartphone gebruikt men? 1 leensmartphone (Samsung Galaxy Gio, Android) 2 Android (eigen smartphone) 3 iphone (eigen smartphone) 2 Gebruik nomem_encr als key variable bij het mergen van de data met die van andere LISS panel studies uit het LISS Panel Data Archive: 3 Groepen A en C komen niet voor in deze data. Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 4/19

7 random variable {jq13a003 - jq13a012} 4 Permutatievariabelen om volgorde van antwoordalternatieven jq13a033 te randomiseren. jq13a003 Op welke plaats werd de eerste antwoordmogelijkheid aangeboden? jq13a004 Op welke plaats werd de tweede antwoordmogelijkheid aangeboden? jq13a005 Op welke plaats werd de derde antwoordmogelijkheid aangeboden? jq13a006 Op welke plaats werd de vierde antwoordmogelijkheid aangeboden? jq13a007 Op welke plaats werd de vijfde antwoordmogelijkheid aangeboden? jq13a008 Op welke plaats werd de zesde antwoordmogelijkheid aangeboden? jq13a009 Op welke plaats werd de zevende antwoordmogelijkheid aangeboden? jq13a010 Op welke plaats werd de achtste antwoordmogelijkheid aangeboden? jq13a011 Op welke plaats werd de negende antwoordmogelijkheid aangeboden? jq13a012 Op welke plaats werd de tiende antwoordmogelijkheid aangeboden? 1 op plaats 1 aangeboden 2 op plaats 2 aangeboden 3 op plaats 3 aangeboden 4 op plaats 4 aangeboden 5 op plaats 5 aangeboden 6 op plaats 6 aangeboden 7 op plaats 7 aangeboden 8 op plaats 8 aangeboden 9 op plaats 9 aangeboden 10 op plaats 10 aangeboden 4 Door een fout zijn in de mobiele versie de alternatieven niet gepermuteerd. Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 5/19

8 random variable {jq13a013 jq13a022} 5 Permutatievariabelen om volgorde van antwoordalternatieven jq13a036 te randomiseren. jq13a013 Op welke plaats werd de eerste antwoordmogelijkheid aangeboden? jq13a014 Op welke plaats werd de tweede antwoordmogelijkheid aangeboden? jq13a015 Op welke plaats werd de derde antwoordmogelijkheid aangeboden? jq13a016 Op welke plaats werd de vierde antwoordmogelijkheid aangeboden? jq13a017 Op welke plaats werd de vijfde antwoordmogelijkheid aangeboden? jq13a018 Op welke plaats werd de zesde antwoordmogelijkheid aangeboden? jq13a019 Op welke plaats werd de zevende antwoordmogelijkheid aangeboden? jq13a020 Op welke plaats werd de achtste antwoordmogelijkheid aangeboden? jq13a021 Op welke plaats werd de negende antwoordmogelijkheid aangeboden? jq13a022 Op welke plaats werd de tiende antwoordmogelijkheid aangeboden? 1 op plaats 1 aangeboden 2 op plaats 2 aangeboden 3 op plaats 3 aangeboden 4 op plaats 4 aangeboden 5 op plaats 5 aangeboden 6 op plaats 6 aangeboden 7 op plaats 7 aangeboden 8 op plaats 8 aangeboden 9 op plaats 9 aangeboden 10 op plaats 10 aangeboden {intro} Mobiele vragenlijsten - deel 2 - invullen op een smartphone U neemt deel aan onderzoek waarbij het mobiel invullen van vragenlijsten wordt onderzocht. Dit is de tweede vragenlijst van in totaal drie vragenlijsten waaruit dit onderzoek bestaat. De derde en tevens laatste vragenlijst volgt in december. U herkent deze vragenlijsten telkens aan "Mobiele vragenlijsten" in de naam. Vult u deze vragenlijst alstublieft op uw (leen)smartphone in. Dus niet op een PC of laptop maar ook niet op een tablet. 5 Door een fout zijn in de mobiele versie de alternatieven niet gepermuteerd. Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 6/19

9 jq13a023 jq13a026 We willen graag weten hoe tevreden u bent met verschillende aspecten in uw leven. jq13a023 Hoe tevreden bent u met uw sociale leven? jq13a024 Hoe tevreden bent u met uw gezinsleven? jq13a025 Hoe tevreden bent u met het tempo van uw leven? jq13a026 Hoe tevreden bent u over het gevoel van veiligheid in uw omgeving? 1 helemaal niet tevreden 2 niet echt tevreden 3 een beetje tevreden 4 zeer tevreden jq13a027 De volgende stellingen gaan over alledaagse activiteiten. Hoe vaak hebt u in de afgelopen 12 maanden in een restaurant gegeten? Aantal keer: jq13a028 Hoe vaak bent u in de afgelopen 12 maanden gaan winkelen? Aantal keer: jq13a029 Hoe vaak doet u gemiddeld per week aan beweging? 1 minder dan 1 keer per week 2 1 of 2 keer per week 3 3 keer per week 4 4 of meerdere keren per week jq13a030 - jq13a031 Hoeveel tijd besteedt u in totaal, op een gemiddelde doordeweekse dag, aan TV-kijken? Kijkt u nooit TV, vult u dan een nul in een van de hokjes in. jq13a030 uren per dag jq13a031 minuten per dag jq13a032 Hebt u ook hobby's? Zo ja, welke hobby's zijn dat dan? Zo nee, laat u het veld dan leeg. string, empty Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 7/19

10 De antwoordopties bij jq13a033werden in willekeurige volgorde op het scherm getoond. Deze volgorde werd bepaald door de random waardes jq13a003 t/m jq13a012. In de dataset hebben de labels bij jq13a033 voor alle respondenten dezelfde betekenis. {jq13a033} 6 De volgende 5 vragen gaan over eten en drinken. Wat is uw lievelingsfruit? 1 sinaasappels 2 grapefruits 3 appels 4 peren 5 bananen 6 druiven 7 aardbeien 8 blauwe bessen 9 mandarijnen 10 pruimen 11 geen van bovenstaand jq13a034 Wat is uw lievelingsgroente? 1 sperziebonen 2 broccoli 3 boerenkool 4 wortelen 5 spinazie 6 anders, namelijk... if (jq13a034 = 6) jq13a035 Vult u hier uw lievelingsgroente in. string, empty 6 Door een fout zijn in de mobiele versie de alternatieven niet gepermuteerd. Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 8/19

11 De antwoordopties bij jq13a036 werden in willekeurige volgorde op het scherm getoond. Deze volgorde werd bepaald door de random waardes jq13a013 t/m jq13a022 In de dataset hebben de labels bij jq13a036 voor alle respondenten dezelfde betekenis. {jq13a036} 7 Welke van de volgende voedingsstoffen vindt u het belangrijkste bij uw keuze voor een bepaald soort ontbijtgranen? 1 eiwitten 2 koolhydraten 3 suiker 4 vet 5 vezels 6 vitamine A 7 vitamine C 8 calcium 9 ijzer 10 vitamine E 11 geen van bovenstaand jq13a037 Denkt u aan de afgelopen 30 dagen Op hoeveel van deze dagen hebt u 5 of meer alcoholische dranken bij een en dezelfde gelegenheid gedronken? Aantal dagen: jq13a038 Hebt u ooit in uw leven onder invloed van alcohol (hoe weinig ook) een auto (of ander gemotoriseerd voertuig) bestuurd? 1 ja 2 nee 7 Door een fout zijn in de mobiele versie de alternatieven niet gepermuteerd. Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 9/19

12 jq13a039 - jq13a044 We willen u nu graag wat vragen stellen over de gevoelens die u hebt bij bepaalde publieke personen en politieke partijen. Geeft u alstublieft aan hoe positief of negatief uw gevoelens zijn ten opzichte van de onderstaande personen en partijen. U doet dit door een score te geven van 0 tot en met 100. Hierbij geldt: 0 = heel negatief 100 = heel positief Hoe positief of negatief zijn uw gevoelens ten opzichte van... jq13a039 Mark Rutte jq13a040 Jan Peter Balkenende jq13a041 Christen Democratisch Appèl (CDA) jq13a042 Volkspartij voor Vrijheid en Democratie (VVD) jq13a043 De huidige president van Amerika; Barack Obama jq13a044 Oud-president van Amerika; George W. Bush jq13a045 Mensen uit allerlei verschillende landen vestigen zich in Nederland. Bent u van mening dat door immigratie, Nederland een fijner of juist minder fijn land is geworden om te wonen? Geeft u alstublieft een cijfer van 1 tot 10. Hierbij geldt: 1 = veel minder fijn 10 = veel fijner jq13a046 De volgende vragen gaan over technologie. Hoe tevreden bent u over het algemeen met [if jq13a001=1 or 3: de PC die u het vaakst gebruikt / if jq13a001=2: de smartphone die u het meest gebruikt / if jq13a001=4: de leensmartphone die u van ons in bruikleen hebt gekregen]? Geeft u alstublieft een cijfer van 1 tot 10. Hierbij geldt: 1 = helemaal niet tevreden 10 = heel erg tevreden Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 10/19

13 jq13a047 Met welk apparaat gaat u het liefst "online"? 1 met een mobiele telefoon / smartphone 2 met de computer 3 met een tablet jq13a048 - jq13a052 Geef voor elk van onderstaande woorden aan hoe goed deze [if jq13a001=1 or 3: de PC die u het vaakst gebruikt / if jq13a001=2: de smartphone die u het meest gebruikt / if jq13a001=4: de leensmartphone die u van ons in bruikleen hebt gekregen] beschrijft. Geeft u alstublieft een cijfer van 1 tot 10. Hierbij geldt: 0 = helemaal niet 10 = helemaal wel jq13a048 Nuttig jq13a049 Vriendelijk jq13a050 Krachtig jq13a051 Plezierig jq13a052 Betrouwbaar Respondenten konden hun leeftijd aangeven door een balletje van links naar rechts over een balk te bewegen. jq13a053 Hoe oud bent u? Om antwoord te geven versleept u het balletje naar, bij benadering, uw leeftijd. De schaal loopt van 1 naar 100. U kunt ook ergens op de balk tikken Drie wielen / rollen werden getoond, een voor de dag, de maand en het jaar. jq13a054 Wat is uw geboortedatum? Klikt u rechts op het rondje om de "datumkiezer" te openen. U ziet drie rollen, een voor de dag, een voor de maand en een voor het jaar. Met een vinger pakt u de eerste rol en sleept deze naar de juiste dag, doet u dit ook voor de maand en het jaar. Hierna klikt u op opslaan Wij stellen u deze vraag om uw antwoord met onze bestaande gegevens te vergelijken. string, empty Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 11/19

14 jq13a055 Nu volgt een aantal raadsels, probeert u deze zo goed mogelijk op te lossen. Een tafeltennisbatje en een balletje kosten samen 1,10. Het batje kost 1,00 meer dan het balletje. Hoeveel kost het balletje? Aantal centen: jq13a056 Wanneer het vijf machines vijf minuten kost om vijf apparaten te maken, hoe lang zal het dan 100 machines kosten om 100 apparaten te maken? Aantal minuten: jq13a057 In een meer is een gedeelte bedekt met waterlelies. Elke dag wordt dit stuk twee keer zo groot. Als het 48 dagen duurt voordat het hele meer bedekt is met waterlelies, hoe lang duurt het dan voordat het halve meer bedekt is? Aantal dagen: jq13a058 Tot slot willen we u vragen hoe u het invullen van deze vragenlijst hebt ervaren. Op welk apparaat hebt u deze vragenlijst ingevuld? 1 laptop computer 2 desktop computer 3 mobiele telefoon / smartphone jq13a059 - jq13a063 Waar hebt u deze vragenlijst ingevuld? Meerdere antwoorden mogelijk. jq13a059 thuis jq13a060 op het werk, niet thuis jq13a061 binnen, niet thuis of op het werk jq13a062 onderweg jq13a063 buiten, niet thuis of op het werk 0 nee 1 ja jq13a064 Hebt u tijdens het invullen van deze vragenlijst rondgelopen? 1 ja 2 nee, ik was de gehele tijd op dezelfde plek Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 12/19

15 jq13a065 Bent u de hele tijd alleen geweest tijdens het invullen van de vragenlijst? 1 ja 2 nee jq13a066 Ongeveer hoeveel andere dingen hebt u gedaan tijdens het invullen van deze vragenlijst? Denkt u hierbij aan TV-kijken, eten, drinken, of uw checken of meer jq13a067 Was er ergens een moment tijdens het invullen van de vragenlijst dat u afgeleid werd door dingen die om u heen gebeurden? 1 ja 2 nee jq13a068 Als u mocht kiezen, op welk apparaat zou u dan voortaan het liefst vragenlijsten invullen? 1 laptop computer / desktop computer 2 mobiele telefoon / smartphone 3 tablet De vragen werden los op een pagina aangeboden. jq13a069 - jq13a073 NB: Maakt u alstublieft de vragenlijst af totdat u weer bij het beginscherm komt. Pas dan registreert het systeem de vragenlijst als volledig ingevuld. Tot slot. Wat vond u van deze vragenlijst: 1 = beslist niet 5 = beslist wel jq13a069 Vond u het moeilijk om de vragen te beantwoorden? jq13a070 Vond u de vragen duidelijk? jq13a071 Heeft de vragenlijst u aan het denken gezet? jq13a072 Vond u het onderwerp interessant? jq13a073 Vond u het plezierig om de vragen in te vullen? Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 13/19

16 jq13a074 Datum begin vragenlijst string jq13a075 Tijd begin vragenlijst string jq13a076 Datum einde vragenlijst string jq13a077 Tijd einde vragenlijst string Berekende variabele jq13a078 Duur vragenlijst in seconden integer Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 14/19

17 4 Descriptives N Minimum Maximum Mean Std. Deviation nomem_encr Nummer van lid huishouden versleuteld jq13a_m Jaar en maand van de veldwerkperiode jq13a001 In welke groep is men ingedeeld? jq13a002 Welk type smartphone gebruikt men? jq13a023 Hoe tevreden bent u met uw sociale leven? jq13a024 Hoe tevreden bent u met uw gezinsleven? jq13a025 Hoe tevreden bent u met het tempo van uw leven? jq13a026 Hoe tevreden bent u over het gevoel van veiligheid in uw omgeving? jq13a027 Hoe vaak hebt u in de afgelopen 12 maanden in een restaurant gegeten? jq13a028 Hoe vaak bent u in de afgelopen 12 maanden gaan winkelen? jq13a029 Hoe vaak doet u gemiddeld per week aan beweging? jq13a030 Hoeveel tijd besteedt u aan TV-kijken? - uren per dag jq13a031 Hoeveel tijd besteedt u aan TV-kijken? - minuten per dag jq13a034 Wat is uw lievelingsgroente? Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 15/19

18 jq13a037 Op hoeveel van de afgelopen 30 dagen 5 of meer alcoholische dranken gedronken? jq13a038 Hebt u ooit onder invloed van alcohol een auto (of ander gemotoriseerd voertuig) bestuurd? jq13a039 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Mark Rutte jq13a040 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Jan Peter Balkenende jq13a041 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Christen Democratisch Appèl (CDA) jq13a042 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Volkspartij voor Vrijheid en Democratie (VVD) jq13a043 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Huidige president van Amerika; Barack Obama jq13a044 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Oudpresident van Amerika; George W. Bush jq13a045 Bent u van mening dat door immigratie, Nederland een fijner of juist minder fijn land is geworden om te wonen? Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 16/19

19 jq13a046 Hoe tevreden bent u met de PC / de smartphone die u het meest gebruikt / de leensmartphone? jq13a047 Met welk apparaat gaat u het liefst "online"? jq13a048 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Nuttig jq13a049 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Vriendelijk jq13a050 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Krachtig jq13a051 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Plezierig jq13a052 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Betrouwbaar jq13a053 Hoe oud bent u? slider jq13a055 Raadsel 1 - een tafeltennisbatje en een balletje jq13a056 Raadsel 2 - vijf machines vijf minuten vijf apparaten Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 17/19

20 jq13a057 Raadsel 3 - een meer bedekt met waterlelies jq13a058 Op welk apparaat hebt u deze vragenlijst ingevuld? jq13a059 Waar hebt u deze vragenlijst ingevuld? - thuis jq13a060 Waar hebt u deze vragenlijst ingevuld? - op het werk, niet thuis jq13a061 Waar hebt u deze vragenlijst ingevuld? - binnen, niet thuis of op het werk jq13a062 Waar hebt u deze vragenlijst ingevuld? - onderweg jq13a063 Waar hebt u deze vragenlijst ingevuld? - buiten, niet thuis of op het werk jq13a064 Hebt u tijdens het invullen van deze vragenlijst rondgelopen? jq13a065 Bent u de hele tijd alleen geweest tijdens het invullen van de vragenlijst? jq13a066 Hoeveel andere dingen hebt u gedaan tijdens het invullen van deze vragenlijst? jq13a067 Werd u tijdens het invullen van de vragenlijst afgeleid door dingen die om u heen gebeurden? jq13a068 Als u mocht kiezen, op welk apparaat zou u dan voortaan het liefst vragenlijsten invullen? Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 18/19

21 jq13a069 Vond u het moeilijk om de vragen te beantwoorden? jq13a070 Vond u de vragen duidelijk? jq13a071 Heeft de vragenlijst u aan het denken gezet? jq13a072 Vond u het onderwerp interessant? jq13a073 Vond u het plezierig om de vragen in te vullen? jq13a075 Tijd begin :26:10 23:53:04 16:06:34 04:12: vragenlijst jq13a077 Tijd einde :01:31 23:59:37 16:17:50 04:26: vragenlijst jq13a078 Duur vragenlijst in seconden Valid N (listwise) 369 Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 1 19/19