Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2

Transcriptie

1 Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 Vragenlijst afgenomen in het LISS panel Versie 1.0 datum Maart 2014 auteur M.IJ.C. [Maarten] Streefkerk T: E: M.IJ.C.Streefkerk@uvt.nl Postbus 90153, 5000 LE Tilburg Warandelaan 2, Gebouw T, 2e verdieping

2 CentERdata, Tilburg, 2014 Alle rechten voorbehouden. Niets uit deze uitgave mag worden verveelvoudigd, opgeslagen in een geautomatiseerd gegevensbestand, of openbaar gemaakt, in enige vorm of op enige wijze, hetzij elektronisch, mechanisch, door fotokopieën, opnamen of op enige andere manier, zonder voorafgaande schriftelijke toestemming van de uitgever.

3 Inhoudsopgave 1 Projectbeschrijving Inleiding Codeboek Descriptives Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 1/21

4 1 Projectbeschrijving Title: Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 Datafile: jq13b Funding sources: MESS Project Investigator: Christopher Antoun Project description: The purpose of this research is to investigate issues raised by mobile web surveys related to two error sources: non-response error and measurement error. Sample: Random selection from a pool of LISS panel members interested in smartphones research. Overview of the response: Selected number of household members 689 (100.0%) Non-response: 106 ( 15.4%) Response: 583 ( 84.6%) Complete: 572 ( 83.0%) Incomplete: 11 ( 1.6%) Date of data collection: December 2013 Titel: Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 Databestand: jq13b Financiering: MESS Project Onderzoeker: Christopher Antoun Projectbeschrijving: Het doel van dit project is om zaken te onderzoeken die naar voren komen bij mobiele webvragenlijsten, welke zijn gerelateerd aan twee soorten foutenbronnen: nonrespons fouten en meetfouten. Steekproef: Willekeurige selectie uit een pool van in smartphone onderzoek geïnteresseerde LISS panelleden. Responsoverzicht: Selectie aantal huishoudleden: 689 (100,0%) Nonrespons: 106 ( 15,4%) Respons: 583 ( 84,6%) Compleet: 572 ( 83,0%) Incompleet: 11 ( 1,6%) Datum van dataverzameling: december 2013 Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 2/21

5 2 Inleiding In december 2013 is in het LISS panel 1 de vragenlijst Mobiele vragenlijsten deel 3 invullen op een smartphone afgenomen. De vragenlijst is voorgelegd aan 689 panelleden en 572 respondenten vulden de vragenlijst volledig in (responspercentage 83%). Het onderzoek bestaat uit drie vragenlijsten, in september is bij een groep in smartphone onderzoek geïnteresseerde panelleden een baseline vragenlijst afgenomen. In oktober is de helft van deze groep gevraagd een mobiele versie van een vragenlijst op een smartphone in te vullen. De andere helft vulde de vragenlijst in op een PC (geen tablet). Panelleden zonder smartphone kregen er een in bruikleen. In december is dezelfde vragenlijst afgenomen. Deelnemers die in oktober de vragenlijst op de PC hadden ingevuld is gevraagd deze op een mobiel in te vullen. 1 Verwijzing naar LISS panel data in tekst: This paper makes use of data of the LISS (Longitudinal Internet Studies for the Social sciences) panel administered by CentERdata (Tilburg University, The Netherlands). Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 3/21

6 3 Codeboek Dit codeboek bevat de vragenlijst zoals deze in het LISS panel is afgenomen. De variabelennamen worden vet weergegeven en corresponderen met de namen in de dataset. De routing van de vragenlijst wordt bij de desbetreffende variabele cursief weergegeven. open: antwoordvak; geen limiet aan lengte van het antwoord string: antwoordvak waarbij een maximum aantal karakters kan worden ingevoerd (standaard 255) empty: vraag kan onbeantwoord gelaten worden De range waarbinnen de respondent een antwoord kon geven bij numerieke variabelen is cursief afgebeeld in het codeboek wanneer deze niet zichtbaar was voor de respondent. Wanneer geen grenzen waren gesteld aan de range waarbinnen een antwoord kon vallen, staat dit in het codeboek weergegeven als integer. De zogenoemde fills (variabele tekst) worden tussen rechte haken [] weergegeven. Variabelen tussen accolades {} maken geen deel uit van de dataset, maar de bijbehorende vragen of teksten waren wel onderdeel van de vragenlijst. nomem_encr 2 Nummer van lid huishouden versleuteld jq13b_m Jaar en maand van de veldwerkperiode ingelezen variabele jq13b001 In welke groep is men ingedeeld? 3 1 groep A - eigen smartphone 2 groep B - PC 3 groep C - leensmartphone 4 groep D - PC ingelezen variabele jq13b002 Welk type smartphone gebruikt men? 1 leensmartphone (Samsung Galaxy Gio, Android) 2 Android (eigen smartphone) 3 iphone (eigen smartphone) 2 Gebruik nomem_encr als key variable bij het mergen van de data met die van andere LISS panel studies uit het LISS Panel Data Archive: 3 Groepen A en C komen niet voor in deze data. Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 4/21

7 random variable jq13b003 - jq13b012 Permutatievariabelen om volgorde van antwoordalternatieven jq13b033 te randomiseren. jq13b003 Op welke plaats werd de eerste jq13b004 Op welke plaats werd de tweede jq13b005 Op welke plaats werd de derde jq13b006 Op welke plaats werd de vierde jq13b007 Op welke plaats werd de vijfde jq13b008 Op welke plaats werd de zesde jq13b009 Op welke plaats werd de zevende jq13b010 Op welke plaats werd de achtste jq13b011 Op welke plaats werd de negende jq13b012 Op welke plaats werd de tiende 1 op plaats 1 aangeboden 2 op plaats 2 aangeboden 3 op plaats 3 aangeboden 4 op plaats 4 aangeboden 5 op plaats 5 aangeboden 6 op plaats 6 aangeboden 7 op plaats 7 aangeboden 8 op plaats 8 aangeboden 9 op plaats 9 aangeboden 10 op plaats 10 aangeboden Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 5/21

8 random variable jq13b013 - jq13b022 Permutatievariabelen om volgorde van antwoordalternatieven jq13b036 te randomiseren. jq13b013 Op welke plaats werd de eerste jq13b014 Op welke plaats werd de tweede jq13b015 Op welke plaats werd de derde jq13b016 Op welke plaats werd de vierde jq13b017 Op welke plaats werd de vijfde jq13b018 Op welke plaats werd de zesde jq13b019 Op welke plaats werd de zevende jq13b020 Op welke plaats werd de achtste jq13b021 Op welke plaats werd de negende jq13b022 Op welke plaats werd de tiende 1 op plaats 1 aangeboden 2 op plaats 2 aangeboden 3 op plaats 3 aangeboden 4 op plaats 4 aangeboden 5 op plaats 5 aangeboden 6 op plaats 6 aangeboden 7 op plaats 7 aangeboden 8 op plaats 8 aangeboden 9 op plaats 9 aangeboden 10 op plaats 10 aangeboden {intro} Mobiele vragenlijsten - deel 3 - invullen op een smartphone U neemt deel aan onderzoek waarbij het mobiel invullen van vragenlijsten wordt onderzocht. Dit is de derde en tevens laatste vragenlijst van in totaal drie vragenlijsten waaruit dit onderzoek bestaat. Vult u deze vragenlijst alstublieft op uw (leen)smartphone in. Dus niet op een PC of laptop maar ook niet op een tablet. Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 6/21

9 jq13b023 jq13b026 We willen graag weten hoe tevreden u bent met verschillende aspecten in uw leven. jq13b023hoe tevreden bent u met uw sociale leven? jq13b024hoe tevreden bent u met uw gezinsleven? jq13b025hoe tevreden bent u met het tempo van uw leven? jq13b026hoe tevreden bent u over het gevoel van veiligheid in uw omgeving? 1 helemaal niet tevreden 2 niet echt tevreden 3 een beetje tevreden 4 zeer tevreden jq13b027 De volgende stellingen gaan over alledaagse activiteiten. Hoe vaak hebt u in de afgelopen 12 maanden in een restaurant gegeten? Aantal keer: jq13b028 Hoe vaak bent u in de afgelopen 12 maanden gaan winkelen? Aantal keer: jq13b029 Hoe vaak doet u gemiddeld per week aan beweging? 1 minder dan 1 keer per week 2 1 of 2 keer per week 3 3 keer per week 4 4 of meerdere keren per week jq13b030 - jq13b031 Hoeveel tijd besteedt u in totaal, op een gemiddelde doordeweekse dag, aan TV-kijken? Kijkt u nooit TV, vult u dan een nul in een van de hokjes in. jq13b030 uren per dag jq13b031 minuten per dag jq13b032 Hebt u ook hobby's? Zo ja, welke hobby's zijn dat dan? Zo nee, laat u het veld dan leeg. string, empty Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 7/21

10 De antwoordopties bij jq13b033 werden in willekeurige volgorde op het scherm getoond. Deze volgorde werd bepaald door de random waardes jq13b003 t/m jq13b012. In de dataset hebben de labels bij jq13b033 voor alle respondenten dezelfde betekenis. jq13b033 De volgende 5 vragen gaan over eten en drinken. Wat is uw lievelingsfruit? 1 sinaasappels 2 grapefruits 3 appels 4 peren 5 bananen 6 druiven 7 aardbeien 8 blauwe bessen 9 mandarijnen 10 pruimen 11 geen van bovenstaand jq13b034 Wat is uw lievelingsgroente? 1 sperziebonen 2 broccoli 3 boerenkool 4 wortelen 5 spinazie 6 anders, namelijk... if (jq13b034 = 6) jq13b035 Vult u hier uw lievelingsgroente in. string, empty Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 8/21

11 De antwoordopties bij jq13b036 werden in willekeurige volgorde op het scherm getoond. Deze volgorde werd bepaald door de random waardes jq13b013 t/m jq13b022. In de dataset hebben de labels bij jq13b036 voor alle respondenten dezelfde betekenis. jq13b036 Welke van de volgende voedingsstoffen vindt u het belangrijkste bij uw keuze voor een bepaald soort ontbijtgranen? 1 eiwitten 2 koolhydraten 3 suiker 4 vet 5 vezels 6 vitamine A 7 vitamine C 8 calcium 9 ijzer 10 vitamine E 11 geen van bovenstaand jq13b037 Denkt u aan de afgelopen 30 dagen Op hoeveel van deze dagen hebt u 5 of meer alcoholische dranken bij een en dezelfde gelegenheid gedronken? Aantal dagen: jq13b038 Hebt u ooit in uw leven onder invloed van alcohol (hoe weinig ook) een auto (of ander gemotoriseerd voertuig) bestuurd? 1 ja 2 nee Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 9/21

12 jq13b039 - jq13b044 We willen u nu graag wat vragen stellen over de gevoelens die u hebt bij bepaalde publieke personen en politieke partijen. Geeft u alstublieft aan hoe positief of negatief uw gevoelens zijn ten opzichte van de onderstaande personen en partijen. U doet dit door een score te geven van 0 tot en met 100. Hierbij geldt: 0 = heel negatief 100 = heel positief Hoe positief of negatief zijn uw gevoelens ten opzichte van... jq13b039 Mark Rutte jq13b040 Jan Peter Balkenende jq13b041 Christen Democratisch Appèl (CDA) jq13b042 Volkspartij voor Vrijheid en Democratie (VVD) jq13b043 De huidige president van Amerika; Barack Obama jq13b044 Oud-president van Amerika; George W. Bush jq13b045 Mensen uit allerlei verschillende landen vestigen zich in Nederland. Bent u van mening dat door immigratie, Nederland een fijner of juist minder fijn land is geworden om te wonen? Geeft u alstublieft een cijfer van 1 tot 10. Hierbij geldt: 1 = veel minder fijn 10 = veel fijner jq13b046 De volgende vragen gaan over technologie. Hoe tevreden bent u over het algemeen met [if jq13b001 =1 or 3: de PC die u het vaakst gebruikt / if jq13b001 =2: de smartphone die u het meest gebruikt / if jq13b001 =4: de leensmartphone die u van ons in bruikleen hebt gekregen]? Geeft u alstublieft een cijfer van 1 tot 10. Hierbij geldt: 1 = helemaal niet tevreden 10 = heel erg tevreden Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 10/21

13 jq13b047 Met welk apparaat gaat u het liefst "online"? 1 met een mobiele telefoon / smartphone 2 met de computer 3 met een tablet jq13b048 - jq13b052 Geef voor elk van onderstaande woorden aan hoe goed deze [if jq13b001 =1 or 3: de PC die u het vaakst gebruikt / if jq13b001 =2: de smartphone die u het meest gebruikt / if jq13b001 =4: de leensmartphone die u van ons in bruikleen hebt gekregen] beschrijft. Geeft u alstublieft een cijfer van 1 tot 10. Hierbij geldt: 0 = helemaal niet 10 = helemaal wel jq13b048 Nuttig jq13b049 Vriendelijk jq13b050 Krachtig jq13b051 Plezierig jq13b052 Betrouwbaar Respondenten konden hun leeftijd aangeven door een balletje van links naar rechts over een balk te bewegen. jq13b053 Hoe oud bent u? Om antwoord te geven versleept u het balletje naar, bij benadering, uw leeftijd. De schaal loopt van 1 naar 100. U kunt ook ergens op de balk tikken Drie wielen / rollen werden getoond, een voor de dag, de maand en het jaar. jq13b054 Wat is uw geboortedatum? Klikt u rechts op het rondje om de "datumkiezer" te openen. U ziet drie rollen, een voor de dag, een voor de maand en een voor het jaar. Met een vinger pakt u de eerste rol en sleept deze naar de juiste dag, doet u dit ook voor de maand en het jaar. Hierna klikt u op opslaan Wij stellen u deze vraag om uw antwoord met onze bestaande gegevens te vergelijken. string, empty Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 11/21

14 jq13b055 Nu volgt een aantal raadsels, probeert u deze zo goed mogelijk op te lossen. Een tafeltennisbatje en een balletje kosten samen 1,10. Het batje kost 1,00 meer dan het balletje. Hoeveel kost het balletje? Aantal centen: jq13b056 Wanneer het vijf machines vijf minuten kost om vijf apparaten te maken, hoe lang zal het dan 100 machines kosten om 100 apparaten te maken? Aantal minuten: jq13b057 In een meer is een gedeelte bedekt met waterlelies. Elke dag wordt dit stuk twee keer zo groot. Als het 48 dagen duurt voordat het hele meer bedekt is met waterlelies, hoe lang duurt het dan voordat het halve meer bedekt is? Aantal dagen: jq13b058 Tot slot willen we u vragen hoe u het invullen van deze vragenlijst hebt ervaren. Op welk apparaat hebt u deze vragenlijst ingevuld? 1 laptop computer 2 desktop computer 3 mobiele telefoon / smartphone jq13b059 - jq13b063 Waar hebt u deze vragenlijst ingevuld? Meerdere antwoorden mogelijk. jq13b059 thuis jq13b060 op het werk, niet thuis jq13b061 binnen, niet thuis of op het werk jq13b062 onderweg jq13b063 buiten, niet thuis of op het werk 0 nee 1 ja jq13b064 Hebt u tijdens het invullen van deze vragenlijst rondgelopen? 1 ja 2 nee, ik was de gehele tijd op dezelfde plek Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 12/21

15 jq13b065 Bent u de hele tijd alleen geweest tijdens het invullen van de vragenlijst? 1 ja 2 nee jq13b066 Ongeveer hoeveel andere dingen hebt u gedaan tijdens het invullen van deze vragenlijst? Denkt u hierbij aan TV-kijken, eten, drinken, of uw checken of meer jq13b067 Was er ergens een moment tijdens het invullen van de vragenlijst dat u afgeleid werd door dingen die om u heen gebeurden? 1 ja 2 nee jq13b068 Als u mocht kiezen, op welk apparaat zou u dan voortaan het liefst vragenlijsten invullen? 1 laptop computer / desktop computer 2 mobiele telefoon / smartphone 3 tablet De vragen werden los op een pagina aangeboden. jq13b069 - jq13b073 NB: Maakt u alstublieft de vragenlijst af totdat u weer bij het beginscherm komt. Pas dan registreert het systeem de vragenlijst als volledig ingevuld. Tot slot. Wat vond u van deze vragenlijst: 1 = beslist niet 5 = beslist wel jq13b069 Vond u het moeilijk om de vragen te beantwoorden? jq13b070 Vond u de vragen duidelijk? jq13b071 Heeft de vragenlijst u aan het denken gezet? jq13b072 Vond u het onderwerp interessant? jq13b073 Vond u het plezierig om de vragen in te vullen? Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 13/21

16 jq13b074 Datum begin vragenlijst string jq13b075 Tijd begin vragenlijst string jq13b076 Datum einde vragenlijst string jq13b077 Tijd einde vragenlijst string Berekende variabele jq13b078 Duur vragenlijst in seconden integer Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 14/21

17 4 Descriptives N Minimum Maximum Mean Std. Deviation nomem_encr Nummer van lid huishouden versleuteld jq13b_m Jaar en maand van de veldwerkperiode jq13b001 In welke groep is men ingedeeld? jq13b002 Welk type smartphone gebruikt men? jq13b003 Op welke plaats werd de eerste jq13b004 Op welke plaats werd de tweede jq13b005 Op welke plaats werd de derde jq13b006 Op welke plaats werd de vierde jq13b007 Op welke plaats werd de vijfde jq13b008 Op welke plaats werd de zesde jq13b009 Op welke plaats werd de zevende Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 15/21

18 jq13b010 Op welke plaats werd de achtste jq13b011 Op welke plaats werd de negende jq13b012 Op welke plaats werd de tiende jq13b013 Op welke plaats werd de eerste jq13b014 Op welke plaats werd de tweede jq13b015 Op welke plaats werd de derde jq13b016 Op welke plaats werd de vierde jq13b017 Op welke plaats werd de vijfde jq13b018 Op welke plaats werd de zesde jq13b019 Op welke plaats werd de zevende Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 16/21

19 jq13b020 Op welke plaats werd de achtste jq13b021 Op welke plaats werd de negende jq13b022 Op welke plaats werd de tiende jq13b023 Hoe tevreden bent u met uw sociale leven? jq13b024 Hoe tevreden bent u met uw gezinsleven? jq13b025 Hoe tevreden bent u met het tempo van uw leven? jq13b026 Hoe tevreden bent u over het gevoel van veiligheid in uw omgeving? jq13b027 Hoe vaak hebt u in de afgelopen 12 maanden in een restaurant gegeten? jq13b028 Hoe vaak bent u in de afgelopen 12 maanden gaan winkelen? jq13b029 Hoe vaak doet u gemiddeld per week aan beweging? jq13b030 Hoeveel tijd besteedt u aan TV-kijken? - uren per dag jq13b031 Hoeveel tijd besteedt u aan TV-kijken? - minuten per dag jq13b033 Wat is uw lievelingsfruit? jq13b034 Wat is uw lievelingsgroente? Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 17/21

20 jq13b036 Welke voedingsstoffen vindt u het belangrijkste bij uw keuze voor een soort ontbijtgranen? jq13b037 Op hoeveel van de afgelopen 30 dagen 5 of meer alcoholische dranken gedronken? jq13b038 Hebt u ooit onder invloed van alcohol een auto (of ander gemotoriseerd voertuig) bestuurd? jq13b039 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Mark Rutte jq13b040 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Jan Peter Balkenende jq13b041 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Christen Democratisch Appèl (CDA) jq13b042 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Volkspartij voor Vrijheid en Democratie (VVD) jq13b043 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Huidige president van Amerika; Barack Obama jq13b044 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Oudpresident van Amerika; George W. Bush Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 18/21

21 jq13b045 Bent u van mening dat door immigratie, Nederland een fijner of juist minder fijn land is geworden om te wonen? jq13b046 Hoe tevreden bent u met de PC / de smartphone die u het meest gebruikt / de leensmartphone? jq13b047 Met welk apparaat gaat u het liefst "online"? jq13b048 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Nuttig jq13b049 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Vriendelijk jq13b050 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Krachtig jq13b051 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Plezierig jq13b052 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Betrouwbaar jq13b053 Hoe oud bent u? slider Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 19/21

22 jq13b055 Raadsel 1 - een tafeltennisbatje en een balletje jq13b056 Raadsel 2 - vijf machines vijf minuten vijf apparaten jq13b057 Raadsel 3 - een meer bedekt met waterlelies jq13b058 Op welk apparaat hebt u deze vragenlijst ingevuld? jq13b059 Waar hebt u deze vragenlijst ingevuld? - thuis jq13b060 Waar hebt u deze vragenlijst ingevuld? - op het werk, niet thuis jq13b061 Waar hebt u deze vragenlijst ingevuld? - binnen, niet thuis of op het werk jq13b062 Waar hebt u deze vragenlijst ingevuld? - onderweg jq13b063 Waar hebt u deze vragenlijst ingevuld? - buiten, niet thuis of op het werk jq13b064 Hebt u tijdens het invullen van deze vragenlijst rondgelopen? jq13b065 Bent u de hele tijd alleen geweest tijdens het invullen van de vragenlijst? jq13b066 Hoeveel andere dingen hebt u gedaan tijdens het invullen van deze vragenlijst? Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 20/21

23 jq13b067 Werd u tijdens het invullen van de vragenlijst afgeleid door dingen die om u heen gebeurden? jq13b068 Als u mocht kiezen, op welk apparaat zou u dan voortaan het liefst vragenlijsten invullen? jq13b069 Vond u het moeilijk om de vragen te beantwoorden? jq13b070 Vond u de vragen duidelijk? jq13b071 Heeft de vragenlijst u aan het denken gezet? jq13b072 Vond u het onderwerp interessant? jq13b073 Vond u het plezierig om de vragen in te vullen? jq13b075 Tijd begin :05:58 23:49:11 15:42:08 04:30: vragenlijst jq13b077 Tijd einde :04:07 23:57:57 16:01:07 04:41: vragenlijst jq13b078 Duur vragenlijst in seconden Valid N (listwise) 368 Non-response and Measurement Error in Mobile Web Surveys - Smartphone wave 2 21/21