Non-response and Measurement Error in Mobile Web Surveys - PC wave 2

Transcriptie

1 Non-response and Measurement Error in Mobile Web Surveys - PC wave 2 Vragenlijst afgenomen in het LISS panel Versie 1.0 datum Maart 2014 auteur M.IJ.C. [Maarten] Streefkerk T: E: M.IJ.C.Streefkerk@uvt.nl Postbus 90153, 5000 LE Tilburg Warandelaan 2, Gebouw T, 2e verdieping

2 CentERdata, Tilburg, 2014 Alle rechten voorbehouden. Niets uit deze uitgave mag worden verveelvoudigd, opgeslagen in een geautomatiseerd gegevensbestand, of openbaar gemaakt, in enige vorm of op enige wijze, hetzij elektronisch, mechanisch, door fotokopieën, opnamen of op enige andere manier, zonder voorafgaande schriftelijke toestemming van de uitgever.

3 Inhoudsopgave 1 Projectbeschrijving Inleiding Codeboek Descriptives Non-response and Measurement Error in Mobile Web Surveys PC wave 2 1/21

4 1 Projectbeschrijving Title: Non-response and Measurement Error in Mobile Web Surveys - PC wave 2 Datafile: jr13b Funding sources: MESS Project Investigator: Christopher Antoun Project description: The purpose of this research is to investigate issues raised by mobile Web surveys related to two error sources: nonresponse error and measurement error. Sample: Random selection from a pool of LISS panel members interested in smartphones research. Overview of the response: Selected number of household members 693 (100.0%) Non-response: 131 ( 18.9%) Response: 562 ( 81.1%) Complete: 559 ( 80.7%) Incomplete: 3 ( 0.4%) Date of data collection: December 2013 Titel: Non-response and Measurement Error in Mobile Web Surveys - PC wave 2 Databestand: jr13b Financiering: MESS Project Onderzoeker: Christopher Antoun Projectbeschrijving: Het doel van dit project is om zaken te onderzoeken die naar voren komen bij mobiele webvragenlijsten, welke zijn gerelateerd aan twee soorten foutenbronnen: nonrespons fouten en meetfouten. Steekproef: Willekeurige selectie uit een pool van in smartphone onderzoek geïnteresseerde LISS panelleden. Responsoverzicht: Selectie aantal huishoudleden: 693 (100,0%) Nonrespons: 131 ( 18,9%) Respons: 562 ( 81,1%) Compleet: 559 ( 80,7%) Incompleet: 3 ( 0,4%) Datum van dataverzameling: december 2013 Non-response and Measurement Error in Mobile Web Surveys PC wave 2 2/21

5 2 Inleiding In december 2013 is in het LISS panel 1 de vragenlijst Mobiele vragenlijsten deel 3 invullen op een PC afgenomen. De vragenlijst is voorgelegd aan 693 panelleden en 562 respondenten vulden de vragenlijst volledig in (responspercentage 81,1%). Het onderzoek bestaat uit drie vragenlijsten, in september is bij een groep in smartphone onderzoek geïnteresseerde panelleden een baseline vragenlijst afgenomen. In oktober is de helft van deze groep gevraagd een mobiele versie van een vragenlijst op een smartphone in te vullen. De andere helft vulde de vragenlijst in op een PC (geen tablet). Panelleden zonder smartphone kregen er een in bruikleen. In december is dezelfde vragenlijst afgenomen. Deelnemers die in oktober de vragenlijst op de mobiel hadden ingevuld is gevraagd deze op een PC in te vullen. 1 Verwijzing naar LISS panel data in tekst: This paper makes use of data of the LISS (Longitudinal Internet Studies for the Social sciences) panel administered by CentERdata (Tilburg University, The Netherlands). Non-response and Measurement Error in Mobile Web Surveys PC wave 2 3/21

6 3 Codeboek Dit codeboek bevat de vragenlijst zoals deze in het LISS panel is afgenomen. De variabelennamen worden vet weergegeven en corresponderen met de namen in de dataset. De routing van de vragenlijst wordt bij de desbetreffende variabele cursief weergegeven. open: antwoordvak; geen limiet aan lengte van het antwoord string: antwoordvak waarbij een maximum aantal karakters kan worden ingevoerd (standaard 255) empty: vraag kan onbeantwoord gelaten worden De range waarbinnen de respondent een antwoord kon geven bij numerieke variabelen is cursief afgebeeld in het codeboek wanneer deze niet zichtbaar was voor de respondent. Wanneer geen grenzen waren gesteld aan de range waarbinnen een antwoord kon vallen, staat dit in het codeboek weergegeven als integer. De zogenoemde fills (variabele tekst) worden tussen rechte haken [] weergegeven. Variabelen tussen accolades {} maken geen deel uit van de dataset, maar de bijbehorende vragen of teksten waren wel onderdeel van de vragenlijst. nomem_encr 2 Nummer van lid huishouden versleuteld jr13b_m Jaar en maand van de veldwerkperiode ingelezen variabele jr13b001 In welke groep is men ingedeeld? 3 1 groep A - eigen smartphone 2 groep B - PC 3 groep C - leensmartphone 4 groep D - PC ingelezen variabele jr13b002 Welk type smartphone gebruikt men? 1 leensmartphone (Samsung Galaxy Gio, Android) 2 Android (eigen smartphone) 3 iphone (eigen smartphone) 2 Gebruik nomem_encr als key variable bij het mergen van de data met die van andere LISS panel studies uit het LISS Panel Data Archive: 3 Groepen B en D komen niet voor in deze data. Non-response and Measurement Error in Mobile Web Surveys PC wave 2 4/21

7 random variabele jr13b003 - jr13b012 Permutatievariabelen om volgorde van antwoordalternatieven jr13b033 te randomiseren. jr13b003 Op welke plaats werd de eerste jr13b004 Op welke plaats werd de tweede jr13b005 Op welke plaats werd de derde jr13b006 Op welke plaats werd de vierde jr13b007 Op welke plaats werd de vijfde jr13b008 Op welke plaats werd de zesde jr13b009 Op welke plaats werd de zevende jr13b010 Op welke plaats werd de achtste jr13b011 Op welke plaats werd de negende jr13b012 Op welke plaats werd de tiende 1 op plaats 1 aangeboden 2 op plaats 2 aangeboden 3 op plaats 3 aangeboden 4 op plaats 4 aangeboden 5 op plaats 5 aangeboden 6 op plaats 6 aangeboden 7 op plaats 7 aangeboden 8 op plaats 8 aangeboden 9 op plaats 9 aangeboden 10 op plaats 10 aangeboden Non-response and Measurement Error in Mobile Web Surveys PC wave 2 5/21

8 random variabele jr13b013 - jr13b022 Permutatievariabelen om volgorde van antwoordalternatieven jr13b036 te randomiseren. jr13b013 Op welke plaats werd de eerste jr13b014 Op welke plaats werd de tweede jr13b015 Op welke plaats werd de derde jr13b016 Op welke plaats werd de vierde jr13b017 Op welke plaats werd de vijfde jr13b018 Op welke plaats werd de zesde jr13b019 Op welke plaats werd de zevende jr13b020 Op welke plaats werd de achtste jr13b021 Op welke plaats werd de negende jr13b022 Op welke plaats werd de tiende 1 op plaats 1 aangeboden 2 op plaats 2 aangeboden 3 op plaats 3 aangeboden 4 op plaats 4 aangeboden 5 op plaats 5 aangeboden 6 op plaats 6 aangeboden 7 op plaats 7 aangeboden 8 op plaats 8 aangeboden 9 op plaats 9 aangeboden 10 op plaats 10 aangeboden Non-response and Measurement Error in Mobile Web Surveys PC wave 2 6/21

9 {intro} Mobiele vragenlijsten - deel 3 - invullen op een PC U neemt deel aan onderzoek waarbij het mobiel invullen van vragenlijsten wordt onderzocht. Dit is de derde en tevens laatste vragenlijst van in totaal drie vragenlijsten waaruit dit onderzoek bestaat. Vult u deze vragenlijst alstublieft op uw PC / laptop in. Dus niet op een smartphone maar ook niet op een tablet. jr13b023 jr13b026 We willen graag weten hoe tevreden u bent met verschillende aspecten in uw leven. jr13b023 Hoe tevreden bent u met uw sociale leven? jr13b024 Hoe tevreden bent u met uw gezinsleven? jr13b025 Hoe tevreden bent u met het tempo van uw leven? jr13b026 Hoe tevreden bent u over het gevoel van veiligheid in uw omgeving? 1 helemaal niet tevreden 2 niet echt tevreden 3 een beetje tevreden 4 zeer tevreden jr13b027 De volgende stellingen gaan over alledaagse activiteiten. Hoe vaak hebt u in de afgelopen 12 maanden in een restaurant gegeten? Aantal keer: jr13b028 Hoe vaak bent u in de afgelopen 12 maanden gaan winkelen? Aantal keer: jr13b029 Hoe vaak doet u gemiddeld per week aan beweging? 1 minder dan 1 keer per week 2 1 of 2 keer per week 3 3 keer per week 4 4 of meerdere keren per week Non-response and Measurement Error in Mobile Web Surveys PC wave 2 7/21

10 jr13b030 - jr13b031 Hoeveel tijd besteedt u in totaal, op een gemiddelde doordeweekse dag, aan TV-kijken? jr13b030 uren per dag jr13b031 minuten per dag jr13b032 Hebt u ook hobby's? Zo ja, welke hobby's zijn dat dan? Zo nee, laat u het veld dan leeg. string, empty De antwoordopties bij jr13b033 werden in willekeurige volgorde op het scherm getoond. Deze volgorde werd bepaald door de random waardes jr13b003 t/m jr13b012. In de dataset hebben de labels bij jr13b033 voor alle respondenten dezelfde betekenis. jr13b033 De volgende 5 vragen gaan over eten en drinken. Wat is uw lievelingsfruit? 1 sinaasappels 2 grapefruits 3 appels 4 peren 5 bananen 6 druiven 7 aardbeien 8 blauwe bessen 9 mandarijnen 10 pruimen 11 geen van bovenstaand jr13b034 Wat is uw lievelingsgroente? 1 sperziebonen 2 broccoli 3 boerenkool 4 wortelen 5 spinazie 6 anders, namelijk... if (jr13b034 = 6) jr13b035 string Non-response and Measurement Error in Mobile Web Surveys PC wave 2 8/21

11 De antwoordopties bij jr13b036 werden in willekeurige volgorde op het scherm getoond. Deze volgorde werd bepaald door de random waardes jr13b013 t/m jr13b022. In de dataset hebben de labels bij jr13b036 voor alle respondenten dezelfde betekenis. jr13b036 Welke van de volgende voedingsstoffen vindt u het belangrijkste bij uw keuze voor een bepaald soort ontbijtgranen? 1 eiwitten 2 koolhydraten 3 suiker 4 vet 5 vezels 6 vitamine A 7 vitamine C 8 calcium 9 ijzer 10 vitamine E 11 geen van bovenstaand jr13b037 Denkt u aan de afgelopen 30 dagen Op hoeveel van deze dagen hebt u 5 of meer alcoholische dranken bij een en dezelfde gelegenheid gedronken? Aantal dagen: jr13b038 Hebt u ooit in uw leven onder invloed van alcohol (hoe weinig ook) een auto (of ander gemotoriseerd voertuig) bestuurd? 1 ja 2 nee Non-response and Measurement Error in Mobile Web Surveys PC wave 2 9/21

12 jr13b039 - jr13b044 We willen u nu graag wat vragen stellen over de gevoelens die u hebt bij bepaalde publieke personen en politieke partijen. Geeft u alstublieft aan hoe positief of negatief uw gevoelens zijn ten opzichte van de onderstaande personen en partijen. U doet dit door een score te geven van 0 tot en met 100. Hierbij geldt: 0 = heel negatief 100 = heel positief Hoe positief of negatief zijn uw gevoelens ten opzichte van... jr13b039 Mark Rutte jr13b040 Jan Peter Balkenende jr13b041 Christen Democratisch Appèl (CDA) jr13b042 Volkspartij voor Vrijheid en Democratie (VVD) jr13b043 De huidige president van Amerika; Barack Obama jr13b044 Oud-president van Amerika; George W. Bush jr13b045 Mensen uit allerlei verschillende landen vestigen zich in Nederland. Bent u van mening dat door immigratie, Nederland een fijner of juist minder fijn land is geworden om te wonen? Geeft u alstublieft een cijfer van 1 tot 10. Hierbij geldt: 1 = veel minder fijn 10 = veel fijner jr13b046 De volgende vragen gaan over technologie. Hoe tevreden bent u over het algemeen met [if jr13b001=1 or 3: de PC die u het vaakst gebruikt / if jr13b001=2: de smartphone die u het meest gebruikt / if jr13b001=4: de leensmartphone die u van ons in bruikleen hebt gekregen]? Geeft u alstublieft een cijfer van 1 tot 10. Hierbij geldt: 1 = helemaal niet tevreden 10 = heel erg tevreden Non-response and Measurement Error in Mobile Web Surveys PC wave 2 10/21

13 jr13b047 Met welk apparaat gaat u het liefst "online"? 1 met een mobiele telefoon / smartphone 2 met de computer 3 met een tablet jr13b048 - jr13b052 Geef voor elk van onderstaande woorden aan hoe goed deze [if jr13b001=1 or 3: de PC die u het vaakst gebruikt / if jr13b001=2: de smartphone die u het meest gebruikt / if jr13b001=4: de leensmartphone die u van ons in bruikleen hebt gekregen] beschrijft. Geeft u alstublieft een cijfer van 1 tot 10. Hierbij geldt: 0 = helemaal niet 10 = helemaal wel jr13b048 Nuttig jr13b049 Vriendelijk jr13b050 Krachtig jr13b051 Plezierig jr13b052 Betrouwbaar Respondenten konden hun leeftijd aangeven door met de cursor een blokje van links naar rechts over een balk te bewegen. jr13b053 Hoe oud bent u? Om antwoord te geven versleept u het zwarte vlakje naar, bij benadering, uw leeftijd. De schaal loopt van 1 naar 100 jaar. U kunt ook ergens op de balk klikken Non-response and Measurement Error in Mobile Web Surveys PC wave 2 11/21

14 jr13b054 - jr13b056 werden als dropdown menu getoond. jr13b054 - jr13b056 Wat is uw geboortedatum? Wij stellen u deze vraag om uw antwoord met onze bestaande gegevens te vergelijken. jr13b054 Dag jr13b055 Maand 1 januari 2 februari 3 maart 4 april 5 mei 6 juni 7 juli 8 augustus 9 september 10 oktober 11 november 12 december jr13b056 Jaar jr13b057 Nu volgt een aantal raadsels, probeert u deze zo goed mogelijk op te lossen. Een tafeltennisbatje en een balletje kosten samen 1,10. Het batje kost 1,00 meer dan het balletje. Hoeveel kost het balletje? Aantal centen: jr13b058 Wanneer het vijf machines vijf minuten kost om vijf apparaten te maken, hoe lang zal het dan 100 machines kosten om 100 apparaten te maken? Aantal minuten: jr13b059 In een meer is een gedeelte bedekt met waterlelies. Elke dag wordt dit stuk twee keer zo groot. Als het 48 dagen duurt voordat het hele meer bedekt is met waterlelies, hoe lang duurt het dan voordat het halve meer bedekt is? Aantal dagen: Non-response and Measurement Error in Mobile Web Surveys PC wave 2 12/21

15 jr13b060 Tot slot willen we u vragen hoe u het invullen van deze vragenlijst hebt ervaren. Op welk apparaat hebt u deze vragenlijst ingevuld? 1 laptop computer 2 desktop computer 3 mobiele telefoon / smartphone jr13b061 - jr13b065 Waar hebt u deze vragenlijst ingevuld? Meerdere antwoorden mogelijk. jr13b061 thuis jr13b062 op het werk, niet thuis jr13b063 binnen, niet thuis of op het werk jr13b064 onderweg jr13b065 buiten, niet thuis of op het werk 0 Nee 1 Ja jr13b066 Hebt u tijdens het invullen van deze vragenlijst rondgelopen? 1 ja 2 nee, ik was de gehele tijd op dezelfde plek jr13b067 Bent u de hele tijd alleen geweest tijdens het invullen van de vragenlijst? 1 ja 2 nee jr13b068 Ongeveer hoeveel andere dingen hebt u gedaan tijdens het invullen van deze vragenlijst? Denkt u hierbij aan TV-kijken, eten, drinken, of uw checken of meer jr13b069 Was er ergens een moment tijdens het invullen van de vragenlijst dat u afgeleid werd door dingen die om u heen gebeurden? 1 ja 2 nee Non-response and Measurement Error in Mobile Web Surveys PC wave 2 13/21

16 jr13b070 Als u mocht kiezen, op welk apparaat zou u dan voortaan het liefst vragenlijsten invullen? 1 laptop computer / desktop computer 2 mobiele telefoon / smartphone 3 tablet jr13b071 - jr13b075 NB: Maakt u alstublieft de vragenlijst af totdat u weer bij het beginscherm komt. Pas dan registreert het systeem de vragenlijst als volledig ingevuld. Tot slot. Wat vond u van deze vragenlijst: 1 = beslist niet 5 = beslist wel jr13b071 Vond u het moeilijk om de vragen te beantwoorden? jr13b072 Vond u de vragen duidelijk? jr13b073 Heeft de vragenlijst u aan het denken gezet? jr13b074 Vond u het onderwerp interessant? jr13b075 Vond u het plezierig om de vragen in te vullen? beslist wel jr13b076 Datum begin vragenlijst string jr13b077 Tijd begin vragenlijst string jr13b078 Datum einde vragenlijst string jr13b079 Tijd einde vragenlijst string Berekende variabele jr13b080 Duur vragenlijst in seconden integer Non-response and Measurement Error in Mobile Web Surveys PC wave 2 14/21

17 4 Descriptives N Minimum Maximum Mean Std. Deviation nomem_encr Nummer van lid huishouden versleuteld jr13b_m Jaar en maand van de veldwerkperiode jr13b001 In welke groep is men ingedeeld? jr13b002 Welk type smartphone gebruikt men? jr13b003 Op welke plaats werd de eerste jr13b004 Op welke plaats werd de tweede jr13b005 Op welke plaats werd de derde jr13b006 Op welke plaats werd de vierde jr13b007 Op welke plaats werd de vijfde jr13b008 Op welke plaats werd de zesde jr13b009 Op welke plaats werd de zevende jr13b010 Op welke plaats werd de achtste Non-response and Measurement Error in Mobile Web Surveys PC wave 2 15/21

18 jr13b011 Op welke plaats werd de negende jr13b012 Op welke plaats werd de tiende jr13b013 Op welke plaats werd de eerste jr13b014 Op welke plaats werd de tweede jr13b015 Op welke plaats werd de derde jr13b016 Op welke plaats werd de vierde jr13b017 Op welke plaats werd de vijfde jr13b018 Op welke plaats werd de zesde jr13b019 Op welke plaats werd de zevende jr13b020 Op welke plaats werd de achtste jr13b021 Op welke plaats werd de negende Non-response and Measurement Error in Mobile Web Surveys PC wave 2 16/21

19 jr13b022 Op welke plaats werd de tiende jr13b023 Hoe tevreden bent u met uw sociale leven? jr13b024 Hoe tevreden bent u met uw gezinsleven? jr13b025 Hoe tevreden bent u met het tempo van uw leven? jr13b026 Hoe tevreden bent u over het gevoel van veiligheid in uw omgeving? jr13b027 Hoe vaak hebt u in de afgelopen 12 maanden in een restaurant gegeten? jr13b028 Hoe vaak bent u in de afgelopen 12 maanden gaan winkelen? jr13b029 Hoe vaak doet u gemiddeld per week aan beweging? jr13b030 Hoeveel tijd besteedt u aan TV-kijken? - uren per dag jr13b031 Hoeveel tijd besteedt u aan TV-kijken? - minuten per dag jr13b033 Wat is uw lievelingsfruit? jr13b034 Wat is uw lievelingsgroente? jr13b036 Welke voedingsstoffen vindt u het belangrijkste bij uw keuze voor een soort ontbijtgranen? jr13b037 Op hoeveel van de afgelopen 30 dagen 5 of Non-response and Measurement Error in Mobile Web Surveys PC wave 2 17/21

20 meer alcoholische dranken gedronken? jr13b038 Hebt u ooit onder invloed van alcohol een auto (of ander gemotoriseerd voertuig) bestuurd? jr13b039 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Mark Rutte jr13b040 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Jan Peter Balkenende jr13b041 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Christen Democratisch Appèl (CDA) jr13b042 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Volkspartij voor Vrijheid en Democratie (VVD) jr13b043 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Huidige president van Amerika; Barack Obama jr13b044 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Oudpresident van Amerika; George W. Bush jr13b045 Bent u van mening dat door immigratie, Nederland een fijner of juist minder fijn land is geworden om te wonen? jr13b046 Hoe tevreden bent u met de PC / de Non-response and Measurement Error in Mobile Web Surveys PC wave 2 18/21

21 smartphone die u het meest gebruikt / de leensmartphone? jr13b047 Met welk apparaat gaat u het liefst "online"? jr13b048 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Nuttig jr13b049 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Vriendelijk jr13b050 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Krachtig jr13b051 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Plezierig jr13b052 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Betrouwbaar jr13b054 Wat is uw geboortedatum? - dag jr13b055 Wat is uw geboortedatum? - maand jr13b056 Wat is uw geboortedatum? - jaar jr13b057 Raadsel 1 - een tafeltennisbatje en een balletje jr13b058 Raadsel 2 - vijf machines vijf minuten vijf Non-response and Measurement Error in Mobile Web Surveys PC wave 2 19/21

22 apparaten jr13b059 Raadsel 3 - een meer bedekt met waterlelies jr13b060 Op welk apparaat hebt u deze vragenlijst ingevuld? jr13b061 Waar hebt u deze vragenlijst ingevuld? - thuis jr13b062 Waar hebt u deze vragenlijst ingevuld? - op het werk, niet thuis jr13b063 Waar hebt u deze vragenlijst ingevuld? - binnen, niet thuis of op het werk jr13b064 Waar hebt u deze vragenlijst ingevuld? - onderweg jr13b065 Waar hebt u deze vragenlijst ingevuld? - buiten, niet thuis of op het werk jr13b066 Hebt u tijdens het invullen van deze vragenlijst rondgelopen? jr13b067 Bent u de hele tijd alleen geweest tijdens het invullen van de vragenlijst? jr13b068 Hoeveel andere dingen hebt u gedaan tijdens het invullen van deze vragenlijst? jr13b069 Werd u tijdens het invullen van de vragenlijst afgeleid door dingen die om u heen gebeurden? jr13b070 Als u mocht kiezen, op welk apparaat zou u dan voortaan het liefst vragenlijsten invullen? jr13b071 Vond u het moeilijk om de vragen te Non-response and Measurement Error in Mobile Web Surveys PC wave 2 20/21

23 beantwoorden? jr13b072 Vond u de vragen duidelijk? jr13b073 Heeft de vragenlijst u aan het denken gezet? jr13b074 Vond u het onderwerp interessant? jr13b075 Vond u het plezierig om de vragen in te vullen? jr13b077 Tijd begin :09:21 23:56:16 15:50:08 04:27: vragenlijst jr13b079 Tijd einde :01:01 23:53:31 15:56:34 04:32: vragenlijst jr13b080 Duur vragenlijst in seconden Valid N (listwise) 372 Non-response and Measurement Error in Mobile Web Surveys PC wave 2 21/21