Non-response and Measurement Error in Mobile Web Surveys - PC wave 1

Transcriptie

1 Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 Vragenlijst afgenomen in het LISS panel Versie 1.0 datum Maart 2014 auteur M.IJ.C. [Maarten] Streefkerk T: E: M.IJ.C.Streefkerk@uvt.nl Postbus 90153, 5000 LE Tilburg Warandelaan 2, Gebouw T, 2e verdieping

2 CentERdata, Tilburg, 2014 Alle rechten voorbehouden. Niets uit deze uitgave mag worden verveelvoudigd, opgeslagen in een geautomatiseerd gegevensbestand, of openbaar gemaakt, in enige vorm of op enige wijze, hetzij elektronisch, mechanisch, door fotokopieën, opnamen of op enige andere manier, zonder voorafgaande schriftelijke toestemming van de uitgever.

3 Inhoudsopgave 1 Projectbeschrijving Inleiding Codeboek Descriptives Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 1/21

4 1 Projectbeschrijving Title: Non-response and Measurement Error in Mobile Web Surveys PC wave 1 Datafile: jr13a Funding sources: MESS Project Investigator: Christopher Antoun Project description: The purpose of this research is to investigate issues raised by mobile Web surveys related to two error sources: nonresponse error and measurement error. Sample: Random selection from a pool of LISS panel members interested in smartphones research. Overview of the response: Selected number of household members 693 (100.0%) Non-response: 70 ( 10.1%) Response: 623 ( 89.9%) Complete: 618 ( 89.2%) Incomplete: 4 ( 0.7%) Date of data collection: October 2013 Titel: Non-response and Measurement Error in Mobile Web Surveys PC wave 1 Databestand: jr13a Financiering: MESS Project Onderzoeker: Christopher Antoun Projectbeschrijving: Het doel van dit project is om zaken te onderzoeken die naar voren komen bij mobiele webvragenlijsten, welke zijn gerelateerd aan twee soorten foutenbronnen: nonrespons fouten en meetfouten. Steekproef: Willekeurige selectie uit een pool van in smartphone onderzoek geïnteresseerde LISS panelleden. Responsoverzicht: Selectie aantal huishoudleden: 693 (100,0%) Nonrespons: 70 ( 10,1%) Respons: 623 ( 89,9%) Compleet: 618 ( 89,2%) Incompleet: 5 ( 0,7%) Datum van dataverzameling: oktober 2013 Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 2/21

5 2 Inleiding In oktober 2013 is in het LISS panel 1 de vragenlijst Mobiele vragenlijsten deel 2 invullen op een PC afgenomen. De vragenlijst is voorgelegd aan 693 panelleden en 618 respondenten vulden de vragenlijst volledig in (responspercentage 89,2%). Het onderzoek bestaat uit drie vragenlijsten, in september is bij een groep in smartphone onderzoek geïnteresseerde panelleden een baseline vragenlijst afgenomen. In oktober is de helft van deze groep gevraagd een mobiele versie van een vragenlijst op een smartphone in te vullen. De andere helft vulde de vragenlijst in op een PC (geen tablet). Panelleden zonder smartphone kregen er een in bruikleen. In december wordt dezelfde vragenlijst afgenomen, dan wordt de andere helft gevraagd de vragenlijst mobiel in te vullen. 1 Verwijzing naar LISS panel data in tekst: This paper makes use of data of the LISS (Longitudinal Internet Studies for the Social sciences) panel administered by CentERdata (Tilburg University, The Netherlands). Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 3/21

6 3 Codeboek Dit codeboek bevat de vragenlijst zoals deze in het LISS panel is afgenomen. De variabelennamen worden vet weergegeven en corresponderen met de namen in de dataset. De routing van de vragenlijst wordt bij de desbetreffende variabele cursief weergegeven. open: antwoordvak; geen limiet aan lengte van het antwoord string: antwoordvak waarbij een maximum aantal karakters kan worden ingevoerd (standaard 255) empty: vraag kan onbeantwoord gelaten worden De range waarbinnen de respondent een antwoord kon geven bij numerieke variabelen is cursief afgebeeld in het codeboek wanneer deze niet zichtbaar was voor de respondent. Wanneer geen grenzen waren gesteld aan de range waarbinnen een antwoord kon vallen, staat dit in het codeboek weergegeven als integer. De zogenoemde fills (variabele tekst) worden tussen rechte haken [] weergegeven. Variabelen tussen accolades {} maken geen deel uit van de dataset, maar de bijbehorende vragen of teksten waren wel onderdeel van de vragenlijst. nomem_encr 2 Nummer van lid huishouden versleuteld jr13a_m Jaar en maand van de veldwerkperiode ingelezen variabele jr13a001 In welke groep is men ingedeeld? 3 1 groep A - PC 2 groep B - eigen smartphone 3 groep C - PC 4 groep D - leensmartphone ingelezen variabele jr13a002 Welk type smartphone gebruikt men? 1 leensmartphone (Samsung Galaxy Gio, Android) 2 Android (eigen smartphone) 3 iphone (eigen smartphone) 2 Gebruik nomem_encr als key variable bij het mergen van de data met die van andere LISS panel studies uit het LISS Panel Data Archive: 3 Groepen B en D komen niet voor in deze data. Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 4/21

7 random variabele jr13a003 - jr13a012 Permutatievariabelen om volgorde van antwoordalternatieven jr13a033 te randomiseren. jr13a003 Op welke plaats werd de eerste jr13a004 Op welke plaats werd de tweede jr13a005 Op welke plaats werd de derde jr13a006 Op welke plaats werd de vierde jr13a007 Op welke plaats werd de vijfde jr13a008 Op welke plaats werd de zesde jr13a009 Op welke plaats werd de zevende jr13a010 Op welke plaats werd de achtste jr13a011 Op welke plaats werd de negende jr13a012 Op welke plaats werd de tiende 1 op plaats 1 aangeboden 2 op plaats 2 aangeboden 3 op plaats 3 aangeboden 4 op plaats 4 aangeboden 5 op plaats 5 aangeboden 6 op plaats 6 aangeboden 7 op plaats 7 aangeboden 8 op plaats 8 aangeboden 9 op plaats 9 aangeboden 10 op plaats 10 aangeboden Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 5/21

8 random variabele jr13a013 - jr13a022 Permutatievariabelen om volgorde van antwoordalternatieven jr13a036 te randomiseren. jr13a013 Op welke plaats werd de eerste jr13a014 Op welke plaats werd de tweede jr13a015 Op welke plaats werd de derde jr13a016 Op welke plaats werd de vierde jr13a017 Op welke plaats werd de vijfde jr13a018 Op welke plaats werd de zesde jr13a019 Op welke plaats werd de zevende jr13a020 Op welke plaats werd de achtste jr13a021 Op welke plaats werd de negende jr13a022 Op welke plaats werd de tiende 1 op plaats 1 aangeboden 2 op plaats 2 aangeboden 3 op plaats 3 aangeboden 4 op plaats 4 aangeboden 5 op plaats 5 aangeboden 6 op plaats 6 aangeboden 7 op plaats 7 aangeboden 8 op plaats 8 aangeboden 9 op plaats 9 aangeboden 10 op plaats 10 aangeboden Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 6/21

9 {intro} Mobiele vragenlijsten - deel 2 - invullen op een PC U neemt deel aan onderzoek waarbij het mobiel invullen van vragenlijsten wordt onderzocht. Dit is de tweede vragenlijst van in totaal drie vragenlijsten waaruit dit onderzoek bestaat. De derde en tevens laatste vragenlijst volgt in december. U herkent deze vragenlijsten telkens aan ""Mobiele vragenlijsten"" in de naam. Vult u deze vragenlijst alstublieft op uw PC / laptop in. Dus niet op een smartphone maar ook niet op een tablet. jr13a023 jr13a026 We willen graag weten hoe tevreden u bent met verschillende aspecten in uw leven. jr13a023 Hoe tevreden bent u met uw sociale leven? jr13a024 Hoe tevreden bent u met uw gezinsleven? jr13a025 Hoe tevreden bent u met het tempo van uw leven? jr13a026 Hoe tevreden bent u over het gevoel van veiligheid in uw omgeving? 1 helemaal niet tevreden 2 niet echt tevreden 3 een beetje tevreden 4 zeer tevreden jr13a027 De volgende stellingen gaan over alledaagse activiteiten. Hoe vaak hebt u in de afgelopen 12 maanden in een restaurant gegeten? Aantal keer: jr13a028 Hoe vaak bent u in de afgelopen 12 maanden gaan winkelen? Aantal keer: jr13a029 Hoe vaak doet u gemiddeld per week aan beweging? 1 minder dan 1 keer per week 2 1 of 2 keer per week 3 3 keer per week 4 4 of meerdere keren per week Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 7/21

10 jr13a030 - jr13a031 Hoeveel tijd besteedt u in totaal, op een gemiddelde doordeweekse dag, aan TV-kijken? jr13a030 uren per dag jr13a031 minuten per dag jr13a032 Hebt u ook hobby's? Zo ja, welke hobby's zijn dat dan? Zo nee, laat u het veld dan leeg. string, empty De antwoordopties bij jr13a033 werden in willekeurige volgorde op het scherm getoond. Deze volgorde werd bepaald door de random waardes jr13a003 t/m jr13a012. In de dataset hebben de labels bij jr13a033 voor alle respondenten dezelfde betekenis. jr13a033 De volgende 5 vragen gaan over eten en drinken. Wat is uw lievelingsfruit? 1 sinaasappels 2 grapefruits 3 appels 4 peren 5 bananen 6 druiven 7 aardbeien 8 blauwe bessen 9 mandarijnen 10 pruimen 11 geen van bovenstaand jr13a034 Wat is uw lievelingsgroente? 1 sperziebonen 2 broccoli 3 boerenkool 4 wortelen 5 spinazie 6 anders, namelijk... if (jr13a034 = 6) jr13a035 string Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 8/21

11 De antwoordopties bij jr13a036 werden in willekeurige volgorde op het scherm getoond. Deze volgorde werd bepaald door de random waardes jr13a013 t/m jr13a022. In de dataset hebben de labels bij jr13a036 voor alle respondenten dezelfde betekenis. jr13a036 Welke van de volgende voedingsstoffen vindt u het belangrijkste bij uw keuze voor een bepaald soort ontbijtgranen? 1 eiwitten 2 koolhydraten 3 suiker 4 vet 5 vezels 6 vitamine A 7 vitamine C 8 calcium 9 ijzer 10 vitamine E 11 geen van bovenstaand jr13a037 Denkt u aan de afgelopen 30 dagen Op hoeveel van deze dagen hebt u 5 of meer alcoholische dranken bij een en dezelfde gelegenheid gedronken? Aantal dagen: jr13a038 Hebt u ooit in uw leven onder invloed van alcohol (hoe weinig ook) een auto (of ander gemotoriseerd voertuig) bestuurd? 1 ja 2 nee Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 9/21

12 jr13a039 - jr13a044 We willen u nu graag wat vragen stellen over de gevoelens die u hebt bij bepaalde publieke personen en politieke partijen. Geeft u alstublieft aan hoe positief of negatief uw gevoelens zijn ten opzichte van de onderstaande personen en partijen. U doet dit door een score te geven van 0 tot en met 100. Hierbij geldt: 0 = heel negatief 100 = heel positief Hoe positief of negatief zijn uw gevoelens ten opzichte van... jr13a039 Mark Rutte jr13a040 Jan Peter Balkenende jr13a041 Christen Democratisch Appèl (CDA) jr13a042 Volkspartij voor Vrijheid en Democratie (VVD) jr13a043 De huidige president van Amerika; Barack Obama jr13a044 Oud-president van Amerika; George W. Bush jr13a045 Mensen uit allerlei verschillende landen vestigen zich in Nederland. Bent u van mening dat door immigratie, Nederland een fijner of juist minder fijn land is geworden om te wonen? Geeft u alstublieft een cijfer van 1 tot 10. Hierbij geldt: 1 = veel minder fijn 10 = veel fijner jr13a046 De volgende vragen gaan over technologie. Hoe tevreden bent u over het algemeen met [if jr13a001=1 or 3: de PC die u het vaakst gebruikt / if jr13a001=2: de smartphone die u het meest gebruikt / if jr13a001=4: de leensmartphone die u van ons in bruikleen hebt gekregen]? Geeft u alstublieft een cijfer van 1 tot 10. Hierbij geldt: 1 = helemaal niet tevreden 10 = heel erg tevreden Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 10/21

13 jr13a047 Met welk apparaat gaat u het liefst "online"? 1 met een mobiele telefoon / smartphone 2 met de computer 3 met een tablet jr13a048 - jr13a052 Geef voor elk van onderstaande woorden aan hoe goed deze [if jr13a001=1 or 3: de PC die u het vaakst gebruikt / if jr13a001=2: de smartphone die u het meest gebruikt / if jr13a001=4: de leensmartphone die u van ons in bruikleen hebt gekregen] beschrijft. Geeft u alstublieft een cijfer van 1 tot 10. Hierbij geldt: 0 = helemaal niet 10 = helemaal wel jr13a048 Nuttig jr13a049 Vriendelijk jr13a050 Krachtig jr13a051 Plezierig jr13a052 Betrouwbaar Respondenten konden hun leeftijd aangeven door met de cursor een blokje van links naar rechts over een balk te bewegen. jr13a053 Hoe oud bent u? Om antwoord te geven versleept u het zwarte vlakje naar, bij benadering, uw leeftijd. De schaal loopt van 1 naar 100 jaar. U kunt ook ergens op de balk klikken Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 11/21

14 jr13a054 - jr13a056 werden als dropdown menu getoond. jr13a054 - jr13a056 Wat is uw geboortedatum? Wij stellen u deze vraag om uw antwoord met onze bestaande gegevens te vergelijken. jr13a054 Dag jr13a055 Maand 1 januari 2 februari 3 maart 4 april 5 mei 6 juni 7 juli 8 augustus 9 september 10 oktober 11 november 12 december jr13a056 Jaar jr13a057 Nu volgt een aantal raadsels, probeert u deze zo goed mogelijk op te lossen. Een tafeltennisbatje en een balletje kosten samen 1,10. Het batje kost 1,00 meer dan het balletje. Hoeveel kost het balletje? Aantal centen: jr13a058 Wanneer het vijf machines vijf minuten kost om vijf apparaten te maken, hoe lang zal het dan 100 machines kosten om 100 apparaten te maken? Aantal minuten: jr13a059 In een meer is een gedeelte bedekt met waterlelies. Elke dag wordt dit stuk twee keer zo groot. Als het 48 dagen duurt voordat het hele meer bedekt is met waterlelies, hoe lang duurt het dan voordat het halve meer bedekt is? Aantal dagen: Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 12/21

15 jr13a060 Tot slot willen we u vragen hoe u het invullen van deze vragenlijst hebt ervaren. Op welk apparaat hebt u deze vragenlijst ingevuld? 1 laptop computer 2 desktop computer 3 mobiele telefoon / smartphone jr13a061 - jr13a065 Waar hebt u deze vragenlijst ingevuld? Meerdere antwoorden mogelijk. jr13a061 thuis jr13a062 op het werk, niet thuis jr13a063 binnen, niet thuis of op het werk jr13a064 onderweg jr13a065 buiten, niet thuis of op het werk 0 Nee 1 Ja jr13a066 Hebt u tijdens het invullen van deze vragenlijst rondgelopen? 1 ja 2 nee, ik was de gehele tijd op dezelfde plek jr13a067 Bent u de hele tijd alleen geweest tijdens het invullen van de vragenlijst? 1 ja 2 nee jr13a068 Ongeveer hoeveel andere dingen hebt u gedaan tijdens het invullen van deze vragenlijst? Denkt u hierbij aan TV-kijken, eten, drinken, of uw checken of meer jr13a069 Was er ergens een moment tijdens het invullen van de vragenlijst dat u afgeleid werd door dingen die om u heen gebeurden? 1 ja 2 nee Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 13/21

16 jr13a070 Als u mocht kiezen, op welk apparaat zou u dan voortaan het liefst vragenlijsten invullen? 1 laptop computer / desktop computer 2 mobiele telefoon / smartphone 3 tablet jr13a071 - jr13a075 NB: Maakt u alstublieft de vragenlijst af totdat u weer bij het beginscherm komt. Pas dan registreert het systeem de vragenlijst als volledig ingevuld. Tot slot. Wat vond u van deze vragenlijst: 1 = beslist niet 5 = beslist wel jr13a071 Vond u het moeilijk om de vragen te beantwoorden? jr13a072 Vond u de vragen duidelijk? jr13a073 Heeft de vragenlijst u aan het denken gezet? jr13a074 Vond u het onderwerp interessant? jr13a075 Vond u het plezierig om de vragen in te vullen? beslist wel jr13a076 Datum begin vragenlijst string jr13a077 Tijd begin vragenlijst string jr13a078 Datum einde vragenlijst string jr13a079 Tijd einde vragenlijst string Berekende variabele jr13a080 Duur vragenlijst in seconden integer Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 14/21

17 4 Descriptives N Minimum Maximum Mean Std. Deviation nomem_encr Nummer van lid huishouden versleuteld jr13a_m Jaar en maand van afname jr13a001 In welke groep is men ingedeeld? jr13a002 Welk type smartphone gebruikt men? jr13a003 Op welke plaats werd de eerste jr13a004 Op welke plaats werd de tweede jr13a005 Op welke plaats werd de derde jr13a006 Op welke plaats werd de vierde jr13a007 Op welke plaats werd de vijfde jr13a008 Op welke plaats werd de zesde jr13a009 Op welke plaats werd de zevende jr13a010 Op welke plaats werd de achtste Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 15/21

18 jr13a011 Op welke plaats werd de negende jr13a012 Op welke plaats werd de tiende jr13a013 Op welke plaats werd de eerste jr13a014 Op welke plaats werd de tweede jr13a015 Op welke plaats werd de derde jr13a016 Op welke plaats werd de vierde jr13a017 Op welke plaats werd de vijfde jr13a018 Op welke plaats werd de zesde jr13a019 Op welke plaats werd de zevende jr13a020 Op welke plaats werd de achtste jr13a021 Op welke plaats werd de negende Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 16/21

19 jr13a022 Op welke plaats werd de tiende jr13a023 Hoe tevreden bent u met uw sociale leven? jr13a024 Hoe tevreden bent u met uw gezinsleven? jr13a025 Hoe tevreden bent u met het tempo van uw leven? jr13a026 Hoe tevreden bent u over het gevoel van veiligheid in uw omgeving? jr13a027 Hoe vaak hebt u in de afgelopen 12 maanden in een restaurant gegeten? jr13a028 Hoe vaak bent u in de afgelopen 12 maanden gaan winkelen? jr13a029 Hoe vaak doet u gemiddeld per week aan beweging? jr13a030 Hoeveel tijd besteedt u aan TV-kijken? - uren per dag jr13a031 Hoeveel tijd besteedt u aan TV-kijken? - minuten per dag jr13a033 Wat is uw lievelingsfruit? jr13a034 Wat is uw lievelingsgroente? jr13a036 Welke voedingsstoffen vindt u het belangrijkste bij uw keuze voor een bepaald soort ontbijtgranen? jr13a037 Op hoeveel van de afgelopen 30 dagen 5 of Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 17/21

20 meer alcoholische dranken gedronken? jr13a038 Hebt u ooit onder invloed van alcohol een auto (of ander gemotoriseerd voertuig) bestuurd? jr13a039 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Mark Rutte jr13a040 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Jan Peter Balkenende jr13a041 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Christen Democratisch Appèl (CDA) jr13a042 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Volkspartij voor Vrijheid en Democratie (VVD) jr13a043 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Huidige president van Amerika; Barack Obama jr13a044 Hoe positief of negatief zijn uw gevoelens ten opzichte van... - Oudpresident van Amerika; George W. Bush jr13a045 Bent u van mening dat door immigratie, Nederland een fijner of juist minder fijn land is geworden om te wonen? jr13a046 Hoe tevreden bent u met de PC / de Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 18/21

21 smartphone die u het meest gebruikt / de leensmartphone? jr13a047 Met welk apparaat gaat u het liefst "online"? jr13a048 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Nuttig jr13a049 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Vriendelijk jr13a050 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Krachtig jr13a051 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Plezierig jr13a052 Hoe goed beschrijft het woord de PC / de smartphone die u het meest gebruikt / de leensmartphone? - Betrouwbaar jr13a053 Hoe oud bent u? slider jr13a054 Wat is uw geboortedatum? - dag jr13a055 Wat is uw geboortedatum? - maand jr13a056 Wat is uw geboortedatum? - jaar jr13a057 Raadsel 1 - een tafeltennisbatje en een balletje Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 19/21

22 jr13a058 Raadsel 2 - vijf machines vijf minuten vijf apparaten jr13a059 Raadsel 3 - een meer bedekt met waterlelies jr13a060 Op welk apparaat hebt u deze vragenlijst ingevuld? jr13a061 Waar hebt u deze vragenlijst ingevuld? - thuis jr13a062 Waar hebt u deze vragenlijst ingevuld? - op het werk, niet thuis jr13a063 Waar hebt u deze vragenlijst ingevuld? - binnen, niet thuis of op het werk jr13a064 Waar hebt u deze vragenlijst ingevuld? - onderweg jr13a065 Waar hebt u deze vragenlijst ingevuld? - buiten, niet thuis of op het werk jr13a066 Hebt u tijdens het invullen van deze vragenlijst rondgelopen? jr13a067 Bent u de hele tijd alleen geweest tijdens het invullen van de vragenlijst? jr13a068 Hoeveel andere dingen hebt u gedaan tijdens het invullen van deze vragenlijst? jr13a069 Werd u tijdens het invullen van de vragenlijst afgeleid door dingen die om u heen gebeurden? jr13a070 Als u mocht kiezen, op welk apparaat zou u dan voortaan het liefst vragenlijsten invullen? Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 20/21

23 jr13a071 Vond u het moeilijk om de vragen te beantwoorden? jr13a072 Vond u de vragen duidelijk? jr13a073 Heeft de vragenlijst u aan het denken gezet? jr13a074 Vond u het onderwerp interessant? jr13a075 Vond u het plezierig om de vragen in te vullen? jr13a077 Tijd begin :33:40 23:59:27 15:48:28 04:15: vragenlijst jr13a079 Tijd einde :00:45 23:43:07 15:54:19 04:25: vragenlijst jr13a080 Duur vragenlijst in seconden Valid N (listwise) 416 Non-response and Measurement Error in Mobile Web Surveys - PC wave 1 21/21