Utforming av sp rsm l og svar i intervju- og sp rreskjema unders kelser

1. 1 Utforming av sp�rsm�l og svar i intervju- og sp�rreskjema unders�kelser SSB 20. mai 2010 Frode Berglund

2. 2 Hvilke forventninger har dere?

4. 4 �Utvalgstrekking er en vitenskap, � lage sp�rsm�l er en kunst!� �Vi er enn� ikke klare � og blir sannsynligvis aldri klare - for en altomfattende teori som kan forklare alle aspekter ved sp�rsm�l og svar i intervjuunders�kelser� Sudman, Bradburn og Schwarz (1996): Thinking about answers

5. 5 Det kognitive perspektivet p� sp�rsm�lsdesign Metode basert p� vitenskaper som kognitiv psykologi, sosial psykologi, sosiolingvistikk og analytisk filosofi Fra mekanisk hendelsesforl�p til komplisert kommunikasjonsprosess Respondentperspektivet p� svarprosessen

7. 7 Eksempel p� sp�rsm�l med faste svaralternativer Hender det at du selv blir utsatt for plaging eller ubehagelig erting av arbeidskamerater? Vil du si ja, en eller flere ganger i uken, ja, en eller flere ganger i m�neden eller nei?

8. 8 Elementer i et sp�rsm�l Intendert mening Oppgave M�lestokk Hender det at du selv blir utsatt for plaging eller ubehagelig erting av arbeidskamerater? Vil du si ja, en eller flere ganger i uken, ja, en eller flere ganger i m�neden eller nei?

9. 9 � lese/h�re et sp�rsm�l og gi et svar er en komplisert kognitiv prosess

10. Rent praktisk Sp�rsm�l b�r testes kvalitativt og kvantitativt for � kvalitetssikres Test � revisjon 1 � ny test � revisjon 2 � kvantitativ unders�kelse � revisjon 3 osv

11. 11 Tre krav som ethvert sp�rsm�l b�r oppfylle Innholdskrav Kognitive krav Brukervennlighet

12. Problemer som kan f�re til feil i svarene I Svarpersonen omkoder informasjonen i sp�rsm�let feil �Hva handler dette egentlig om � hva jeg har handla eller hva folk pleier � handle eller hva som er lov � handle�? Svarpersonen tolker sp�rsm�let feil �Hva skal jeg svare�? �Hvordan skal jeg svare�? Svarpersonen glemmer eller har andre hukommelsesproblemer �Hvordan var det n� igjen � var det i fjor eller i 2006�? Svarpersonene gj�r feilaktige vurderinger eller har feilaktige strategier for � ansl� en st�rrelse �De tre flaskene er da til sammen 3 liter�?

13. Problemer som kan f�re til feil i svarene II Svarpersonen har problemer med � formulere ett svar �Jeg vet ikke riktig hva jeg skal si � jeg har jo passert grensa mange ganger siste �ret, men p� ulike m�ter og p� forskjellige steder� Mer eller mindre overlagt gale svar �jeg kan jo ikke fortelle folk med uniform hvor ofte jeg er i Charlottenberg�� Unnlate � f�lge instruksjoner Mange legger ikke merke til instrukser, eller bryr seg ikke om instrukser

14. Regel nr 1: Bestem deg for hva du skal sp�rre om f�r du begynner � lage skjemaet! Konkretisering av sp�rsm�lsinnhold Flytskjema for sp�rsm�lsstruktur Operasjonalisering av sp�rsm�lsformuleringer Utforming av sp�rsm�l og svaralternativer Utforming av selve sp�rreskjemaet Testing

15. 15 �Respondenten skal ut p� en reise med klar start og tydelig slutt� Flytskjemaet gir ofte en god rekkef�lge Rekkef�lgeeffekter Start med noe lett og allment �mt�lige tema Bakgrunnsvariabler

16. Valg av datainnsamlingsmetode Papir Intervju telefon eller personlig m�te Web Alt?

17. 17 Regel nr 2: enkelt spr�k Spr�k er ikke likegyldig � lage sp�rsm�l og svar er � kommunisere Begreper Dagligspr�k, fagspr�k Ulike sosiale sammenhenger Tenk konkret Tenk enkelt Tenk entydig

18. 18 Sp�rsm�lsformuleringer

19. 19 Begreper som m� forklares

20. 20 Gode svaralternativer gir gode data � jobbe med Relevante, enkle, entydige Abstrakte fenomener m�les fra ulike vinkler for � forst� skala og referanseramme Gjensidig utelukkende Kontinuerlige data � bedre � g� rett p� (alder, inntekt) Mest mulig utt�mmende �pne svaralternativer brukes kun i spesielle situasjoner

21. 21 Eksempel p� tolkningsproblem

22. Eksempel p� tolkningsproblem

23. Eksempel p� tolkningsproblem

24. 24 KORT FOR MENN En kan tenke seg at kvinner og menn kan f�le seg tiltrukket av b�de samme kj�nn og motsatt kj�nn. Hvordan ville du plassere deg p� en skala over tiltrekning til kvinner? Sett ring rundt det tallet som passer best for deg. 0 -------1-------2-------3-------4--------5-------6 Vet ikke Ingen Sterk tiltrekning tiltrekning til kvinner til kvinner Hvordan ville du plassere deg p� en skala over tiltrekning til menn? Sett ring rundt det tallet som passer best for deg. 0 -------1-------2-------3-------4--------5-------6 Vet ikke Ingen Sterk tiltrekning tiltrekning til menn til menn

25. 25 Skalasp�rsm�l og utforming av skalaer Skalaer benyttes gjerne for � m�le intensiteten i holdninger eller tilfredshet Brukes ogs� i �naturlige� ja/nei sp�rsm�l om vanskelige og sensitive forhold I dag anbefales ofte 7 punkts skalaer med labeller/etiketter p� endepunktene Det er ogs� vanlig med 5, 6 og 11 punkts Ulike tradisjoner og hva en skal bruke det til avgj�r Mange svarpersoner vil ha problemer med � forholde seg til skalaer

26. 26 Betydning av � vite at det er lov til ikke � vite

27. Kunnskaps- eller faktasp�rsm�l Hvor viktig er det at svarpersonen svarer akkurat riktig? Behovet for data b�r avgj�re utformingen av svaralternativer Er det vanskeligere � gjette fritt enn � f� oppgitt kategorier? eksempel: Hvor mye �l kan du ta med deg over grensen til Norge dersom du ogs� tar meg deg brennevin? Antall liter:����.. eller a.) 0,3-1,0 liter b.) 1,1 � 5,0 liter c.) mer enn 5 liter Hensyn til svarpersonen er viktig

28. Hva husker vi godt? Det er lettere � huske hva som skjedde enn n�r det skjedde eller hvor lenge det varte Det er lettere � huske hva som vanligvis skjer enn hva som faktisk skjedde Det er lettere � huske skjellsettende opplevelser enn hverdagshendelser Det er lettere � huske begivenheter vi tenker tilbake p� med glede enn begivenheter vi helst vil glemme

29. Ulike typer sensitive sp�rsm�l Un�dig p�trengende Sp�rsm�l om seksuell legning Potensielt avsl�rende Sp�rsm�l om narkotikabruk Sosialt uakseptable meninger og atferd Sp�rsm�l om valgdeltakelse Sp�rsm�l om spilleavhengighet Sp�rsm�l om smugling

30. Eksempel p� dobbelt sp�rsm�l Det neste sp�rsm�let handler om hva du gj�r p� fritiden. Jeg skal lese opp en liste med ulike aktiviteter. Kan du se p� dette kortet og for hver aktivitet si meg hvilket av utsagnene som passer best for deg. KORT: Jeg deltar i aktiviteten og er med s� mye som jeg �nsker selv Jeg deltar noe og vil gjerne v�re med mer Jeg deltar ikke, men har lyst til � delta Jeg �nsker ikke � delta eller v�re med i aktiviteten sport eller idrett frivillig eller veldedig arbeid (ul�nnet) treff med andre som har lignende interesser kino, teater, opera eller konserter utstillings- eller museumsbes�k kafe, restaurant, eller barbes�k bes�k hos familie eller venner andre sosiale sammenhenger sightseeing, ferieturer

31. Formuleringer som ikke passer til svaralternativene

32. Visuelle virkemiddel

33. Samspill mellom tekst og visuell utforming

35. Tips for videre lesning: Gustav Haraldsen: Sp�rreskjemametodikk etter kokebokmetoden. Ad Notam Gyldendal 1999. Robert M. Groves, Floyd J. Fowler Jr., Mick P. Couper, James M. Lepkowski, Elanor Singer og Roger Tourangeau: Survey Methodology. Wiley Series In Survey Methodology. New York 2004.

36. Praktisk brukertesting:http://www.ssb.no/publikasjoner/pdf/handbok-87.pdfVisuell utforming av sp�rreskjema:http://www.ssb.no/publikasjoner/pdf/handbok-88.pdfWebskjema:http://www.ssb.no/publikasjoner/pdf/handbok-81.pdf