Respondentens perspektiv i hälsorelaterade enkätstudier

Transkript

1 Respondentens perspektiv i hälsorelaterade enkätstudier Folkhälsocentrum, Landstinget i Östergötland Samhällsmedicin, Institutionen för medicin och hälsa, Linköpings universitet marika.wenemark@liu.se

2 Response rate (%) Svarsfrekvens i Riks-SOM yrs yrs yrs yrs yrs yrs yrs

3 Färska svarsfrekvenser är en dyster läsning UngKab09 om sexvanor med 6000 unga år. Svarsfrekvens 24 %. Första nationella patientenkäten inom allmän psykiatri 2010 med patienter i 19 landsting. Svarsfrekvens 43 % öppenvård och 35 % slutenvård. Årets undersökning har, liksom tidigare år, genomförs med hjälp av en postal enkät, riktad till ett slumpmässigt urval om åringar bosatta i Göteborg. I årets undersökning har tyvärr den negativa utvecklingen fortsatt och vi har nått en svarsfrekvens på 46 procent. I Västernorrland svarade personer, vilket är en svarsfrekvens på 45 procent. Samma siffra för 2009 var 62 procent. Något som enligt Marie- Charlotte Sigeman, hälso- och sjukvårdsplanerare på landstingsstaben, gör det svårt att dra några generella slutsatser av undersökningen.

4 Idéer om hur man kan höja svarsfrekvensen Prolonged interaction means maintaining a conversation long enough to identify the reasons for not wanting to participate and use effective persuaders to counter argue those reasons. Because a good response rate is so important, we will be sending reminders to nonrespondents. To avoid this irritant, why not fill it in now and get it over with!? Hardest-to-reach respondents are those who refused the interview at least twice before complying and/or required 21 or more calls to complete the interview. Ofta är det bättre att lägga resurserna på ett mindre utskick där man har resurser att jaga in svar.

5

6 Men det finns positiva exempel Patientenkät om tandimplantat med patienter Svarsfrekvens 81 %. Göteborgsakademiker bryter trenden. Mellan 2006 och 2010 ökade svarsfrekvensen från 60 till 65 %. Ett stort tack till alla föräldrar som tog sig tid att besvara enkäten. Svarsfrekvensen blev i år 78% och det är några procentenheter bättre än förra året. TACK! Vår första enkät gav en svarsfrekvens på mer än 85 % och det finns ett stort intresse för att starta ett informellt nätverk bland ägare till dessa ibland svåra katter.

7 Respondenten i fokus Traditionell enkätmetodik Responspsykologi Kognitiva intervjuer Kunskap om våra respondenter Teorier om sociala regler Teorier om motivation Etik

8 Traditionell enkätmetodik Enkelhet i språket Entydiga frågor Precisa tids- och rumsangivelser Ej ledande frågor Undvik (dubbla) negationer En fråga åt gången Ett svar åt gången Försiktighet med hypotetiska frågor

9 Har du under det senaste året ändrat eller försökt ändra Dina matvanor för att äta mer hälsosamt? Ja, jag har börjat äta mer hälsosamt Ja, jag har försökt, men misslyckats Nej, men jag har funderat på det Nej, aldrig Nej, jag anser att jag redan äter hälsosamt Jag har redan ändrat matvanor sedan tidigare Vill ändra? Försökt ändra? Lyckats? Äter hälsosamt? Ändrat tidigare?

10 Varför ställs sådana frågor? Okunskap Tidsbrist Jämförelser över tid Jämförelser med andra studier Jämförelser med andra länder Ingår i etablerad validerad skala

11 Den kognitiva processen för att svara på en fråga (Tourangeau 2000) Förstå frågan Skaffa relevant information Formulera ställningstagande Anpassa svaret till givna svarsalternativ Justera svaret

12 Hur gör man för att besvara dessa frågor Hur länge har du arbetat på din nuvarande arbetsplats? Hur gammal var du när du fick ditt första barn? Hur gammal var du när du fick ditt senaste barn?

13 Hur kan man testa sitt formulär? Kognitiva intervjuer Tänka högt protokoll Retrospektiva hur tänkte du frågor Läsa högt metoden

14 Utveckling av enkätmetodik Responspsykologi och kognitiva intervjuer Avancerade index och skalor Intensivt uppföljningsarbete Övertalningsmetoder Men har vi inte glömt någonting?

15 A survey is a voluntary social encounter between strangers and is subject to the rules that govern social relations between strangers Schwarz, Bradburn, Sudman 1996

16 Exempel på sociala regler Inte ljuga Säga saker som är relevanta i diskussionen Vara informativ och inte upprepa sig Uttrycka sig så klart som möjligt

17 Intervjustudie om deltagande och upplevelser av ett frågeformulär Slumpmässigt urval av 30 personer som tackat ja till att delta Semistrukturerade telefonintervjuer ca 30 minuter Information, enkät och en uppgift som de förberedde i förväg

18 Börda Kognitiv börda Onödigt arbete Misstro Kränkande frågor Oro

19 Misstro Ställs frågorna om igen för att kolla att jag svarat rätt? Ibland slås man av att enkäter är upplagda på ett sätt som att man vill få ut saker utan att respondenten förstår det Du vet ju bara själv om en händelse är relevant för stress och hälsa. Jag tror att enkätsvar ofta redovisas fel när det kommer i tidningen. Det gör att man blir osäker när man svarar. Man vill ju inte att det redovisas fel.

20 Face validity bra eller dåligt? there are situations where face and content validity may not be desirable, and may be consciously avoided. For example, in assessing behavior such as child abuse Streiner Health measurement scales 2003

21 Tillfredsställelse Bidra Ansvar Komma till tals Reflektion

22 Let us not become a profession that focuses mainly on technical survey issues, instead of the people and issues that we are studying. Schulman 2003

23

24 Bias in responding The respondents perspectives, however, are often quite different. They are often unaware that the individual items are ignored in favor of the total score. Even when told that their responses will be scored by a computer, it is quite common to find marginal notes explaining and elaborating their answers. Thus, it appears that respondents treat each item as important in its own right, and often believe that their answers will be read and evaluated by another person. [Streiner Health measurement scales 2003]

25

26 Self-determined motivation Amotivation Controlled extrinsic motivation Autonomous extrinsic motivation Intrinsic motivation Ser inget värde eller har inte kompetens att klara uppgiften Deltar för att få en extern belöning eller för att undvika skam/skuldkänslor Deltar för att studien kan få ett värde för samhället eller för dem själva Deltar för att det är spännande, kul eller intressant

27 Day-by-day cumulative response rate for the three experimental groups. Response rate (%) After one week the one plus one incentive offer ends Effect of the second reminder Effect of the third reminder No incentive One lottery ticket One plus one lottery ticket Day

28 Respondent factors Cognitive ability Interest in topic Attitude to surveys Attitude to research Civic engagement Questionnaire factors Cognitive burden Time burden Open-ended questions Question topic Possibilities of being heard Data collection factors Anonymity Pre-notification Reminders Communication in letters Incentives RESPONDENT MOTIVATION Decision to participate Effort and commitment Experiences of burden and satisfaction Response rate Data quality Willingness to participate again

29 Experiment in Östergötlands befolkningsenkät 2006 Frågeformulär Datainsamling Urval standard standard standard SDT 500 SDT SDT 2 500

30 SDT in frågeformuläret Färre frågor Färre skalor och indexfrågor Fler öppna frågor Inga dolda motiv Inga upprepningar Frågor relevanta för alla

31 SDT i data insamlingen Partiell anonymitet Förbrev En skriftlig påminnelse Förkortat formulär som alternativ till andra påminnelsen Lokal data insamling Ingen övertalning

32 Day-by-day cumulative response rate. Response rate (%) SDT design Mixed design Standard design Thank you and reminder card First reminder Second reminder Day

33 Kumulativ skillnad i svarsfrekvens Percentage units 16 Total effect Questionnaire effect Data collection effect Day

34 Sanningar om öppna frågor i enkätstudier? Respondenter vill inte svara på öppna frågor Respondenter kan inte svara på öppna frågor Svårt/tidskrävande att analysera Omöjligt att dra slutsatser eftersom alla inte svarat standardiserat

35 Men Women Andel respondenter med nedsatt psykisk hälsa (MH<50) som besvarade den öppna frågan years years years years years years years years Percentage (%)

36 En liten tanke om tid elever använder 40 minuter till att besvara en enkät Det motsvarar timmar eller 53 heltidsanställda i ett år Hur värderar vi denna tid?

37 Vad kan vi lära oss av kvalitativa studier? Frågor som inbjuder till engagemang, eftertanke och berättande Materialet kvalitetssäkras med hjälp av informanterna Informanternas upplevelse följs ofta upp efteråt Informanterna bemöts som mycket värdefulla

38 Etik och respekt Inte jaga eller hota Få komma till tals Inga belöningar i förväg Inga dolda motiv Respektera frivilligheten

39 Fokus på de som vill delta istället för på de som inte vill svara? Samarbete istället för övertalning? Respondent fokus Fokus på det sociala mötet istället för tekniska aspekter? Respondent tillfredsställelse istället för respondent börda?

40 Vad kan vi göra tillsammans? Bredare verktygslåda för våra studier Minimera antalet förbannade respondenter Följa upp reaktionerna Gemensamma utvecklingsarbeten

41 Har du tyckt att du varit värdelös de senaste veckorna? [ ] Inte alls [ ] Inte mer än vanligt [ ] Mer än vanligt [ ] Mycket mer än vanligt

42 Utan respondenter ingen studie