Respondentens perspektiv i hälsorelaterade enkätstudier Folkhälsocentrum, Landstinget i Östergötland Samhällsmedicin, Institutionen för medicin och hälsa, Linköpings universitet marika.wenemark@liu.se
Response rate (%) Svarsfrekvens i Riks-SOM 1995 2009. 90 80 70 60 50 40 30 20-24 yrs 25-29 yrs 30-39 yrs 40-49 yrs 50-59 yrs 60-69 yrs 70-79 yrs 1995 1996 1997 1998 1999 2000 2001 2002 2003 2004 2005 2006 2007 2008 2009
Färska svarsfrekvenser är en dyster läsning UngKab09 om sexvanor med 6000 unga 16-29 år. Svarsfrekvens 24 %. Första nationella patientenkäten inom allmän psykiatri 2010 med 47 000 patienter i 19 landsting. Svarsfrekvens 43 % öppenvård och 35 % slutenvård. Årets undersökning har, liksom tidigare år, genomförs med hjälp av en postal enkät, riktad till ett slumpmässigt urval om 8 001 18-84 åringar bosatta i Göteborg. I årets undersökning har tyvärr den negativa utvecklingen fortsatt och vi har nått en svarsfrekvens på 46 procent. I Västernorrland svarade 8 000 personer, vilket är en svarsfrekvens på 45 procent. Samma siffra för 2009 var 62 procent. Något som enligt Marie- Charlotte Sigeman, hälso- och sjukvårdsplanerare på landstingsstaben, gör det svårt att dra några generella slutsatser av undersökningen.
Idéer om hur man kan höja svarsfrekvensen Prolonged interaction means maintaining a conversation long enough to identify the reasons for not wanting to participate and use effective persuaders to counter argue those reasons. Because a good response rate is so important, we will be sending reminders to nonrespondents. To avoid this irritant, why not fill it in now and get it over with!? Hardest-to-reach respondents are those who refused the interview at least twice before complying and/or required 21 or more calls to complete the interview. Ofta är det bättre att lägga resurserna på ett mindre utskick där man har resurser att jaga in svar.
Men det finns positiva exempel Patientenkät om tandimplantat med 4 716 patienter 2009. Svarsfrekvens 81 %. Göteborgsakademiker bryter trenden. Mellan 2006 och 2010 ökade svarsfrekvensen från 60 till 65 %. Ett stort tack till alla föräldrar som tog sig tid att besvara enkäten. Svarsfrekvensen blev i år 78% och det är några procentenheter bättre än förra året. TACK! Vår första enkät gav en svarsfrekvens på mer än 85 % och det finns ett stort intresse för att starta ett informellt nätverk bland ägare till dessa ibland svåra katter.
Respondenten i fokus Traditionell enkätmetodik Responspsykologi Kognitiva intervjuer Kunskap om våra respondenter Teorier om sociala regler Teorier om motivation Etik
Traditionell enkätmetodik Enkelhet i språket Entydiga frågor Precisa tids- och rumsangivelser Ej ledande frågor Undvik (dubbla) negationer En fråga åt gången Ett svar åt gången Försiktighet med hypotetiska frågor
Har du under det senaste året ändrat eller försökt ändra Dina matvanor för att äta mer hälsosamt? Ja, jag har börjat äta mer hälsosamt Ja, jag har försökt, men misslyckats Nej, men jag har funderat på det Nej, aldrig Nej, jag anser att jag redan äter hälsosamt Jag har redan ändrat matvanor sedan tidigare Vill ändra? Försökt ändra? Lyckats? Äter hälsosamt? Ändrat tidigare?
Varför ställs sådana frågor? Okunskap Tidsbrist Jämförelser över tid Jämförelser med andra studier Jämförelser med andra länder Ingår i etablerad validerad skala
Den kognitiva processen för att svara på en fråga (Tourangeau 2000) Förstå frågan Skaffa relevant information Formulera ställningstagande Anpassa svaret till givna svarsalternativ Justera svaret
Hur gör man för att besvara dessa frågor Hur länge har du arbetat på din nuvarande arbetsplats? Hur gammal var du när du fick ditt första barn? Hur gammal var du när du fick ditt senaste barn?
Hur kan man testa sitt formulär? Kognitiva intervjuer Tänka högt protokoll Retrospektiva hur tänkte du frågor Läsa högt metoden
Utveckling av enkätmetodik Responspsykologi och kognitiva intervjuer Avancerade index och skalor Intensivt uppföljningsarbete Övertalningsmetoder Men har vi inte glömt någonting?
A survey is a voluntary social encounter between strangers and is subject to the rules that govern social relations between strangers Schwarz, Bradburn, Sudman 1996
Exempel på sociala regler Inte ljuga Säga saker som är relevanta i diskussionen Vara informativ och inte upprepa sig Uttrycka sig så klart som möjligt
Intervjustudie om deltagande och upplevelser av ett frågeformulär Slumpmässigt urval av 30 personer som tackat ja till att delta Semistrukturerade telefonintervjuer ca 30 minuter Information, enkät och en uppgift som de förberedde i förväg
Börda Kognitiv börda Onödigt arbete Misstro Kränkande frågor Oro
Misstro Ställs frågorna om igen för att kolla att jag svarat rätt? Ibland slås man av att enkäter är upplagda på ett sätt som att man vill få ut saker utan att respondenten förstår det Du vet ju bara själv om en händelse är relevant för stress och hälsa. Jag tror att enkätsvar ofta redovisas fel när det kommer i tidningen. Det gör att man blir osäker när man svarar. Man vill ju inte att det redovisas fel.
Face validity bra eller dåligt? there are situations where face and content validity may not be desirable, and may be consciously avoided. For example, in assessing behavior such as child abuse Streiner Health measurement scales 2003
Tillfredsställelse Bidra Ansvar Komma till tals Reflektion
Let us not become a profession that focuses mainly on technical survey issues, instead of the people and issues that we are studying. Schulman 2003
Bias in responding The respondents perspectives, however, are often quite different. They are often unaware that the individual items are ignored in favor of the total score. Even when told that their responses will be scored by a computer, it is quite common to find marginal notes explaining and elaborating their answers. Thus, it appears that respondents treat each item as important in its own right, and often believe that their answers will be read and evaluated by another person. [Streiner Health measurement scales 2003]
Self-determined motivation Amotivation Controlled extrinsic motivation Autonomous extrinsic motivation Intrinsic motivation Ser inget värde eller har inte kompetens att klara uppgiften Deltar för att få en extern belöning eller för att undvika skam/skuldkänslor Deltar för att studien kan få ett värde för samhället eller för dem själva Deltar för att det är spännande, kul eller intressant
Day-by-day cumulative response rate for the three experimental groups. Response rate (%) 80 70 60 50 40 30 20 10 After one week the one plus one incentive offer ends Effect of the second reminder Effect of the third reminder No incentive One lottery ticket One plus one lottery ticket 0 0 5 10 15 20 25 30 35 40 45 50 Day
Respondent factors Cognitive ability Interest in topic Attitude to surveys Attitude to research Civic engagement Questionnaire factors Cognitive burden Time burden Open-ended questions Question topic Possibilities of being heard Data collection factors Anonymity Pre-notification Reminders Communication in letters Incentives RESPONDENT MOTIVATION Decision to participate Effort and commitment Experiences of burden and satisfaction Response rate Data quality Willingness to participate again
Experiment in Östergötlands befolkningsenkät 2006 Frågeformulär Datainsamling Urval standard standard 13 440 standard SDT 500 SDT SDT 2 500
SDT in frågeformuläret Färre frågor Färre skalor och indexfrågor Fler öppna frågor Inga dolda motiv Inga upprepningar Frågor relevanta för alla
SDT i data insamlingen Partiell anonymitet Förbrev En skriftlig påminnelse Förkortat formulär som alternativ till andra påminnelsen Lokal data insamling Ingen övertalning
Day-by-day cumulative response rate. Response rate (%) SDT design Mixed design Standard design 80 70 60 50 40 30 20 Thank you and reminder card First reminder Second reminder 10 0 0 5 10 15 20 25 30 35 40 45 50 Day
Kumulativ skillnad i svarsfrekvens Percentage units 16 Total effect Questionnaire effect Data collection effect 15 14 13 12 11 10 9 8 7 6 5 4 3 2 1 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 Day
Sanningar om öppna frågor i enkätstudier? Respondenter vill inte svara på öppna frågor Respondenter kan inte svara på öppna frågor Svårt/tidskrävande att analysera Omöjligt att dra slutsatser eftersom alla inte svarat standardiserat
Men Women Andel respondenter med nedsatt psykisk hälsa (MH<50) som besvarade den öppna frågan 18-29 years 30-44 years 45-64 years 65-90 years 18-29 years 30-44 years 45-64 years 65-90 years 0 10 20 30 40 50 60 70 80 90 100 Percentage (%)
En liten tanke om tid 142 000 elever använder 40 minuter till att besvara en enkät Det motsvarar 95 000 timmar eller 53 heltidsanställda i ett år Hur värderar vi denna tid?
Vad kan vi lära oss av kvalitativa studier? Frågor som inbjuder till engagemang, eftertanke och berättande Materialet kvalitetssäkras med hjälp av informanterna Informanternas upplevelse följs ofta upp efteråt Informanterna bemöts som mycket värdefulla
Etik och respekt Inte jaga eller hota Få komma till tals Inga belöningar i förväg Inga dolda motiv Respektera frivilligheten
Fokus på de som vill delta istället för på de som inte vill svara? Samarbete istället för övertalning? Respondent fokus Fokus på det sociala mötet istället för tekniska aspekter? Respondent tillfredsställelse istället för respondent börda?
Vad kan vi göra tillsammans? Bredare verktygslåda för våra studier Minimera antalet förbannade respondenter Följa upp reaktionerna Gemensamma utvecklingsarbeten
Har du tyckt att du varit värdelös de senaste veckorna? [ ] Inte alls [ ] Inte mer än vanligt [ ] Mer än vanligt [ ] Mycket mer än vanligt
Utan respondenter ingen studie