Enkätmetodik felkällor Kandidatprogrammet i folkhälsovetenskap, HT -11
Problemformulering /målsättning Undersökningsplan Urvalsram Mätinstrument Urval Mätning Databehandling Statistisk analys Analys/ utvärdering Rapport Karin Engström Kvant. metoder, FHV T1 december 2011 2
Felkällor Urvalsfel Icke-urvalsfel Mätinstrumentet Validitet Reliabilitet Bearbetningsfel Representativitet Täckningsfel Urvalsfel Bortfallsfel Karin Engström Kvant. metoder, FHV T1 december 2011 3
Mätinstrumentet Enkätundersökningar Hälsoundersökningar Teoretisk definition Operationell definition Uppmätt (empirisk) definition Uppmätt värde Sant värde Karin Engström Kvant. metoder, FHV T1 december 2011 4
Validitet Den grad till vilken en mätning verkligen mäter det den avser att mäta. Överensstämmelse mellan teoretisk och empirisk definition av ett fenomen. Exempel Ekonomins betydelse för att avstå besök hos tandläkare - vad avses med ekonomi? Karin Engström Kvant. metoder, FHV T1 december 2011 5
Mätfel - reliabilitet Skillnaden mellan erhållet (mätt, uppgivet) värde och det sanna värdet Orsaker Respondenten Mätmetoden Frågeformuläret Exempel Ekonomins betydelse för att avstå besök hos tandläkare - hur får vi svar på ekonomiska förhållanden? Karin Engström Kvant. metoder, FHV T1 december 2011 6
Övningsuppgift Antag att en undersökning av svenska folkets inställning till religionsundervisning i skolan genomförts i intervjuform 1970. Intervjuerna genomfördes av medlemmar i olika trossamfund. En annan undersökning som liknade den förra genomfördes som en postenkät 1977. Diskutera jämförbarheten i undersökningsresultaten. Karin Engström Kvant. metoder, FHV T1 december 2011 7
Bearbetningsfel Insamlat material måste digitaliseras så att man kan bearbeta dem i statistiska analysprogram Orsaker Kodning Registrering till dator Datorbearbetning Exempel Ekonomins betydelse för att avstå besök hos tandläkare - att koda in en 0 för mycket eller lite? Karin Engström Kvant. metoder, FHV T1 december 2011 8
Representativitet Karin Engström Kvant. metoder, FHV T1 december 2011 9
Täckningsfel Uppkommer då urvalsramen och den population som skall undersökas skiljer sig åt. Rampopulation Målpopulation Övertäckning Undertäckning Undertäckning - element finns i målpopulationen som inte har någon länk till enheter i ramen Övertäckning - enheter i ramen med länkar till element som inte tillhör målpopulationen Karin Engström Kvant. metoder, FHV T1 december 2011 10
Exempel Undertäckning Nyinflyttade personer, nystartade företag Övertäckning Utflyttade personer, avlidna personer, företag som gått i konkurs Karin Engström Kvant. metoder, FHV T1 december 2011 11
Diskussionsuppgift Du är politiker i en kommun och vill ha svar på vad medborgarna i kommunen tycker om den kommunala servicen (t.ex. barnomsorg, äldreomsorg, simhall). Resonera kring vilka medborgare du ska fråga, hur du ska få tag på dem och om ev. täckningsfel som kan uppstå. Karin Engström Kvant. metoder, FHV T1 december 2011 12
Urvalsfel Fel som uppstår på grund av att de personer som väljs att ingå i en undersökning på ett systematiskt sätt avviker från de som inte ingår När man studerar ett urval (stickprov) kan urvalsfel medföra att det resultat man får skiljer sig från det man skulle fått om man hade gjort en totalundersökning Urvalsfel förekommer speciellt i studier på kliniskt material (på sjukhus eller vårdcentral) här saknas t.ex. alla de som inte söker sjukvård av olika skäl (bagatellartade symtom, avstånd, kostnader, död) Karin Engström Kvant. metoder, FHV T1 december 2011 13
Övningsuppgift Antag att ett opinionsinstitut får i uppdrag att utifrån slumpmässigt utvalda telefonnummer ringa en viss kväll efter en tv-debatt med partiledarena och fråga vem som vann, Uppdragsgivaren vill ha svar från 100 personer. Vilka är riskerna med detta förfarande? Motivera. Karin Engström Kvant. metoder, FHV T1 december 2011 14
Bortfallsfel Fel som uppstår pga svarsbortfall Uppstår då man av en eller annan anledning inte erhåller avsedd information från individer som ingår i ramen och som utvalts för observation Individbortfall inga svar från individen alls Partiellt bortfall inte svarat på enskilda frågor Orsaker Ej anträffbara Vägrar svara Annan anledning (språksvårigheter, för gammal eller sjuk) Karin Engström Kvant. metoder, FHV T1 december 2011 15
Exempel svarsbortfall Vid en rökvaneundersökning i Sverige genomförd som en postenkät erhölls efter ett antal påstötningar svar från 87% av respondenterna. Från den återstående gruppen lyckades man med hjälp av telefon- och besöksintervjuer få in svar från ytterligare 7%. Konsumtionen av cigaretter skilde sig markant åt. Daglig cigarettkonsumtion Postenkät (%) Bortfallsuppföljning (%) Aldrig eller ibland 72.4 58.4 1-5 cigaretter 7.0 13.0 6-15 cigaretter 16.8 23.4 16 cigaretter 3.8 5.2 Antal 970 77 Karin Engström Kvant. metoder, FHV T1 december 2011 16
Bortfallsfel - åtgärder Individbortfall Utbilda och informera alla berörda personer i processen Gör pilotstudier (provundersökningar) Skapa positiv inställning hos allmänheten Introduktionsbrev Skyddande mot insyn enligt Personuppgiftslagen (Sekretesslagen) Inget obehörigt intrång i den personliga integriteten Ge respondenter möjlighet att avstå från att svara Skicka påminnelsebrev Byta kontaktform Inte vara förenat med kostnader att delta (frankerade/portofria svarskuvert) Ev. utlova presenter Byt insamlingsmetod Avidentifiering av blanketterna Partiellt bortfall Imputationer Efterstratifiering Karin Engström Kvant. metoder, FHV T1 december 2011 17
Övningsuppgift För att undersöka vad man tycker om en gratisutdelad lokaltidning gjordes en läsarundersökning genom en postenkät till ett slumpmässigt urval av 300 invånare i området. Av dessa fick man svar från 225 st. efter en påminnelse. Andelen personer som var nöjda med tidningens innehåll var 80%. För att minska bortfallet i denna undersökning, kan man efter den första påminnelsen, vidta ytterligare åtgärder. Föreslå och motivera sådana åtgärder. Karin Engström Kvant. metoder, FHV T1 december 2011 18