Föreläsning 2: Datainsamling - Observation, enkät, intervju Att läsa: Kapitel 7 i Rogers et al.: Interaction design Stjärnmodellen Analys Utvärdering Implementation Prototyper Krav Design 100326 Datainsamling 2 Översikt Fem viktiga aspekter på datainsamling Dataregistrering Intervjuer Enkäter Observation Välja och kombinera tekniker 3 1
3/30/12 Fem viktiga aspekter 1. Sätta upp mål Bestämma hur man ska analysera data 2. Identifiera deltagare Vilka ska bidra med informationen 3. Bemötande Tydligt och professionellt Samtycke till deltagande 4. Triangulering Titta på data från mer än ett perspektiv 5. Pilotstudie Litet test av förfarandet 4 Dataregistrering Anteckningar, ljud, video, fotografier Anteckningar + fotografier Ljud + fotografier Video 5 Intervjuer Ostrukturerade utan förberett manus. Rikt material, men ej upprepningsbart. Strukturerade man använder manus, muntlig enkät. Upprepningsbart, men saknar fyllighet. Halvstrukturerade manus används, men man följer oväntade trådar som dyker upp. Ger balans mellan fyllighet och upprepningsbarhet. 6 2
Intervjufrågor Två typer: slutna frågor har färdiga svar, t.ex. ja eller nej öppna frågor har inga begränsningar Slutna frågor är lätta analysera Undvik: Långa frågor Sammansatta meningar delas hellre upp Jargong och ord som är svåra att förstå Ledande frågor som bygger på (egna) antaganden, vill du att det ska? Omedvetna vinklingar, t.ex. könsstereotyper 7 Analys av data Kvalitativa data - tolkade och använda för att berätta om det som observerats, ger förståelse Kvantitativa data - insamlade från interaktion och video. Presenterade som värden, tabeller, diagram och grafer, behandlas statistiskt 100326 Datainsamling 8 Tolkande dataanalys Leta efter nyckelhändelser som styr användarnas aktivitet Leta efter mönster i beteenden Jämför resultaten av olika tekniker Rapportera på ett relevant sätt Ta med citat, bilder, anekdoter 100326 Datainsamling 9 3
3/30/12 Leta efter mönster Kritiska händelser Content analysis Discourse analysis Kvantitativ analys, dvs statistik 100326 Datainsamling 10 Genomföra intervjun Introduktion presentera dig, förklara målet med intervjun, etiska aspekter, inspelingsmedgivande, eventuellt skriftligt samtycke. Uppvärmning de första frågorna ska vara enkla och ej provocerande. Huvuddelen presentera frågorna i en logisk ordning Avrundningsdel avsluta med enkla frågor för att minska anspänningen Avslutning tacka deltagaren, avsluta, och stäng av utrustning Kom väl förberedd! 11 Berika intervjuprocessen Rekvisita material för att uppmuntra den intervjuade, som prototyp, scenarion 12 4
Enkäter Frågor kan vara slutna eller öppna Slutna frågor är enklare att analysera, kan automatiseras Kan administraras för många deltagare Papper, e-post och webben kan användas för spridning Lämpligt urval problematiskt när storleken på gruppen är okänd (via webben) 13 Att konstruera enkäter Effekten av en fråga kan påverkas av ordningen på frågorna. Olika versioner för olika grupper. Ge tydliga instruktioner för hur man besvarar enkäten. Ta beslut angående positiva, negativa eller blandade frågor. Balans mellan att ha en kompakt enkät och att lätta upp med mellanrum. 14 Format för frågor och svar Kryssrutor för ja och nej Kryssrutor för flera olika svar Skalor Likert-skalor påståenden håller med-neutral-håller inte alls med Semantisk skala i ändarna t.ex. svårt-lätt, tråkigt-roligt hur många svarspunkter? Öppna svar 15 5
Likertskala, exempel Markera för nedanstående påståenden vilket alternativ som stämmer bäst med din åsikt. 1. Det är lätt att förstå vad ikonen står för. Håller helt med Håller delvis med Neutral Håller delvis inte med Håller inte alls med 2. Ibland vet jag inte hur jag ska gå vidare. Håller helt med Håller delvis med Neutral Håller delvis inte med Håller inte alls med 100326 Datainsamling 16 Hur får man bra respons Syftet ska vara tydligt Anonymitet Genomtänkt upplägg Ev. en kortversion om man inte får in så många svar Svarskuvert om man skickar via post Uppföljning, ev. via e-post, telefon, brev Nån typ av ersättning 40% svar får anses högt, 20% kan vara acceptabelt 17 Fördelar med webben Kan ge snabba svar Inga utgifter för post Enkelt att föra över resultat för analys Sparar tid Fel kan rättas genast 18 6
Problem med webbaserade enkäter Lämpligt urval problematiskt när gruppens storlek är okänd Se till att en individ inte svarar flera gånger I enkäter per e-post finns risken att en individ ändrar formuleringen av frågor 19 Riktlinjer Enkelhet i språket Entydiga frågor Precisera tid och rum Ej ledande frågor Undvik (dubbla) negationer Jag säger aldrig ingenting, utom ibland. Försiktighet med kunskapsfrågor En fråga åt gången Ett svar åt gången 100326 Datainsamling 20 Riktlinjer forts. bla bla bla bla bla bla bla bla bla bla Ej omotiverat långa frågor Minnesfaktorn Sparsamt med hypotetiska frågor Undvik känsliga frågor Motivera omotiverade frågor Socialt önskvärda svar Svarsalternativ ömsesidigt uteslutande Svarsalternativen uttömmande Symmetri och rangordning 100326 Datainsamling 21 7
Avskräckande exempel 1) Brukar du påbörja projekt hemma som du aldrig slutför? o Någon gång har jag kört fast, men det brukar lösa sig. o Jo, en del är för svårt, det måste jag medge. o Nej, jag har insett mina begränsningar och påbörjar inga egna hemmafixarprojekt. 100326 Datainsamling 22 Observation Direkt observation på plats Strukturerande ramverk Grad av medverkan (invigda eller oinvigda) Etnografi Direkt observation i kontrollerade miljöer Indirekt observation: spåra användares aktiviteter Dagböcker Interaktionsloggning 23 Interaktionsloggning Programvara som registrerar allt som görs stör relativt litet loggfiler kan delvis analyseras automatiskt större datamängder kan hanteras interaktionen kan spelas upp i efterhand 24 8
Tangentloggning http://www.stcsig.org/usability/topics /usabilty-labs.html 100326 Datainsamling 25 Screencast-verktyg ScreenCam Captivate Camtasia Camstudio Studio (MS) 100326 Datainsamling 26 Ramar som stöd för observation - Personen. Vem? - Platsen. Var? - Saken. Vad? Goetz och LeComptes (1984) ramverk: - Vem/vilka är närvarande? - Vilken roll har de? - Vad händer? - När inträffar aktiviteten? - Var utspelar den sig? - Varför händer det? - Hur har aktiviteten organiserats? 27 9
Ethnografi (1) Etnografi bygger bl.a. på en uppsättning tekniker, bl.a. deltagande observation och intervjuer Etnografer fördjupar sig i de kulturer de studerar Deltagandet kan variera på en skala från utanför till innanför/medlem Man samlar på sig kommentarer händelser, föremål De medverkande måste ge sitt medgivande Frågor förfinas med ökad förståelse Reportering innehåller belysande exempel 28 Direkt observation i en kontrollerad miljö Tänka-högt-teknik Tidsaspekter Användarnas upplevelser Observatörens inblandning 29 Välja och kombinera tekniker Beror på studiens fokus vilka deltagarna är vilken typ av teknik som används tillgängliga resurser 30 10
Sammanfattning Tre huvudsakliga metoder: intervjuer, enkäter, observation Fem viktiga aspekter på datainsamling: mål, val av deltagare, bemötande, triangulering, pilotstudie Intervjuer kan vara strukturerade, halvstrukturerade eller ostructurerade Enkäter kan göras på papper, online eller via telefon Observation kan vara direkt eller indirekt, på plats eller i en kontrollerad situation Tekniker kan kombineras utifrån studiens fokus, deltagare, typ av teknik och tillgängliga resurser 31 11