Frågetekniker. Föreläsning 3, Utvärderingstekniker MDI, Lena Palmquist 1. Än en gång: JEdit (Py Kollberg) Loggning. Tolkande dataanalys

Transkript

1 Föreläsning 3, Utvärderingstekniker Än en gång: Frågetekniker Att läsa: Sharp, Helen, Rogers, Yvonne & Preece, Jenny E. (2007) Interaction design. Wiley. Kapitel Mål, frågeställningar Teknik Hur data samlas in Utrustning att använda Hur man ska accepteras Hur hantera känsliga frågor Hur (om) informanter ska involveras Hur data ska analyseras MDI, Utvärderingstekniker 2 Loggning JEdit (Py Kollberg) Programvara som registrerar allt som görs stör relativt litet loggfiler kan delvis analyseras automatiskt större datamängder kan hanteras interaktionen kan spelas upp i efterhand MDI, Utvärderingstekniker 3 MDI, Utvärderingstekniker 4 Analys av data Kvalitativa data - tolkade och använda för att berätta om det som observerats Kvalitativa data - kategoriserade med tekniker som content analysis Kvantitativa data - insamlade från interaktion och video. Presenterade som värden, tabeller, diagram och grafer, behandlas statistiskt Tolkande dataanalys Leta efter nyckelhändelser som styr gruppens aktivitet Leta efter mönster i beteenden Jämför resultaten av olika tekniker Rapportera på ett relevant sätt Ta med citat, bilder, anekdoter MDI, Utvärderingstekniker 5 MDI, Utvärderingstekniker 6 MDI, Lena Palmquist 1

2 Föreläsning 3, Utvärderingstekniker Leta efter mönster Kritiska händelser Content analysis Discourse analysis Kvantitativ analys, dvs statistik Utfrågningstekniker intervjuer strukturerade flexibla halvstrukturerade prompted MDI, Utvärderingstekniker 7 MDI, Utvärderingstekniker 8 Att planera en intervju Introduktion Uppvärmning Ordning Avrundning Avslutning Kom väl förberedd! Intervjuer, att undvika Långa frågor Sammansatta meningar Ett språk som är svårt att förstå Ledande frågor Omedvetna vinklingar, könsstereotyper MDI, Utvärderingstekniker 9 MDI, Utvärderingstekniker 10 Probes - sonderingar Probes - för att få mer information, vill du tillägga något? Prompts - hjälp på traven, kan vara att få hjälp att komma ihåg ett namn Får inte leda till vinklingar För mycket får deltagaren att försöka gissa rätt svar Djupintervju Använd: öppna frågor neutralt formulerade frågor enkla, konkreta frågor en fråga i taget tystnad, tid för eftertanke MDI, Utvärderingstekniker 11 MDI, Utvärderingstekniker 12 MDI, Lena Palmquist 2

3 Föreläsning 3, Utvärderingstekniker Djupintervju forts. Undvik: provocerande frågor varför-frågor (kan uppfattas som ifrågasättande eller tillrättavisande) hypotetiska frågor påståenden Gruppintervjuer Kallas även fokusgrupper Vanligt med 3-10 deltagare Ger ett brett åsiktsunderlag Måste styras: - alla ska bidra - ingen ska dominera - alla frågor ska beröras MDI, Utvärderingstekniker 13 MDI, Utvärderingstekniker 14 Enkäter Riktlinjer Öppna eller slutna frågor Slutna lättast att analysera, kan automatiseras Kan nå stora grupper På papper, via e-post eller webben Elektroniska varianter lättast att hantera Enkelhet i språket Entydiga frågor Precisera tid och rum Ej ledande frågor Undvik (dubbla) negationer Försiktighet med kunskapsfrågor En fråga åt gången Ett svar åt gången MDI, Utvärderingstekniker 15 MDI, Utvärderingstekniker 16 Riktlinjer forts. Ej omotiverat långa frågor Minnesfaktorn Sparsamt med hypotetiska frågor Undvik känsliga frågor Motivera omotiverade frågor Socialt önskvärda svar Svarsalternativ ömsesidigt uteslutande Svarsalternativen uttömmande Symmetri och rangordning Skalor Likert påståenden håller med-neutral-håller inte alls med Även Semantic differential I ändarna t ex svårt - lätt, tråkigt - roligt MDI, Utvärderingstekniker 17 MDI, Utvärderingstekniker 18 MDI, Lena Palmquist 3

4 Föreläsning 3, Utvärderingstekniker Likert-skala Hur får man bra respons Syftet ska vara tydligt Garantera anonymitet Enkäten ska vara genomarbetad Eventuellt en kortversion om den ordinarie uppfattas för lång Bifoga frankerat svarskuvert Uppföljningar Någon typ av ersättning 40% svarsfrekvens är bra, 20% är ofta acceptabelt MDI, Utvärderingstekniker 19 MDI, Utvärderingstekniker 20 SUMI - Software Usability Measurement Inventory för att bedöma kvalitet hos en produkt formulär med 50 frågor Inspektionsmetoder heuristisk evaluering discount evaluation walkthroughs konsistensgranskning MDI, Utvärderingstekniker 21 MDI, Utvärderingstekniker 22 Heuristisk evaluering fyller behovet av billiga, men effektiva metoder bygger på designprinciper på hög nivå (heuristik), jfr riktlinjer, exempel: enkel och naturlig dialog minimera användarens minnesbelastning ge feedback förebygga fel, osv. Designprinciper Synlighet Koppla system och sammanhang Användaren har kontroll Var konsekvent Förhindra/hantera fel Igenkänning (recognition vs recall) Flexibilitet/effektivitet Estetik, minimalism Hjälpmöjlighet MDI, Utvärderingstekniker 23 MDI, Utvärderingstekniker 24 MDI, Lena Palmquist 4

5 Föreläsning 3, Utvärderingstekniker Discount evaluation rabatterad utvärdering när resurserna är knappa bygger på scenarion förenklad thinking aloud heuristisk utvärdering tre testare Walkthroughs konstruera uppgifter utifrån systemspec. genomgång av handlingar som krävs pluralistic: användare, systemutvecklare, MDI-experter MDI, Utvärderingstekniker 25 MDI, Utvärderingstekniker 26 Praktiska överväganden tillgång till specialutrustning tillgång till expertkunskap experimentdesign statistikanalys etnografiskt arbete tidsbegränsningar tillgång på användare Utvärderingsansatser Tekniker Quick and dirty Användbarhetstestning Fältstudier Prediktiva Observera Viktigt för att se hur Video och loggning, kan Observation är centralt i alla N/A användare användare uppför sig i analyseras för att identifiera fältstudier. I etnografiska sin vanliga miljö. fel, undersöka vägar genom studier är utvärderaren en del av systemet, eller beräkna tid sammanhangent. I andra typer att utföra en uppgift. av studier betraktar utvärderaren objektivt det som sker. Fråga Diskutera med Enkäter används för att Utvärderaren kan ställa frågor N/A användare användare och samla in användarnas och diskutera med användare potentiella användare, synpunkter. Intervjuer kan utifrån deras handlande. individuellt eller i grupp också användas för att få Specifikt för etnografiska mer detaljerad information. studier är etnografiska intervjuer. Fråga För att få kritik av N/A N/A Experter använder experter användbarheten i en heuristiker tidigt i prototyp. designarbetet för att förutsäga effektiviteten i gränssnittet. Testa N/A Att testa typiska användare i N/A N/A användare typiska uppgifter i en kontrollerad laboratoriemiljö är grunden för användbarhetstestning. Modellera N/A N/A N/A Modeller används för att användarnas förutsäga effektiviteten i ett gränssnitt eller för att hantering jämföra olika versioner. MDI, Utvärderingstekniker 27 MDI, Utvärderingstekniker 28 Källa Göran Ejlertsson: Enkäten i praktiken. Studentlitteratur MDI, Utvärderingstekniker 29 MDI, Lena Palmquist 5