TestForum 2014 2014-04-09. Robert Magnusson, Nordic Medtest, Karlstad Lars Palm, Temagon AB / Future Position X, Gävle

Relevanta dokument
Hur kvalitetssäkra komplexa IT-lösningar och vad är egentligen test?

Användbarhet. Geodataportalen 2.0 Beta. Testat av GeoTest. RAPPORT fastställd Geodataportalen 2.0 Beta testad för användbarhet

Användarcentrerad systemdesign

Utvärdering. Användbarhet. + beställarperspektivet! Innehåll. Varför?

Användarcentrerad systemdesign

Föreläsning 4 Identifiera krav och behov. Att läsa: Kapitel 10 i Rogers et al.: Interaction design

Användbarhetstestning

Fö: Användbarhetsutvärdering

Utvärdering. Användbarhetstest: Vad ska ni göra? Användbarhetstestning kontra heuristisk utvärdering. Användbarhetstestning

Användbarhetstestning. Användbarhetstestning. Användbarhetstestning vs heuristisk utvärdering. Varför testa?

Rapport av resultatet för användbarhetsutvärderingen av ekonomisystemet Visma Net

Bilaga 2. Rapport av resultatet för Användbarhetsutvärderingen av E-handelstjänsten Proceedo

Nordic MedTest. Tillväxtverket. Regionalt Innovationsarbete och Kluster Peter Furster Göran Österman

Olika syften. TDDD60 användbarhetstest. När passar vilken typ? Med eller utan användare

Norrlandicus Care Lab The Novel Test Method for Aging Society Innovations. Isabella Scandurra Madeleine Blusi Rolf Dalin


Innovationsimplementation

Upplägg. Fö: Användbarhetsutvärdering. Heuristisk utvärdering. 10 heuristiker (Nielsen) Hur många utvärderare?

Användarcentrerad systemdesign

Upplägg. Fö: Användbarhetsutvärdering. Heuristisk utvärdering HEURISTISK UTVÄRDERING. 10 heuristiker (Nielsen)

Användbarhetstestning. Samla in, analysera och presentera användbarhetsmått

Effektivt Nyttigt Självförklarande Kräver ingen manual Intuitivt Läcker design Vem som helst kan använda det. Ändamålsenligt. Farmor kan använda den!

Erfarenheter av användarfall vid utvärdering i strategisk upphandling

Systemering med användarfokus

GeoTest-projektet Slutrapport. Future Position X

Så upphandlar du användbara IT-system

Institutionen för Programvaruteknik och Datavetenskap IT-programmet Kandidatarbete i datavetenskap /DVC001. Bilagor

Användbarhetstestning. Användbarhetstestning. Användbarhetstestning. Användbarhetstestning. Användbarhetstestning vs heuris7sk utvärdering

Reglab Göran Österman Göran Karlström

Föreläsning 2: Datainsamling - Observation, enkät, intervju. Att läsa: Kapitel 7 i Rogers et al.: Interaction design

Användbarhetsutvärdering. TDDD80 Mobila och sociala applikationer

Testbara krav. SAST Syd Ställ gärna frågor under presentationen eller efteråt Åhörarkopior distribueras efteråt

Hur man kan testa komplexa integrationer av IT-system i praktiken. Henrik Emilsson Landstinget i Värmland

Patientens Egen Registrering (PER)

Frågetekniker. Föreläsning 3, Utvärderingstekniker MDI, Lena Palmquist 1. Än en gång: JEdit (Py Kollberg) Loggning. Tolkande dataanalys

Rapport av resultatet för användbarhetsutvärderingen av ekonomisystemet Raindance

Människa-datorinteraktion 1MD016, hösten 2011 Användarcentrerad systemdesign september 2011

Metoder för datainsamling

Användbarhetstestning. Användbarhetstestning. Användbarhetstestning vs heuristisk utvärdering. Varför testa?

UTVÄRDERING - VAD, HUR OCH VARFÖR? MALIN FORSSELL TOVE STENMAN

Testmiljö Norrköping Marianne Carlberg, deltagare Ann-Christine Larsson, projektledare

Användbarhets- utvärdering. Mattias Arvola

Användbarhetstestning. Johan Blomkvist

Inklusiv Design Design för Alla

Föreläsning 11, Planera utvärdering. Att planera utvärdering. Vetenskapliga experiment. Kapitel i kursboken

Utvärdering av gränssnitt särskilt befintliga. Hur utvecklar man användbara system? Användbarhet handlar om kvalitet

Interaktionsdesign som profession. Föreläsning Del 2

Internet och sociala medier. Anne-Marie Eklund Löwinder Kvalitets- och säkerhetschef,.se

Välkommen till NMTs miljöledningssystem

3/30/12. Föreläsning 2: Datainsamling - Observation, enkät, intervju. Stjärnmodellen. Översikt. Analys. Prototyper Krav. Design

Föreläsning 11, Mer utvärdering

Examensarbete på Siemens Elema AB

Stärk konkurrenskraften med effektiv HRM.

Utvärdering. 6 november 2002 Kap 10-11, , 13.5

Utvärderingsmetoder: Empiriska metoder. IT-universitetet febr MariAnne Karlsson

NORDIC MEDTEST VÅR TESTFILOSOFI HUR VI BIDRAR TILL SÄKRARE IT I VÅRDEN

Test av Metria Maps avseende Användbarhet och prestanda

ANVÄNDARTESTNING VID LULEÅ UB Ola Andersson Luleå universitetsbibliotek

Att utveckla, förvalta, och införa FGS:er Testmetodik

Palmbaserad datainsamling och databassynkronisering. Projektpresentation. 2D1954 Programutvecklingsprojekt Projektgruppen Harald

Teknisk testning för otekniska testare

Digital Strategi för Kulturrådet

Inlämning 2 - Tentamensfrågor

Kursen handlar om. Var används datorer och andra IT-stöd? Människa-datorinteraktion 1MD016, 5hp. T ex:

Talent Manager. Nordens största leverantör av HR- och rekryteringsverktyg +46 (0)

Kursen: Sjukvårdsarbete. Människa-datorinteraktion 5hp. IT-inst. / MDI-avd. Anders Jansson Lars Oestreicher Bengt Sandblad Bengt Göransson Thomas Lind

Testning som beslutsstöd

Fö 4: Utvärdering. Gästföreläsning. Muddy-cards resultat. Varför och vad? Varför? Vad? Mot vad? (Krav) Hur? IMPACT

Varför testar vi? Att skaka fram förankrade testuppdrag

Råd gällande vokabulärer för kommuners och landstings arbete med länkade öppna data

Mölnbackagatan 7A, Karlstad Karlstads kommun

Human Capital Management: investera i medarbetarna och skapa en kultur präglad av kontinuerlig utveckling

Interaktionsdesign och användbarhet Personas. Paper prototyping. » Metod för representation av användaren. » Metod för konceptutveckling

VÄLKOMMEN TILL TRIFFIQS VERKSAMHETSSYSTEM - TVS!

Undersökning av navigationsmenyer i Android 4.4

Föreläsning 2: Datainsamling - Observation, enkät, intervju. Att läsa: Kapitel 2 och 3 i Stone et al.: User Interface design and evaluation

Test av Metria Maps avseende Användbarhet och prestanda

TDDD80 Mobila och sociala applika1oner. Användbarhetsutvärdering

Processbeskrivning Test

Upphandling som verktyg för att ge fler tillgång till ny välfärdsteknik. MTVe 25 januari 2017 Annika Asplind Therese Hellman

ODIN Testdag Atlassians verktyg i en testorganisation Nordic Medtest

Stöd för att skapa intuitiva användargränssnitt

Idag. Prototyper och användbarhetsutvärdering. Vad prototyper prototypar. Olika sorters prototyper. Del 2 Prototyper Utvärdering Analytisk Empirisk

Kursöversikt Certifierad Mjukvarutestare

Användarcentrerad utveckling av fjärravlästa elmätare

Software Quality Requirements and Evaluation (SQuaRE) & Common Industry Format (CIF) for Usability snart finns det inga ursäkter längre...

^Synskadades. Yttrande över "Reboot - omstart för den digitala förvaltningen" SOU 2017:114 FI2018/00106/DF

Föreläsning 2: Datainsamling - Observation, enkät, intervju. Att läsa: Kapitel 2 och 3 i Stone et al.: User Interface design and evaluation

Nevenka Silfverhielm

HP ALM som stöd under implementationslivscykeln av standard applikationer Sarah Eriksson & Per Nordlander SAST

Division medicinska specialiteter

Redigeringsteknik och postproduktion

Gemensamt specificerade geodata för blåljusaktörer. Geoinfo 2014

Testa! Att tänka på inför, under och efter test. En praktisk handbok om testmetoder och prototypande.

Processbeskrivning Systemutveckling

IT i skolan 2015 FRÅN TEKNIK TILL RESULTAT

Patientsäkerhetsberättelse Sunnangårdens Gruppbostad

Datainsamling. Daniel Bosk. data.tex :33:45Z danbos

Sveriges innovationsmyndighet

Arbetsdokument: Att driva förändring med kommunikation

Transkript:

TestForum 2014 2014-04-09 Robert Magnusson, Nordic Medtest, Karlstad Lars Palm, Temagon AB / Future Position X, Gävle

NMT:s definition av testning Testning är en empirisk, teknisk undersökning i syfte att ta fram kvalitetsrelaterad information om en produkt åt intressenter 2

Dagens agenda Användbarhet - Vad är användbarhet? - Varför vill man testa användbarhet? Användbarhetstest - Hur testas användbarhet? - Vad blir output och hur hanterar man det? 3

Vad är användbarhet? Internationell standard, ISO 9241-11 Den grad i vilken användare i ett givet sammanhang kan bruka en produkt för att uppnå specifika mål på ett ändamålsenligt, effektivt och för användaren tillfredsställande sätt. (ISO 9241-11, 1998) 4

Användbarhetstest på LiV Pilot HR system (tidrapportering, semester, reseersättning m.m.) Självbetjäning på CSK Upphandling av nytt HR-system 5

Användbarhetstest NMT Okulär observation Test-rapport ISO 9241-11 Digital observation Måluppfyllelse Klarar/klarar inte Effektivitet Tidsåtgång Tillfredsställelse SUS-frågor Score card: Good (80-100), Fine (68-80), Pass (51-68), Fail (0-51) Video- & Ljudupptagning + musrörelser Kommentarer från testdeltagare 6

Pilot HR-system Testare Observatör FPX mentor Lärdomar Förberedelser Syfte Kunskap om systemet Testdata Kommunicera resultat 7

Användbarhetstest -Testpersoner -Fältstudie CSK Självanmälan Resultat: -Ta bort 19 i årtal -Ta bort nedsläckning av tangenter -Skylt med instruktioner -Skärm för integritet 8

Användbarhetstest -Testpersoner -Fältstudie CSK Självanmälan Resultat: -Ta bort 19 i årtal -Ta bort nedsläckning av tangenter -Skylt med instruktioner -Skärm för integritet 9

Upphandling nytt HR-system Del i bedömning av lämpligt HR-system 15 st LiV-personal 10 st LiV HR personal Roller: Chef & Medarbetare 6-11 scenarier Måluppfyllelse, Effektivitet & Tillfredsställelse Kommentarer viktigt! 10

Erfarenheter Vilken data får/kan användas Viktigt att fånga upp testpersoners kommentarer Viktigt att observatörer och testledare kan systemet som skall testas och vet när uppgifterna lyckades Minst 13-15 testpersoner (statistiskt riktigt) Syfte bestäms innan test God planering ger bra resultat Utbildning eller inte innan test? 11

Effektivare vård & högra patientnytta Vårdens process vs system Stödjande verktyg Användarvänlighet intuitiv interaktion spar tid Patient involverad Självanmälan & Mina vårdkontakter (1177) Minskad tid vid system ger mer tid för patientrelation 12

Framtida möjligheter med användbarhetstest Fånga upp åsikter från vårdens personal Kombinerat med förbättringsprocess Användbarhetstest på prototyper Vårdens processer ihop med tänkta system Kravställning Trendkurva för vårdens leverantörer 10 min är mycket i vården som har många anställda! 13

Våra testresurser hos Future Position X Testfall Testpanel Testkompetens Programvara & licenser Testmiljö Tekniska tester Affärstester Transformationtester Prestandatester Datakvalitet Användbarhetstester Cost/benefit (?) Dataset Metadata Datatjänster GeoTest Lab (Inspire-direktivet) 14

Varför testa användbarhet? Produkter utformade efter användares behov. Göra produkten bättre! 15

Användbarhetstest Mål; bedöma hur användbart ett system eller applikation är. 16

Användbarhetsmått 3 Nyckelord Effectiveness [Måluppfyllelse] Nogrannhet och fullständighet med vilken användarna uppnår givna mål. (ISO 9241-11, 1998) Efficiency [Effektivitet] Resursåtgång i förhållande till den nogrannhet och fullständighet med vilken användarna uppnår givna mål (ISO 9241-11, 1998) Satisfaction [Tillfredsställelse] Frånvaro av obehag samt positiva attityder vid användningen av en produkt (ISO 9241-11, 1998) 17

Frågeformulär, SUS & SUMI SUS System Usability Scale (Brooke, 1986) Består av tio påståenden. En slutpoäng SUMI Software Usability Measurement Inventory (Kirakowksi & Corbett, 1993) Består av femtio påståenden. Sex olika kategorier poängsätts. 18

SUMI, sex kategorier 19

Användbarhetstest, Översikt 20

Exempel Testuppgifter 21

Exempel Effectiveness & Efficiency 22

Exempel SUMI 23

Analys Analysera data 24

Rapportering Rapportera till kund Mall= Common Industry Format 25

Våra tester Det vi erbjuder i dagsläget 2 typer; On-site och On-line On-site Test sker på plats. On-line Test sker online. 26

On-site tester 27

On-line tester 28

GeoTest Användbarhetsprocess 29

På horisonten Rapportering Nordic MedTest / Future Position X 30

Stort Tack! Tack! amir.jonis@fpx.se