Geodataportalen 2.0 Beta Testat av GeoTest Användbarhet RAPPORT fastställd 08-02-2011 Geodataportalen 2.0 Beta testad för användbarhet Testat av GeoTest, en nationell resurs vid Future Position X Bilagor 1 Teknisk rapport Usability test of the Geodata Portal 2 PPT-presentation
INNEHÅLL 1 Uppdraget 2 Metod 3 Resultat o slutsatser 4 Kommentarer
1. Uppdraget 2-4 november 2010 genomfördes användbarhetstest av Geodataportalen 2.0 Beta baserat på standarden ISO 9241-11, standarden för användbarhet. Testet utfördes vid GeoTest lab hos Future Position X på uppdrag av Lantmäteriet och Geodataprojektet samt i samarbete med Institutet för Humanteknologi, IHT. Om GeoTest GeoTest är en genomförande- och utvecklingsmiljö för test- och valideringstjänster inom geodataområdet. GeoTest bedömer huruvida de geodatatjänster som testas är användbara och av rätt kvalitet och att de följer standards. Om Geodata.se Geodataportalen är en ingång till webbaserade geodata och tjänster. Portalen ger möjlighet att söka, titta på och ladda ner geodata från olika källor. Målet med Geodataportalen är att visa vad som finns och var det finns. Via portalen kommer användare att på ett enkelt och samlat sätt nå många organisationers tjänster och geodata. Geodataportalen riktar sig främst till professionella användare. Om Future Position X (FPX) FPX är en klustermiljö för innovativ användning av Geografisk IT med fokus på att ta fram användarvänliga produkter och tjänster för att fatta trygga beslut. FPX roll är att vara en oberoende arena för test, utveckling och marknadsföring av Geografisk informationsteknik, tjänster och kunskap. FPX tillhandahåller en unik test- och verifieringsmiljö för Spatial Data Infrastructure (SDI) GeoTest- som är en del i den nationella geodatastrategin. Om Institutet för Human Teknologi (IHT) IHT är en ideell förening, bildad av: NITA - Nationellt IT-användarcentrum vid Uppsala Universitet, Bollnäs Kommun och World Internet Institute som sysslar med forskning och utbildning inom tillgänglighet och användbarhet. IHT genomför tester och analyser ur tillgänglighets och användbarhetsperspektiv samt rådgivning i hur befintliga miljöer, produkter och tjänster kan anpassas för att bli mer tillgängliga och användbara.
IHTs syn på användbarhet är baserad på standarden ISO-9241-11. Fritt översatt: "Den grad i vilken användare i ett givet sammanhang kan bruka en produkt för att uppnå specifika mål på ett ändamålsenligt, effektivt och för användaren tillfredsställande sätt". Graden av användbarhet är alltså: Hur ändamålsenligt målet uppnås Hur effektivt det uppnås, det vill säga den grad av ansträngning som krävs, ju mindre ansträngning desto bättre effektivitet. Hur stor tillfredställelse användaren upplever, hur mycket positiva känslor produkten, varan, tjänsten frambringar vid användandet. IHT bedriver forskning i samarbete med Linköpings universitet, KTH i Stockholm och NHV, Nordiska högskolan för folkhälsovetenskap. 2. Metod Testet utgick från två grundläggande standarder på området användbarhet ISO 9241-11 (1998) Riktlinjer för användbarhet ISO 9241-210 (2010) Användarcentrerad utveckling för interaktiva system I testet mättes effektivitet och hur nöjda användarna var. Inbjudna till testet var personer ur kategorin registrerade användare. Varje testdeltagare genomförde testet under en dag. Testet genomfördes på ett så likvärdigt sätt vid alla tillfällen som möjligt. Inga direkta avvikelser inträffade i genomförandet vid de olika tillfällena. 14 personer genomförde testet varav: Alla hade mer än två års erfarenhet av GIS (självuppskattning) Alla var registrerade användare på geodataportalen 6 personer hade besökt geodataportalen minst en gång Två kvinnor och 12 män i åldern 30-50 år Alla kom från myndigheter eller kommuner
Testpersonerna ombads genomföra 11 uppgifter Uppgift Beskrivning 1 Öppna Geodataportalen 2 Sök efter en datakälla genom att ange en fritext 3 Sök efter datakällor genom att ange en kategori 4 Sök genom att ange en geografisk omfattning 5 Sök genom att skriva in en fritext och ange en kategori 6 Sök genom att skriva in en fritext och ange en geografisk utbredning 7 Sök genom att ange en kategori och en geografisk utbredning 8 Sök genom att skriva in en fritext, samt ange en geografisk utbredning och en kategori 9 Visa och ta bort en web-karttjänst 10 Lägg till en WMS genom att ange webbadressen 11 Arbeta med lager och karta i denna nyligen lagda WMS Vid testet registreras digitalt bild- och ljudupptagningar på testpersonerna samt musrörelser och tidtagning för genomförande av uppgifterna. Det användes sedan för att upptäcka eventuella problemområden i portaldesignen. Ett standardiserat frågeformulär, Software Usability Measurement Inventory 1 (SUMI), användes för att mäta deltagarnas nöjdhet på Geodata.se i slutet av testet. 1 SUMI är en de facto standard och beprövad metod för att mäta mjukvarukvalitet från slutanvändarens synpunkt. Se mer http://sumi.ucc.ie/sumipapp.html
3. Resultat och slutsatser Resultaten från SUMI-enkäten visar att i genomsnitt var deltagarna nöjda med geodataportalen. Men graden varierar bland deltagarna. I allmänhet hade deltagarna olika föreställningar av olika uppgifter. Alla deltagare kunde framgångsrikt öppna geodataportalen. Svårigheter uppstod när de skulle söka datakälla genom att ange en kategori. I genomsnitt fullföljde 76% - 77% uppgifterna att söka datakällor genom att ange kategori och geografisk utbredning. Dock lärde man sig snabbt från dessa svårigheter och uppgifterna gällande att söka genom att ange flera villkor fullföljdes i större utsträckning. Uppgifterna gällande WMS-tjänster, vilket var nytt för testpersonerna, fullföljdes i lägre utsträckning. Några deltagare hade en låg grad av fullföljande av uppgifterna medan andra tog lång tid på sig att genomföra dem. Nedan summeras uppgifterna Uppgift Medelvärde Fullföljande Andel Medelvärde Genomförande Tid 1 Öppna Geodataportalen 100% 0:01:08 2 Sök efter en datakälla genom att ange en fritext 100% 0:03:25 3 Sök efter datakällor genom att ange en kategori 76% 0:03:39 4 Sök genom att ange en geografisk omfattning 77% 0:06:45 5 Sök genom att skriva in en fritext och ange en kategori 93% 0:02:20 6 Sök genom att skriva in en fritext och ange en geografisk utbredning 96% 0:02:30 7 Sök genom att ange en kategori och en geografisk utbredning 82% 0:02:32 8 Sök genom att skriva in en fritext, samt ange en geografisk utbredning och en kategori 89% 0:02:37
9 Visa och ta bort en web-karttjänst 91% 0:09:38 10 Lägg till en WMS genom att ange webbadressen 75% 0:06:32 11 Arbeta med lager och karta i denna nyligen lagda WMS 82% 0:06:58 Mönstret av resultaten indikerar att denna version av Geodata.se är lite svår att använda för nya användare, även om de är erfarna i att använda GIS. Även om testpersonerna kunde lära sig rätt sätt att använda portalen kan följande områden beaktas för förbättringar: Organisation av olika sökfunktioner Portalen ger två sätt att organisera sökfunktioner, enkel och avancerad. Vid testet var den avancerade standard. Tre olika sökfält syntes vertikalt på skärmen, det vill säga fri textsökning, datakälla och geografiska utbredning. Då prompten för inmatade sökrriterier inte är synligt aktiv tenderar användarna att glömma bort att rensa tidigare inmatade sökkriterier. Detta skapar problem för pågående sökning då tidigare inmatade kriterier kan påverka den pågående sökuppgiften. Google-liknande sökfältet Deltagarna använde sökrutan på samma sätt som i Google, dvs fyllde i såväl fritext såsom datakatalog eller geografiskt namn. Här svarar i nuläget Geodataportalen bara på text som exakt stämmer överens med informationen i titeln på metadatat. Begränsning av geografisk utbredning Geodataportalen erbjuder 3 sätt att begränsa den geografisk utbredning. I detta test valde de flesta deltagarna att använda sök ortnamn och ett fåtal använde avgränsaren på kartan. Fälten för koordinater skapade förvirring i vad de var till för och enstaka deltagare skrev in ortnamn där. Otydlig presentation av sökresultat Symbolerna för att särskilja olika typer av datakällor är inte intuitiva för användarna som misstar sig på betydelsen av dem De flesta av deltagarna försökte klicka i fält-namnen på sökresultaten, dock fungerar bara fältet titel medan länk och typ inte fungerar. Skapar förvirring.
Gömda WMS-tjänster Funktioner är svåra att hitta och ens veta om då de är dolda som default Knappen för att lägga WMS manuellt på kartan ligger i verktygsfältet under kartan vilket gör att den riskerar att bli svår att ens upptäcka bland de andra knapparna på verktygsfältet som inte är relevanta för den operationen För att få information om ett specifikt objekt måste just det kartlagret aktiveras vilket gör att ovana GIS-användare kan få svårt att genomföra detta 4. Kommentarer Testet av geodataportalen utfördes på en betaversion varvid ett utvecklingsarbete pågick. Delar av vad testresultaten visade hade redan identifierats och var vid testets slut redan åtgärdade.
GeoTest är en gemensam satsning som bidrar till en kvalitetssäkrad infrastruktur för geodata. GeoTest erbjuder test av Transformation Prestanda Användbarhet Utveckling av ytterligare tjänster pågår och kommande test som planeras erbjudas är kostnads-nytto analys samt utvecklade test inom datakvalitet. Verksamheten drivs genom Högskolan i Gävle Högskolan i Gävle har 12 000 studenter, mer än 40 utbildningsprogram och cirka 1 000 kurser inom humaniora, samhälls- och naturvetenskap samt teknik. Ett profilområde för högskolan är Geomatik och samarbetet i GeoTest säkerställer akademiskt underbyggda och forskningsmässigt aktuella metoder och processer för genomförande av testerna. Lantmäteriet Lantmäteriet har samordningsansvar för geodata och har utarbetat en nationell geodatastrategi för den samlade informationsförsörjningen inom geodataområdet. Ansvaret omfattar bland annat frågor om produktion, samverkan och utveckling för att på sikt skapa en nationell infrastruktur för geodata. GeoTest är en del i den nationella geodatastrategin. Future Position X, FPX FPX bygger Europas ledande klustermiljö för innovativ användning av Geografisk IT. FPX roll är att vara en oberoende arena för test, utveckling och marknadsföring av Geografisk IT, tjänster och kunskap. FPX är värd för GeoTest under uppbyggnadsskedet och delfinansierar GeoTest genom sina medlemmar. Kontakta GeoTest info@geotest.se www.geotest.se