7. Brugervenlighedstest/usabilitytest

1. 7. Brugervenlighedstest/usabilitytest ITU F2008

2. Tidsplan for brugertest på dette kursus • Ugerne 10, 11 (påskeugen) og 12 (besøg på KMD) • 3 uger til at rekruttere, planlægge, afprøve, foretage test, evaluere og dokumentere. • Se Kuniavsky kapitel 10 om: • Rekruttering • Valg af features der ønskes testet • Design af testopgaver

3. Forskellige begrundelser for test • Den eneste måde reelt at vurdere om: • Brugerne oplever vores produkt som brugervenligt • Produktet kan løse de opgaver/mål som brugerne har • Produktet kan opfylde de mål vi har sat • Alle vores designvalg var gode… • Fordi aktiv glemsel er en psykologisk umulighed: • Designere kan ikke frigøre sig fra den viden, de har erhvervet sig under processen. • Fordi folks reaktioner ikke kan forudses fuldstændigt • Gennemsnitsbrugeren findes ikke.

4. Sådan foregår det typisk (helt overordnet) • Sæt en bruger foran en computer • Stil opgaver til det der testes • Bed brugeren tænke højt • Lyt til og observer udførelsen af opgaverne: Hvilke problemer opstår for brugeren • Deltagere: • Moderator/testleder • Bruger(e) • Observatør(er)

5. Om tests generelt • Test skal ikke bevise, de skal informere • Testning er en iterativ proces • Sikre at produktet er: • Nyttigt, relevant, formålstjenstligt • Effektivt (alt efter hvordan det vurderes) • Engagerende, skaber brugsglæde • Har en brugervenlig interaktion • Let at lære/huske/forstå • Og lignende kvalitetsegenskaber

6. Typiske fejltagelser og misforståelser • Brugertest sker ofte for lidt, for sent og af de forkerte grunde: • Brugertest er ikke et afsluttende tjek eller godkendelse • En brugertest er ikke en engangsfornøjelse • Brugertest bør ikke stå alene • Fokusgrupper forveksles med brugertestning • Derfor: • Test tidligt og test ofte • Sammensæt test med andre metoder

7. Variationer og metodiske forskelle • Typen af det fysiske setup • Typen af moderation • Tænke-højt • Antallet af brugere • Segmentering og rekruttering • Typen af data indsamlet • Lokal test – fjerntest • Modereret og umodereret test

8. Kvalitet i en brugertest • Testopgaverne • Valg af testdeltagere – også moderator • ’Samtale’ under selve testen • Skjult hjælp og andre uhensigtsmæssigheder • Interpersonel kontakt mellem deltagere • Debriefing • Kommunikation med udviklingsteam • Brugervenlig rapport

9. Dogmer • Test med bare 1 bruger er 100% bedre end ikke at teste nogen • Det kan være bedre at teste 1 bruger i begyndelsen end 50 mod slutningen

10. Kilde: Rolf Molich Dialogdesign.dk

11. Højere budget (>100.000 kr)

12. KMD • Testcenter

15. Fordele ved lab?

16. Billig, nem, hurtig, enkel – mobilt? • Et lokale computer, software, mikrofon, webcam • Få deltagere, rekrutteret fra arbejde, familie og venner • Intet forstudie og enkel testplan

17. Kilde: Rolf Molich Dialogdesign.dk

18. ”Lost-our-lease test” Kilde: Steve Krug • Billig i drift - gentages ofte under udviklingsproces: • test konkurrenternes sider under projektplanlægningen (giver træning) • test ”get it” og navngivning med grov-skitser • test ”get it” og basal navigation med udkast til side-designs • test ”get it” og nøgle-opgaver med html prototype • test nøgle-opgaver med et funktionsdueligt site • ”Næste dør” test af alle nye sider • 13 test m. 3 brugere af 700 kroner = 27.300 kr.

19. Testrum, lavt budget

20. Design af testopgaver Testens krop

21. Design: Forberedelse • Det handler først om, med HVEM og HVAD der skal testes. • Lav et manuskript, med introduktion, opgaver og afslutning. • Bestem jer for et fysisk og digitalt setup • Afprøv opgaver og test helt konkret og praktisk • Evaluér både indhold og udførelse

22. Design: Testopgaver: • Er baseret på et mål der er relevant for deltageren (målgruppen) • Har det rigtige omfang, ikke for bredt, ikke for specifikt • Dækker spørgsmål der er vigtige for produktet og virksomhedens succes • Mere specifikt: • Mulige, det skal kunne lade sig gøre • Relevante og realistiske • I realistisk sekvens, ikke opdigtet. • Har et endeligt og forudsigeligt sæt af mulige løsninger • Har et tydeligt slut-punkt som brugeren kan genkende • Fordrer handling, ikke mening • Have en realistisk længde – de må ikke gå kold.

23. Design: Prioritering af testopgaverne (Kuniavsky, side 269)

24. Design: Eksempel på opgaveskabelon (Snyder, paper prototyping, side 133 – se www.paperprototyping.com)

25. Design: Kvalitativ/kvantitativ • Man kan godt tilføje nogle kvantitative målinger (metrikker): • Hvor mange fejl de laver • Hvor tit de selv kommer videre • Hvor mange der gennemfører • Tidsforbrug? Det kan fx være metrikker beskrevet i en kravspecifikation eller et udbud.

26. Udførelsen • Kort invitation – Giv ikke for meget væk fra starten • Sørg for at beskriv at det ikke deltageren der testes og at denne ikke kan lave fejl • Start med noget opvarmning – ”kuglepen legen” eller en hurtig trunk test. • Noter observationer og giv dem en graduering når det er muligt. • Afsluttende interview/debriefing

27. Undervejs: ”Tænke højt” protokol • Autentisk afdækning af kognitive processer • Giver forskellige resultater afh. af forsøgspersonens evner og sværhedsgraden • Kan influere på problemløsningen – indbygget dilemma • Uforudsigelig og påvirket af situationen • Alternativt ’Mind tape’ eller andre retrospektive metoder

28. Undervejs: Roller under testen • Facilitator/testleder/moderator – afgørende funktion • Logger - tager noter eller fører ’log’ • Observatør(er) – ser på eller tager også noter • Publikum – inviter altid alle med! • Deltager(e) – dem der laver opgaverne • Hvor mange deltagere?

29. Startup: Interview-teknikker, 1 • Usability interviews er oftest formelle og følger en standardstruktur tilrettelagt på forhånd - sjældent “åbne”: • Timeglasmodel • Introduktion • Opvarmning • Generelle spørgsmål • Dybdefokus • Tilbageblik • Opsamling

30. Startup: Interview-teknikker, 2 • Definer dine centrale begreber - og brug helst dem som brugeren anvender selv • Lad være med at fremtvinge meninger • Genformulering af brugerudsagn som spørgsmål (”Papegøjeteknikken”) • Følg op med eksempler - når du har fået et svar • Sørg for at forbinde forklaringer til de foreliggende materialer

31. Undervejs: Moderator skal: • Carolyn Snyder: Stewardesse, sportskommentator og forsker • Være god ved forsøgspersonerne • etisk og moralsk opførsel • Leve sig ind i dem (empatisk) • Se ”tankeboblerne” over brugernes hovedFølg op ikke-verbale udtryk • Undgå af give hints/hjælp/vejledning • Spørge ind: Bore - bore – bore • Spørge ”hvorfor” en masse • Improvisere og være på

32. Undervejs: Moderator skal: • Tænke i ”før og efter” brugerens handlinger • Før: forventning – efter: forløsning • Undgå at stille spørgsmål der indeholder en forhåndsbedømmelse • Hold fokus på et emne af gangen • Brug åbne spørgsmål og undgå binære spørgsmål • Giv korte promts for at holde brugerens taleflow

33. Undervejs: Velegnede promts • ”Hvad nu?” • ”Hvad tænker du på?” • ”Hvad skete der?” • ”Hvad fik at vide?” • ”Husk at tænke højt”…

34. Undervejs: Uegnede promts • ”Hvor er du havnet henne?” • ”Hvad sidder du og leder efter?” • ”Er du med på hvad der foregår?” • ”Har du lagt mærke til at links ikke skifter farver når de har været ’besøgte’?”

35. Afslutning: Velegnede sammenfatninger • ”Er det logisk og overskueligt bygget op?” • ”Kan du lide hjemmesidens udseende?” • ”Er det noget du tror du vil kunne bruge til noget i det daglige?” • ”Hvad synes du alt i alt om hjemmesiden?”

36. Opsamling & evaluering • Sørg for at honorar eller gave matcher setup’et • Sig pænt tak • Få etableret mulig fremtidig dialog I gruppen: • Diskuter resultat og noter med det samme • Evaluer og optimer testen • Evaluer også deltagerne

37. Afrapportering • Diagnostisk information: Fejlene • Preskriptiv information:Hvad der skal gøres for at rette disse • Overvej som altid modtagergrupper • Start med et opsamling af de vigtigste ting: Prioritering • Giv kort beskrivelse af metoden: Reliabilitet og validitet • Derefter gennemgang af selv testresultater

38. Eksempel på tidsplan, 3 uger (Kuniavsky)

39. Alternativer Brugertest af mobile enheder

40. Noldus.com

41. Tak for i aften • Efter påske, besøg på KMD i Ballerup • Tog fra hovedbanen til malmparken + kort gåtur 15 min. • Dem der følges med Charlotte får turen betalt • Indgang syd – vær der 16.45, program til ca. 19.00 • Gæstekort • Opdeling i to grupper: Testcenter / OGR • To grupper skal have testopgaver med til tests • KMD giver en sandwich og en lille gave • Vi ses...