9. Bruger(venligheds)test

1. 9. Bruger(venligheds)test 25. marts, 2010 IT-Universitetet Ole Gregersen

2. Fra sidste gang • Informationsarkitektur • Tree Testing – en reel evalueringsmetode • TreeJack • Forelæsning 3 slides

3. Brugertest Hvorfor skal vi lave en brugertest? Skulle det være den bedste metode?

4. Begrundelser for test Fordi aktiv glemsel er en psykologisk umulighed: Designere kan ikke frigøre sig fra den viden, de har erhvervet sig under processen. Den eneste måde reelt at vurdere om: Brugerne oplever vores produkt som brugervenligt Produktet kan løse de opgaver/mål som brugerne har Produktet kan opfylde de mål vi har sat Alle vores designvalg var gode… Fordi kontekst har betydning for enkeltopgaven Fordi folks reaktioner ikke kan forudses fuldstændigt Gennemsnitsbrugeren findes ikke Hvordan handler ”vores” brugere? 4

5. Sådan foregår det (helt overordnet) Sæt en bruger foran en computer Stil opgaver til det der testes (Bed brugeren tænke højt) Observér udførelsen af opgaverne: Hvilke problemer opstår for brugeren Lyt til brugeren, er der erfaring at hente der. Deltagere: Moderator/testleder Bruger(e) Observatør(er) 5

6. Om tests generelt Test skal ikke bevise, de skal informere (Men nogle gange skal de også bevise) At test bør være en iterativ proces Sikre at produktet er: Nyttigt, relevant, formålstjenstligt Effektivt (alt efter hvordan det vurderes) Engagerende, skaber brugsglæde Har en brugervenlig interaktion Let at lære/huske/forstå I hvilken grad det lever op til kriterier og målsætning 6

7. Fejltagelser og misforståelser Brugertest sker ofte for lidt, for sent og af de forkerte grunde. Brugertest er ikke et afsluttende tjek eller godkendelse En brugertest er ikke en engangsfornøjelse Brugertest bør ikke stå alene Brugertest handler ikke kun om brug  Derfor: Test tidligt og test ofte Sammensæt test med andre metoder Overvej begrundelsen for at lave en brugertest 7

8. Variationer og metodiske forskelle Typen af det fysiske setup Typen af moderation Tænke-højt / Mind tape Antallet af brugere Segmentering og rekruttering Typen af data indsamlet Lokal test – fjerntest Modereret og umodereret test 8

9. Husk at: • Der kan teste på alt fra koncept og papir – til prototyper og færdige produkter

10. Kvalitet i en brugertest Moderator! Testopgaverne! Testdeltagere! ’Samtale’ under selve testen Skjult hjælp og andre uhensigtsmæssigheder Interpersonel kontakt mellem deltagere Debriefing Kommunikation med udviklingsteam Brugervenlig rapport 10

11. Den forkromede tilgang 11

12. KMD A/S ’Testcenter’ 12

13. Snitker og Co.

14. Fordele ved lab? Er det overhovedet pengene værd?

15. Kilde: Rolf Molich Dialogdesign.dk 15

16. Billig, nem, hurtig, enkel – mobilt? Et lokale, bærbar computer, lidt software, en mikrofon, eventuelt et webcam Få deltagere, rekrutteret fra arbejde, familie og venner Intet forstudie og enkel testplan Windows media encoder, Audacity, Camtasia Godt råd: Optag skærm i stedet for person… 16

17. Forberedelse Beslut hvem der skal være testpersoner Design testopgaver og spørgsmål: Lav et manuskript, med introduktion, opgaver og afslutning. Bestem et fysisk og digitalt setup Afprøv opgaver og test helt konkret og praktisk Analayser, diskutér og dokumenter resultater 17

18. Design af testopgaver Testens ”krop”

19. Design: Testopgaver: Er baseret på et mål der er relevant for deltageren (målgruppen) Har det rigtige omfang, ikke for bredt, ikke for specifikt Dækker spørgsmål der er vigtige for produktet og virksomhedens succes Mere specifikt: Mulige, det skal kunne lade sig gøre Relevante og realistiske I realistisk sekvens, ikke opdigtet. Har et endeligt og forudsigeligt sæt af mulige løsninger Har et tydeligt slut-punkt som brugeren kan genkende Fordrer handling, ikke mening Have en realistisk længde – de må ikke gå kold. 19

20. Gode testopgaver? Forestil dig, at du har et handicappet barn på 10 år. Du vil gerne finde det nærmeste museum og undersøge forholdene for handikappede. Brug søgefunktionen til at finde attraktioner i nærheden af din bopæl. Find en busforbindelse med bus 11, kl 12.43 fra Vanløse station og stå af på Jyllingevej. 20

21. Opgaveskabelon: 21

22. Design: Kvalitativ/kvantitativ Test metrikker Hvor mange fejl de laver (error count) Hvor tit de selv kommer videre (assists) Hvor mange der gennemfører (Task completion rate %) Tidsforbrug (Task Time ) Completion rate / Mean task time Metrikker bør komme fra usabilitymål… 22

23. Udførelsen – et par råd Kort invitation – Giv ikke for meget væk fra starten Sørg for at beskriv at det ikke deltageren der testes og at denne ikke kan lave fejl Start med noget opvarmning – ”kuglepen legen” eller en hurtig trunk test. Sørg for hurtig succes i første opgave. Noter observationer og giv dem en graduering når det er muligt. 23

24. Undervejs: Roller under testen Facilitator/testleder/moderator – afgørende funktion Logger - tager noter eller fører ’log’ Observatør(er) – ser på eller tager også noter Publikum – inviter altid alle med (bag spejl) Deltager(e) – dem der laver opgaverne 24

25. Undervejs: Moderator skal: Carolyn Snyder: Stewardesse, Sportskommentator og Forsker Være god ved forsøgspersonerne etisk og moralsk opførsel Leve sig ind i dem (empatisk) Se ”tankeboblerne” over brugernes hovedFølg op ikke-verbale udtryk Undgå af give hints/hjælp/vejledning Spørge ”hvorfor” en masse – eventuelt spørge ind til handlen Improvisere og være på – men holde formen  25

26. Undervejs: Moderator skal: Tænke i ”før og efter” brugerens handlinger Før: forventning – efter: forløsning Human Action Cycle Undgå at stille spørgsmål der indeholder en forhåndsbedømmelse – selv et lille “ja” kan påvirke Hold fokus på et emne af gangen Brug åbne spørgsmål og undgå binære spørgsmål Giv korte promts for at holde brugerens taleflow 26

27. Undervejs: Velegnede promts ”Hvad nu?” ”Hvad tænker du på?” ”Hvad skete der?” ”Hvad fik at vide?” (”Husk at tænke højt”…) 27

28. Undervejs: Uegnede promts ”Hvor er du havnet henne?” ”Hvad sidder du og leder efter?” ”Er du med på hvad der foregår?” ”Har du lagt mærke til at links ikke skifter farver når de har været ’besøgte’?” 28

29. Vi ser 3 korte eksempler Notér ting i synes stritter…

30. Afslutning: Velegnede sammenfatninger ”Er det logisk og overskueligt bygget op?” ”Kan du lide hjemmesidens udseende?” ”Er det noget du tror du vil kunne bruge til noget i det daglige?” ”Hvad synes du alt i alt om hjemmesiden?” Eventuelt spørgeskema som SUS eller SUMI – til at ”måle” tilfredsheden. 30

31. Opsamling & evaluering Sørg for at honorar eller gave matcher setup’et Sig pænt tak Få etableret mulig fremtidig dialog 31

32. Retrospektiv tilgang • Metodens største problemstilling: • Det er unaturligt at tænke højt • Men hvad er alternativet? • Retrospektiv tilgang • ”Mindtape” • Videoklip (optagelser fra skærm) • Beskrivelser af situationer • Eyetracking?

33. Analyse • Highlights – problemer prioriteret på alvorsgrad og frekvens – sammenfattet narrativt. • Resultat af metrikker • Empiri – lad den stikke frem i rapportering • Se Kuniavsky’s beskrivelse i kompendiet

34. Tak for nu Øvelse: Brugertest