Usability testing Field studies CHAT-opsamling Opgaveskrivning

1. Usability testingField studiesCHAT-opsamlingOpgaveskrivning ITU: Usability med projekt i brugercentreret design, forår 2008 v/ Egil Boisen, 9/4

2. Dagens program • 9 – 10: Usability: evalueringstilgange • Fra eksperimenter til participatory designing • gruppediskussion ud fra MEDLINE PLUS-eksempel (PRS, 2007, kap.14) • 10 – 11: CHAT-opsamling • CHAT som tilgang til analyse af data fra field studies • 11 – 12: Opgaveskrivning • Blooms taxonomi for læringstrin; gruppediskussion ud fra DSB-opgaven

3. Usability: evaluerings-tilgange • Fra kontrol/ kvantitativ til eksplorativ/ kvalitativ tilgang • Kontrollerede eksperimenter • Reviews • QUIS • Usability testing • Interviews • Field studies • Participatory design

4. Usability: evaluerings-tilgange • Fra kontrol/ kvantitativ til eksplorativ/ kvalitativ tilgang • Kontrollerede eksperimenter • Eks.: Fitts Law => Design guidelines (user interface design) • Reviews • QUIS • Usability testing • Interviews • Field studies • Participatory design

5. Usability: evaluerings-tilgange • Fra kontrol/ kvantitativ til eksplorativ/ kvalitativ tilgang • Kontrollerede eksperimenter • Eks.: Fitts Law => Design guidelines (user interface design) • Reviews • QUIS • Usability testing • Interviews • Field studies • Participatory design

6. Usability: evaluerings-tilgange • Fra kontrol/ kvantitativ til eksplorativ/ kvalitativ tilgang • Kontrollerede eksperimenter • Reviews (‘statiske metoder’) • Heuristisk evaluering: af produktetets fremtrædelse, struktur og udarbejdelse/ baggrundsmateriale • Cognitive walkthroughs • QUIS • Usability testing • Interviews • Field studies • Participatory design

7. Usability: evaluerings-tilgange • Fra kontrol/ kvantitativ til eksplorativ/ kvalitativ tilgang • Kontrollerede eksperimenter • Reviews • QUIS • Post-test standard-spørgeskema om user satisfaction • med efterfølgende interview • Usability testing • Interviews • Field studies • Participatory design

8. Usability: evaluerings-tilgange • Fra kontrol/ kvantitativ til eksplorativ/ kvalitativ tilgang • Kontrollerede eksperimenter • Reviews • QUIS • Usability testing • Fra laboratorietests til arbejde i felten • Observationer, Tænke-højt-tests • Remote testing • Interviews • Field studies • Participatory design

9. Laboratorie set up Fordele: Kontrol Ulemper: Dyrt Langt fra praksis Vanskeligt ved mobile tekn. Fokus på ‘tasks’ og ikke brugskontekst/ sammenhænge

10. Usability: evaluerings-tilgange • Fra kontrol/ kvantitativ til eksplorativ/ kvalitativ tilgang • Kontrollerede eksperimenter • Reviews • QUIS • Usability testing • Interviews • Individuelle (dybde-) interviews • Fokusgrupper • Klassiske (direkte og indirekte) • Virtuelle • ‘Friction groups’ • Nominale grupper • Field studies • Participatory design

11. Usability: evaluerings-tilgange • Fra kontrol/ kvantitativ til eksplorativ/ kvalitativ tilgang • Kontrollerede eksperimenter • Reviews • QUIS • Usability testing • Interviews • Field studies • Observationer i felten • Før implementering => on-going relationship • Nu&her => logitudinale undersøgelser • Participatory design

12. Field studies (1) • Fokus på praksis • Uden for laboratoriet overlapper ‘tasks’/ redskabsbrug hinanden i meningsfulde helheder, der konstant obstrueres • Kontekst (forskellige dimensioner) • Fra få minutter til en længere årrække • Case studier • Metoder • Observed behavior (field notes, video) • Interviews • Diaries • ESM

13. Field studies (2) • Findings (mere-end usability) • Brugskontekst nu&her • Breakdowns i sammenhænge (ikke kun tasks) • ‘Appropriation’ (tilegnelse) over tid • Læring, motivation, hooked-ness • Reports • Vignetter, mønstre, narrativer • modeller (i stil med Engeströms trekant) • Hvor meget skal indsamles? • Videnskab: looking for ‘black swans’ • Cost benefit: guerilla-metoden

14. Usability: evaluerings-tilgange • Fra kontrol/ kvantitativ til eksplorativ/ kvalitativ tilgang • Kontrollerede eksperimenter • Reviews • QUIS • Usability testing • Interviews • Field studies • Participatory design

15. Participatory design • Skandinavien, 1980’erne • Demokratisk tilgang til design • Brugeren designer sit eget værktøj • Metametode: iterativt design • Opgør med vandfalsmodellen • Metoder: • Fokusgrupper • Workshops • Interessenter mødes ‘fladt’ til etablering af dokument om ‘needs’ og ‘visions’

16. CHAT-opsamling

17. CHAT • Cultural Historical Activity Theory (CHAT) • Principper • En praksis-orienteret psykologi (post-kognitivisme) • Object transformation • ‘Virksomheder’ er bestemt ved deres genstand/ objekt (Leontjev; materialistisk psykologi) • Virksomhedens tre aspekter: • Motive – goals – conditions • Development • Kigge på breakdown-situationer (conditions/ goals) • Zonen for nærmeste udvikling • Mediering • Kulturhistorisk transformation

18. CHAT: aspects of activity activity ~ motive  ↓  ↓ action ~ goal  ↓  ↓ operation ~ condition Three aspects of activity (as illustrated by Kuutti, 1996)

19. CHAT • Cultural Historical Activity Theory (CHAT) • Principper • En praksis-orienteret psykologi (post-kognitivisme) • Object transformation • ‘Virksomheder’ er bestemt ved deres genstand/ objekt (Leontjev; materialistisk psykologi) • Virksomhedens tre aspekter: • Motive – goals – conditions • Development • Kigge på breakdown-situationer (conditions/ goals) • Zonen for nærmeste udvikling • Mediering • Kulturhistorisk transformation

20. x o s CHAT: mediation (1) Tool Symbol A model of the principle of mediation, adapted from Vygotsky 1978, p.41.

21. artefact subject object rules community division of labor CHAT: mediation (2) What, how, why, where-to Engeström’s expanded model of the structure of human activity systems for analysing contradiction, which are seen as chances of focused development of the system: ‘expansive learning’ (Engeström 1987, p.78).

22. CHAT • Cultural Historical Activity Theory (CHAT) • Principper • En praksis-orienteret psykologi (post-kognitivisme) • Object transformation • ‘Virksomheder’ er bestemt ved deres genstand/ objekt (Leontjev; materialistisk psykologi) • Virksomhedens tre aspekter: • Motive – goals – conditions • Development • Kigge på breakdown-situationer (conditions/ goals) • Zonen for nærmeste udvikling • Mediering • Kulturhistorisk transformation

23. Kulturhistorisk transformation • Præmis: • Mediering: object transformation er betinget af redskaber • I anden potens • En kulturel mediering kan have sig selv som objekt (object transformation)

24. Engeström-eksemplet

25. Engeström-diskussion • Hvad er læringsudfordringen for patienten? • Forskellen på læring 1 og læring 2 • At få balance i klodser (eksempel) • At finde en måde at stille dem på så de balancerer • Læring 1 • At lære deres tyngdepunkt at kende, eksperiementere, også at ville få dem til at falde • Læring 2 • Rottens ‘trial and error’ • ikke en betinget respons der kan blive aflært, men en medfødt læring 2-måde

26. Blooms taxonomiKilde: http://www.vufintern.dk/bln05/Studiemappe/STUDIEKOMPETENCER/blooms-taxonomi.htm

27. Blooms taxonomi (2)

28. Blooms taxonomi og problemorienteret projektarbejde (1)

29. Blooms taxonomi og problemorienteret projektarbejde (2) • Ovenfor er Blooms taxonomi forsøgt appliceret på en opgaves typiske, overordnede struktur (eb). • Blot for at illustrere idéen at et projekt indbefatter alle trin; listen af opgave-elementer bør ikke tages for alvorligt. • De enkelte trin kan også ses som indfoldet i hvert enkelt trin • eksempelvis kan problemformuleringen være teoretisk vinklet, hvilket igen kan være resultat af en analyse af forskellige teorier.