270 likes | 406 Views
Testmetoder. Hvorfor teste?. Fordi aktiv glemsel er en psykologisk umulighed ! Designere kan ikke frigøre sig fra den viden, de har erhvervet sig under processen Fordi man ofte ikke selv er målgruppen for produktet. Fordi folks reaktioner ikke kan forudses fuldstændigt.
E N D
Testmetoder Usability E2002, IT-højskolen CPH, Paulin Hansen
Hvorfor teste? • Fordi aktiv glemsel er en psykologisk umulighed ! Designere kan ikke frigøre sig fra den viden, de har erhvervet sig under processen • Fordi man ofte ikke selv er målgruppen for produktet. • Fordi folks reaktioner ikke kan forudses fuldstændigt Usability E2002, IT-højskolen CPH, Paulin Hansen
Strategiske grunde til tests • Bestyrelsen: ”Hvad kan vi forvente at få igen for alle de penge vi har brugt til at udvikle vores nye version?” • Salgsafdelingen til webmasteren: ” Kan du ikke skaffe mig nogle gode kundeemner via vores hjemmeside?” • Webmasteren: ”Vi har en stigende trafik, men de fleste er bare lige inde og kigge. Hvad kan jeg gøre for at holde på dem?” • Salgschefen:”Hvordan får jeg overbevidst direktionen om, at det er nødvendigt at bruge tid og penge på udvikling af en ny grænseflade?” Usability E2002, IT-højskolen CPH, Paulin Hansen
Empiriske metoder (1) • Samtaler med et privat kamera • Fælles udforskning • Fokus-grupper • Brugerworkshops • Tænke-højt-protokoller • Hændelses-rapporter • Brugsliste (feature checklists) Usability E2002, IT-højskolen CPH, Paulin Hansen
Empiriske metoder (2) • Logning af systembrug • Feltobservationer • Spørgeskemaer • Interviews • Værdifastsættelse-metoden (validation method) • Kontrollerede eksperimenter Usability E2002, IT-højskolen CPH, Paulin Hansen
Ikke-empiriske metoder • Opgaveanalyse (task analysis) • Property checkliste (mange overordnede lighedspunkter med heuristisk evaluering) • Ekspertvurderinger (både domæne og HCI) • Kognitive gennemgange Usability E2002, IT-højskolen CPH, Paulin Hansen
Timing af tests • Fokusgrupper • Spørgeskemaer - mailpushs • Tidlig prototype-test • Kontinuerlige brugerpaneler under udviklingsproces • Brian tests • Stress load test • Post test efter log-analyser Usability E2002, IT-højskolen CPH, Paulin Hansen
Test af hjemmesider • Heuristisk evaluering • Brugertest (tænke-højt) • Spørgeskema-undersøgelser • Logfilanalyse Usability E2002, IT-højskolen CPH, Paulin Hansen
Brugertest (tænke højt) • Rollefordeling: • A: Interviewer • B: Video/Lyd(!)-ansvarlig • C: Reflekterer over A - noterer gode og mindre gode spørgsmål - holder øje med tiden! • D: Noterer tidspunkter for interessante episoder m. overskrift • E: Noterer tidspunkt for interessante episoder m. overskrift Usability E2002, IT-højskolen CPH, Paulin Hansen
Interviewteknik • Åbent: ”Hvordan bruger du internettet i dit arbejde?” • Lukket: ”Har du set denne side før?” • Lukkede og ledende spørgsmål har ofte stopklodsvirkning • HV-spørgsmål kan være både åbne og lukkede • Sammenfattende spørgsmål lukker af Usability E2002, IT-højskolen CPH, Paulin Hansen
Velegnede åbne promts • ”Hvad nu?” • ”Hvad tænker du på?” • ”Hvad siger den?” • Papegøjeteknikken Usability E2002, IT-højskolen CPH, Paulin Hansen
Velegnede lukkede promts • ”Kan du finde søgefeltet/home-knappen/mål-link?” (evt efterfulgt af: ”Synes du den var nem at finde?”) • ”Er det noget du normalt gør?” (”find på siden”, download af PDF, åbne i nyt vindue) Usability E2002, IT-højskolen CPH, Paulin Hansen
Velegnede sammenfatninger • ”Er det logisk og overskueligt bygget op?” • ”Kan du lide hjemmesidens udseende?” • ”Er det noget du tror du vil kunne bruge til noget i det daglige?” • ”Hvad synes du alt i alt om hjemmesiden?” Usability E2002, IT-højskolen CPH, Paulin Hansen
Uegnede promts • ”Hvor er du havnet henne?” • ”Hvad sidder du og leder efter?” • ”Er du med på hvad der foregår?” • ”Har du lagt mærke til at hjemmesiden ikke skifter farver ved visited links?” Usability E2002, IT-højskolen CPH, Paulin Hansen
Accelerator-spørgsmål • ”Jeg vil gerne have lov til at vise dig, hvor du kan finde [informationen]/komme videre. Tryk på x. Tryk så på y. Og så på z. Der er den. (kort pause) Lad os lige gå tilbage til siden. Hvorfor tror du at mange brugere får problemer her?” • Hold fingeren fra musen - peg på skærmen (undtagelse: ved systemnedbrud) Usability E2002, IT-højskolen CPH, Paulin Hansen
Opgaver • Opstil en række typiske opgaver, som kommer omkring de 20 % af sitets informationer man forventer 80 % af brugerne vil gå efter. • Simpel spørgsmål: Kan man betale med Visa-kort? • Vurderings spørgsmål: Er det dyrt at handle i forretningen? • Sammenlignings-spørgsmål: Hvilken model er det bedste køb efter din mening? Usability E2002, IT-højskolen CPH, Paulin Hansen
DONG´s konsekvens Usability E2002, IT-højskolen CPH, Paulin Hansen
Resultater i øvrigt • Fakta • Kontaktinformation på forsiden • Pressemeddelelser, børsmeddelelser m.m. • Personoplysninger - med CV og billeder på nøglepersoner • Downloads til Excel og PDF • Rettidig og aktuel nyhedstjeneste på e-mail og SMS • Gode søgefunktioner - centralt placeret • Ingen multimedier eller pynt • Billed- og grafikarkiv til fri afbenyttelse Usability E2002, IT-højskolen CPH, Paulin Hansen
Etik • Har forsøgspersonerne været skånet for fysisk og psykisk overlast? • Er deres anonymitet bevaret? • Er de frivillige ? • Har de vidst hvad de gik ind til? • Er der et rimeligt forhold mellem indsats og udbytte? • Bliver forsøgspersonerne orienteret om resultatet af undersøgelserne? Usability E2002, IT-højskolen CPH, Paulin Hansen
Opgave • Aftal rollefordeling i grupperne • Udform en spørgeguide - alle i gruppen, A´s ansvar at afdække mulige veje og blindgyder mod svarene • Tilrettelæg tidsplan for forsøg - B´s ansvar • Formuler instruktion (eller brug eksemplet i det efterfølgende) - C´s ansvar • Formuler en samtykke-erklæring (se evt. eksempel fra Ulrik Gades UA kursus F2001) - D´s ansvar (evt. C hvis ikke D findes) Usability E2002, IT-højskolen CPH, Paulin Hansen
Tekstforslag til instruktion • "Vi gerne bede om din hjælp til at afprøve hjemmesiden for X. Vi skal finde ud af, om de er gode at bruge. Derfor vil vi om lidt bede dig om at finde nogle oplysninger på hjemmesiderne. Mens du leder efter oplysningerne, vil vi bede dig fortælleså meget som muligt om, hvad du synes om siderne. Vi har Y antal opgaver til hjemmesiden. Vi forventer at det vil tage ca. Z minutter.” Usability E2002, IT-højskolen CPH, Paulin Hansen