22
HCI (Fach) / Kapitel 4 – Usability-Testing (Lektion)
Anzeige
- Wann können Usability-Tests durchgeführt werden? Usability-Tests können während oder gegen Ende der Entwicklung durchgeführt werden.
- Welche Usability Test führt man während der Entwicklung durch? Warum tut man das? Während der Entwicklung --> formative Tests – Methoden oft nicht ganz so formal – Die wichtigsten Schwachstellen werden aufgedeckt
- Welche Usability-Tests werden gegen Ende der Entwicklung durchgeführt? Warum tut man das? Ende der Entwicklung --> summative Tests – Möglichst realitätsnahe Messung der Usability – Z.B. als Entscheidungshilfe, ob ein Produkt schon marktreif ist.
- Wie ist der Ablauf eines Usability-Tests ? Ziel und Zweck festlegen Untersuchungsdesign entwerfen Teilnehmer rekrutieren Evaluation vorbereiten Evaluation durchführen Resultate auswerten
- Was sind Gütekriterien von Evaluationsmethoden? Objektivität (Unbeeinflusstheit) – Resultate sind unabhängig von den Rahmenbedingungen und den Experten. • Reliabilität (Zuverlässigkeit) – Die gleichen Bedingungen führen wiederholt zu den gleichen Resultaten. • Validität (Gültigkeit) – Die Resultate beinhalten keine ungewollten Einflüsse und lassen sich gut generalisieren.
- Welche verschiedene Arten von Evaluation gibt es? Formative Evaluation Summative Evaluation Komparative Evaluation Kompetitive Evaluation
- Was versteht man unter einem Nutzertest (empirisch) ? Einer Auswahl von Teilnehmern werden möglichst realistische Aufgaben gestellt • Es wird beobachtet wie diese die Aufgaben lösen. • Schwachstellen in der Interaktion können identifiziert werden • Im Gegensatz zu Expertentests werden nur tatsächliche Usability-Probleme aufgedeckt. • Planung und Auswertung sind deutlich aufwendiger
- Was versteht man unter Expertentest (analytisch) ? • Experten untersuchen anhand ausgewählter Regeln eine Benutzeroberfläche auf UsabilityProbleme • Im Vergleich zu Nutzertests sind Expertentests deutlich schneller und effizienter. • Liefern nur Hinweise auf potentielle UsabilityProbleme.Ob diese in der Praxis auch auftreten ist nicht sicher.
- Welche Usability-Evaluationsmethoden (Nutzertests) gibt es? Hallway Test Usability Walktrough Usability Befragung A/B-Test Formaler Usability Test
- Welche Arten von Usability-‐Evaluationsmethoden (Expertentests) gibt es? Cognitive Walktrough Heuristische Evaluation GOMS
- Anzeige
- Was ist Hallway-Testing? Wie schätzt du Aufwand und Vaildität ein? • Einfachste und am wenigsten formelle Evaluationsmethode • Sie fragen den nächstbesten Kollegen auf dem Gang (Hallway) oder Ihren Büronachbarn, ob er sich kurz an Ihren Platz setzen kann und versteht was er da sieht. • Mit mehreren Personen wiederholen • Deckt innerhalb von wenigen Minuten die größten Usability-‐Probleme auf Aufwand: Gering Validität: Gering
- Was ist Pluralistic Walkthrough? Wie schätzt du Aufwand und Validität ein? Benutzer, Usability-Experten und Entwickler untersuchen die Benutzerschnittstelle gemeinsam • Anhand eines Prototypen wird ein Szenario mit mehreren Aufgaben durchgespielt • Anschließend werden die gefundenen Lösungswege in der Gruppe diskutiert Aufwand: Mittel Validität: Mittel
- Was ist ein Formaler Usability-Test ? Aufwand? Validilität? Methode, um die Benutzbarkeit eines Produkts auf eine objektive und nachvollziehbare Art zu überprüfen. • Teilnehmern sind idealerweise selber Benutzer des Produkts • Ihnen werden realistische Aufgaben gestellt • Es wird beobachtet, wie gut sie diese mit der zu testenden Benutzerschnittstelle lösen können • Ziel des Tests ist es, ein Großteil der Usability-Probleme aufzudecken. Aufwand: Hoch Validität: Hoch
- Was ist eine Usabilty Befragung? Aufwand? Vailität? Hier beantworten Benutzer, mit Hilfe eines Fragebogens, Fragen zu unterschiedlichen Themen • Beantwortet werden die Fragen in der Regel mit der Hilfe von numerischen Skalen • Aus den statistischen Daten werden Kennzahlen errechnet. Diese können mit Daten aus früheren Test oder Normdaten verglichen werden Aufwand: Gering Validität: Mittel
- Was sind A/B-TESTS? Aufwand? Validität? Aufteilung der Teilnehmer in zwei Untergruppen • Eine Gruppe bekommt Variante A, die andere Variante B • Anschließend wird verglichen welche Variante erfolgreicher war (z.B. Befragung oder Konversionsrate) Aufwand: Hoch Validität: Hoch
- Was ist HEURISTISCHE EVALUATION? Aufwand? Validität? Eine Gruppe von Usability-Experten überprüft eine Benutzerschnittstelle anhand einer Liste von bewährten Prinzipien (Heuristiken) auf Usability-Probleme Aufwand: Mittel Validität: Mittel
- Was ist COGNITIVE WALKTHROUGH? Aufwand? Validität? Ein oder mehrere Usability-Experten versetzen sich in die Rolle eines Benutzers und spielen an einem Prototypen einen typischen Handlungsablauf durch • Es wird überprüft, ob die Interaktion verständlich und klar ist und sich das Produkt wie erwartet verhält • Identifiziert werden unpassende Bedienelemente, schlechte Bezeichnungen, ungenügendes Feedback oder unnötige Schritte einer Interaktion Aufwand: Mittel Validität: Gering
- Was ist GOMS? AUFWAND? Validtät? Analytische Methode zur Vorhersage der Zeit, die ein Benutzer benötigt, um ein gewisses Ziel zu erreichen Aufwand: Mittel Validität: Hoch
- Formative Evaluation – Möglichst früh, in der Entwicklungsphase – Identifikation von möglichst vielen UsabilityProblemen und VerbesserungspotentialenFormative Evaluation
- Was ist summative Evaluation? – Prüft abschließend, ob die Usability-Ziele erreicht wurden
- Was ist Komparative Evaluation ? – Usability-Vergleich von unterschiedlichen Lösungsvarianten – Rahmenbedingungen müssen strikt eingehalten werden
- Was ist Kompetitive Evaluation ? – Vergleich der Usability des eigenen Produktes mit einem oder mehreren Produkten der Mitbewerber (Benchmarking) – Eine Liste von Standardaufgaben wird von allen Testteilnehmern durchgespielt. – Messbare Kriterien wie Effizienz, Zufriedenheit oder Fehlerquote werden verglichen