Heurisitsche Evaluation How to?

1
Heurisitsche EvaluationHow to?

• "Heuristic evaluation will find 81-90 of
  usability problems - provided the analysts are
  experts in software ergonomy and in the field in
  which the software is applied. Students with no
  knowledge of software ergonomy will find 22 to
  29 of usability problems. Heuristic evaluation
  is known to find more than 90 of usability
  problems if performed by 3 to 5 experienced
  persons!"
• QuelleJakob Nielsen Finding usability problems
  through heuristic evaluation. In Proceedings of
  the ACM CHI '92 (3.-7. Mai 1992), pp. 373-380.

2
Gliederung

1. Ergebnisse der Arbeitsaufgabe
2. Vom Kriterienkatalog zur Heuristik
3. Priorisierung der Fehler
4. Auswahl der Evaluatoren
5. Auswertung und Darstellung der Ergebnisse
6. Anwendungstipps
7. Quellen

3
1. Ergebnisse der Arbeitsaufgabe
Grimmepreis http//www.grimme-institut.de/scripts
/preis/preis.html)

• Kriterien
• Grundvoraussetzungen einer gebrauchstauglichen
  Website
• Navigation
• Darstellung von Informationen
• Textverständlichkeit

4
1a. Ergebnisse der Arbeitsaufgabe -
Grundvoraussetzungen

• Negativ
• langsamer Seitenaufbau

• Positiv

5
1b. Ergebnisse der Arbeitsaufgabe - Navigation

• Negativ
• Zurück-Button fehlt

• Positiv

6
1d. Ergebnisse der Arbeitsaufgabe Darstellung
von Informationen

• Negativ
• Seitenstruktur nicht durchschaubar

• Positiv

7
1e. Ergebnisse der Arbeitsaufgabe
Textverständlichkeit

• Negativ
• Texte (Vita) schwer lesbar, da der Text nicht
  scannbar gemacht wurde (Listen etc.)

• Positiv

8
2. Vom Kriterienkatalog zur Heuristik

• Heuristiken können sehr unterschiedlich sein
• allgemein Beispiel Heuristiken für
  Webkommunikation (dt. von Schulz)
• domainspezifisch Beispiel Heuristik für eine
  E-Learning-Anwendung
• entwicklungsorientiert Beispiel National
  Cancer Institute Research-Based Web Design
• evaluationsorientiert Beispiel Muster

9
3. Priorisierung der Fehler

• Faktoren für die Beurteilung der Priorität der
  Mängel
• Problemhäufigkeit Tritt das Problem während
  vieler oder weniger Interaktionssituationen auf?
• Problemeinfluss In welchem Ausmaß wird die
  Aufgabenbewältigung beeinträchtigt?
• Persistenz Ist das Problem leicht zu umgehen,
  sobald es bekannt ist?

Parallel dazu können Sie noch angeben, wie leicht
oder schwer ein Fehler zu beheben ist
10
4. Auswahl der Evaluatoren

• 3-5 Evaluatoren finden bis zu 90 der Usability
  Probleme (Nielsen)
• Evaluatoren sollten Domainspezialisten und
  Usabilityexperten sein
• Die Entwickler sind als Evaluatoren völlig
  ungeeignet
• Evaluatoren diskutieren in einer gemeinsamen
  Sitzung die unabhängig voneinander gewonnenen
  Ergebnisse

11
5. Auswertung und Darstellung der Ergebnisse

• Evaluatoren einigen sich auf eine Priorisierung
  der Ergebnisse (Mittelwert und Diskussion)
• tabellarische Übersicht der Ergebnisse für den
  Auftraggeber Beispiel Projektteam amuse
  heuristische Evaluation medienhandbuch.de

12
6. Anwendungstipps

1. geeignete Kriterien auswählen
2. Kriterien übersichtlich zu Themengebieten
   bündeln
3. Einzelkriterien operationalisieren
4. Fehler priorisieren
5. Ergebnisse dokumentieren Beschreibung des
   Fehlers, Gewichtung, Verbesserungsvorschlag

13
7. Quellen
Universität des Saarlandes Arbeitsbereich
Usability Engineering Methoden und Verfahren
Die Expertenzentrierten Methoden.
http//usability.is.uni-sb.de/methoden/experten_me
thoden.php Stand 09.05.2005. aufgerufen
27.03.2006 Nielsen, Jakob How to conduct a
Heuristic Evaluation.http//www.useit.com/papers/
heuristic/heuristic_evaluation.html Ohne Datum.
Aufgerufen 17.05.2005 Information Design
(Hrsg.) What is a Usability Review? (Last
Updated May 7, 2003)http//www.infodesign.com.au
/usabilityresources/evaluation/conductingusability
reviews.asp aufgerufen 17.05.2005
Information Design (Hrsg.) Usability Review
Materials. (Last Updated May 7,
2003)http//www.infodesign.com.au/usabilityresour
ces/evaluation/reviewmaterials.asp aufgerufen
17.05.2005