7.3.3 Auswertungsphase: Ergebnisreport
Die ersten acht Schritte nach Pearrows comprehensive Testing Plan gehörten zur Vorbereitungsphase. Nun soll dieser Testplan vervollständigt werden.
Schritt 9: Ergebnisse (Results)
Dieser Abschnitt entsteht nach Abschluß der Tests. Alle Ergebnisse werden anschaulich in Tabellenform präsentiert. Allerdings findet hier noch keine Einschätzung, Lösung oder gar Beratung statt.
Schritt 10: Diskussion (Discussion)
Sämtliche Ergebnisse, die nicht in Schritt 9 erwähnt wurden, sollen hier erläutert werden. Meist geschieht dies in Form von Zitaten.
Schritt 11: Empfohlene Änderungen (Recommendations for change)
In einer neutralen Liste werden die Änderungen aufgezählt, die Aufgrund der Resultate als notwendig erscheinen. Dabei findet keine Problembewältigung statt, sondern nur ein Hinweis auf kritische Stellen.
Die letztendliche Problemlösung ist eine neue Aufgabe, die nicht im Usability Test gelöst wird.
Schritt 12: Anhänge (Paperwork and attachments)
Alle verwendeten Checklisten, Hinweise, Aufgabenstellungen und Fragebögen werden dem Bericht hinzugefügt. Dies soll zu einem problemlosen Nachvollziehen des Tests helfen.
Jakob Nielsen empfiehlt nach der Durchführung des Tests die Erarbeitung eines Reports in Textform. Dieser soll für den Auftraggeber angefertigt werden. In diesem Bericht sollen sowohl die Usability-Probleme, die während des Tests durch die Testpersonen gefunden wurden, aufgeschrieben werden als auch diejenigen Probleme, die bei der Vorbereitung auf den Test durch den Moderator gefunden wurden.
Beide Arten von Daten sind wichtig, sollten aber getrennt voneinander behandelt werden.
Wie ein solcher Endreport aussehen soll beschreiben bspw. Goto und Cotler (2002) in “Webdesign that works”. Demnach sollte man folgendem Aufbau folgen:
• Executive Summary: enthält eine kurze Zusammenfassung der wichtigsten Erkenntnisse, Empfehlungen und Anmerkungen sowie eine Übersicht was funktioniert und was nicht.
• Methodology: Eine Beschreibung der angewendeten Methode.
• Results: Eine klare umfassende Aufzählung aller Test- und Fragebogenergebnisse.
• Findings and recommendations: Empfehlungen von Verbesserungen mit Begründung.
• Appendices: Anhänge wie Rohdaten, Checklisten und Fragebögen.
Dies sollte einen typischen Ablauf eines Usability Tests darstellen. Hierbei wurde nur kurz auf die angewendete Methode eingegangen. Nun sollen die wichtigsten Methoden der Usability Evaluation kurz erläutert werden.