7.3.1 Planungsphase
Zu Beginn der Planungsphase sollte sich auf ein Testplan geeinigt werden. Ein solcher Testplan muss immer ohne fachliche Vorkenntnisse nachvollziehbar sein. Vor allem für Dritte, die nicht bei der Durchführung involviert waren. Dies macht die Resultate transparent, nachvollziehbar und validierbar.
Der Amerikaner Mark Pearrow teilt seinen comprehensive Testing Plan wiederum in zwölf Schritte ein, die im Folgenden beschrieben werden sollen.
Schritt 1: Einleitung (purpose)
In der Einleitung soll der Grund und das Ziel der Website niedergeschrieben werden. Weitere wichtige Fragen sind: Warum ist die Seite online? Wie sieht die Vision der Website langfristig aus? Warum soll diese Seite getestet werden?
Diese Informationen sind extrem wichtig, da sonst keine Aussage über die Messung der Effektivität gemacht werden kann.
Dieser Abschnitt steuert die restlichen Kapitel des Plans. Gute Vorarbeit ist hier nötig, um nicht in einen willkürlichen Testablauf zu verfallen.
Schritt 2: Problem-Punkte (problem statements)
Im zweiten Schritt wird das eigentlich zu testende Problem definiert und in einem kurzen prägnanten Abschnitt niedergeschrieben. Der Inhalt von Schritt 1 ist sehr abstrakt und auf einer allgemeinen Basis angelegt. Nun sollen dagegen konkrete Probleme angesprochen werden, um den Zweck der Webseite zu festigen.
Schritt 3: Zielgruppen Definition (User profiles)
Hier soll festgelegt werden, wer die Zielgruppe ist bzw. welche Benutzerschicht der Zielgruppe für diesen Test herangezogen und untersucht wird. Dabei ist besonders auf die Repräsentativität der Zielgruppe zu achten. Zielt die Website bspw. auf 18 bis 35 Jährige weibliche Benutzer ab, sollte auch diese Gruppe getestet werden.
In diesem Stadium erscheint eine korrekte Auswahl der Testpersonen als kritisch. Deshalb wird nach dem kompletten Test dieses Kapitel um die demoskopischen Daten der am Test Beteiligten erweitert. Somit wird dieser Abschnitt validiert oder automatisch relativiert.
Schritt 4: Die Methode (Methodology)
Die angewendete Methode ist ausschlaggebend für die Messergebnisse und Daten. In diesem Abschnitt soll beschrieben werden, was im Test durchgeführt wird, wobei auf eine genaue Aufgabenbeschreibung noch verzichtet wird. Vor allem nicht involvierte Personen soll beschrieben werden, auf welche Art und Weise getestet wird.
Im nachfolgenden Kapitel 7.4. soll auf die gängigsten Methoden eingegangen werden.
Schritt 5: Test Umgebung und Ausrüstung (Environment & equipment requirements)
Hier soll eine Darstellung der Testumgebung inklusive einer Auflistung sämtlicher benutzter Hilfsmittel erfolgen. Ebenso sollen besondere Umstände wie z.B. ein tageslichtarmer Raum und störende Geräusche aufgezeigt werden.
Schritt 6: Das Team (Testing crew)
Die ausführenden Beteiligten des Testteams werden mit ihren Rollen aufgeführt. Dies zeigt den Umfang des Testes und die benötigten Ressourcen. Rollen können z.B. sein : Moderator, Videofilmer, Zeitnehmer.
Schritt 7: Definition der Messung (Evaluation Measures)
Hier soll festgehalten werden, nach welchen Kriterien gemessen werden soll. Denkbar sind eine Zeitmessung, die Anzahl der Klicks, ein Verfolgen der Links oder eine allgemeine Aussage, ob die Aufgabe gelöst wurde oder nicht.
Schritt 8: Aufgabenliste (Task List)
In diesem Abschnitt werden die gestellten Aufgaben im Klartext, also so, wie sie den Testpersonen vorgetragen werden, erstellt. Es wird festgehalten warum gerade diese Aufgaben gestellt werden. Ebenso werden die Bedingungen zum Erfolg der Aufgabe definiert.
Auf die Erstellung geeigneter Aufgaben soll nun näher eingegangen werden, da sie sozusagen das Herzstück eines Testes darstellen.
Usability Testing ist ein Auswahlprozess. Dies bedeutet, dass nicht alle möglichen Aufgaben, die ein User auf der Seite vollziehen kann, getestet werden können.
Aufgaben können deshalb aus verschiedenen Gründen ausgewählt werden. Dumas unterscheidet hier drei wichtige Arten von Aufgaben. Erstens können Aufgaben gewählt werden, die mögliche Usability Probleme aufdecken sollen. Je mehr Probleme gefunden werden, desto erfolgreicher ist der Test verlaufen. Daraus entsteht das Hauptziel des Usability Testing: Eine Prozedur zu kreieren, die die schwerwiegendsten Probleme aufdeckt.
Zweitens können Aufgaben gestellt werden, die vermutete Probleme herausstellen können. Designer und Entwickler haben meist ein Gespür oder eine Vorahnung, an welchen Stellen mögliche Probleme auftauchen können.
Die dritte Art von Aufgaben sind solche, die die User tatsächlich auf der Seite erledigen würden, wenn es sich nicht um eine Testsituation handelt. Generell sollten alle Aufgaben so konzipiert sein.
Auch Jakob Nielsen sieht als grundlegende Regel an, dass die Testaufgaben möglichst nahe an dem tatsächlichen Verhalten der User konzipiert werden. Andererseits sollten sich die gewählten Aufgaben aber auch den Zielen der Seite anpassen.
Nachdem die Aufgabenstellungen ausgearbeitet wurden, stellt sich die Frage der Reihenfolge. Dabei sind zwei Dinge zu beachten. Die Aufgaben sollten in der Reihenfolge ablaufen, in der die User sie tatsächlich abwickeln würden. Zum Beispiel würden die Benutzer eines Webshops zuerst nach dem gewünschten Artikel suchen, bevor sie eine Bestellung abschicken.
Letztendlich bleibt die Frage wie die Aufgaben den Testpersonen präsentiert werden sollen. Eine etablierte Form ist die Erstellung von Task Szenarien. Dies sind Situationen, in denen die Aufgaben eingebettet sind und zu einer kurzen Geschichte zusammenschmelzen. Somit kann ein Teil der Künstlichkeit der gestellten Aufgaben verringert werden.
Dabei ist ein gutes Szenario kurz gehalten, in der Sprache der Zielgruppe verfasst und eindeutig formuliert, so dass keine Unklarheiten aufkommen. Außerdem müssen genug Informationen gegeben werden, um die Aufgabe lösen zu können. Es soll allerdings nicht gesagt werden, wie die Aufgaben zu vollenden sind, sondern die Person soll angehalten sein, sich so zu verhalten, als wäre sie in ihrer natürlichen Umgebung. Somit sollte die Aufgaben nicht zu langweilig werden.
Dies waren die ersten acht Schritte nach Pearrows comprehensive Testing Plan. Die letzten vier Schritte werden in 7.3.3. Auswertungsphase angesprochen, da diese Arbeiten der Nachbereitung zuzusprechen sind.
Wie eben gezeigt wurde, ist eine gründliche Vorbereitung äußerst wichtig. Auf was bei der Durchführung der Tests zu achten ist, soll im nächsten Abschnitt gezeigt werden.
