Projektgruppe Visual Analytics - Medieninformatik und Multimedia ...

13.1 Evaluation TaP v1.0 223
Zeitpunkt durchzuführen, um die Ergebnisse gut in die weitere Planung einbeziehen zu
können.
Die Evaluation wurde von jedem Mitglied der Projektgruppe mit 2 Probanden
durchgeführt. Da TaP normalerweise in einer Büroumgebung eingesetzt werden soll,
war Voraussetzung, dass die Umgebung entsprechend ungestört war.
13.1.1 Ablauf
Als Vorbereitung auf die Evaluation bekam der Proband eine Einführung durch den
Testleiter. Dabei wurden folgende Punkte behandelt:
• Eine grobe Einführung in Visual Analytics, ohne Einführung in das multidimsionale
Datenmodel, Dimensionen oder Kennzahlen.
• Eine Einführung in AdventureWorks, so dass ein Verständnis über die Art und die
grobe Struktur der Daten herrscht.
• Keine Einführung in TaP, damit die intuitive Bedienung von TaP evaluiert werden
kann.
• Eine Erklärung, welche Ziele diese Evaluation verfolgt und eine Einführung in
die Thinking Aloud Methode 5.
Im nächsten Schritt wurde die eigentliche Evaluation, also die vier Aufgaben, am PC
durchgeführt.
Nach Abschluss aller Testfälle wurde dem Probanden der SUS Fragebogen gestellt und
demographische Daten erhoben. Im Anschluss an die Evaluation wurde dem Probanden
die weitere Entwicklung unseres Projektes erläutert.
13.1.2 Aufgabenstellung
Jeder Proband musste vier Aufgaben erledigen, die typische Analyseszenarien darstellen
sollten. Dabei wurden die Aufgaben bewusst zielorientiert gestellt, ohne dass darauf
eingegangen wurde, mit welchen Funktionen von TaP eine Lösung erzielt werden könne.
Für jede Aufgabe wurde dabei vom Testleiter notiert, wie lange der Proband für die
jeweilige Aufgabe gebraucht hat und wie seine konkrete Lösung aussah.