Was ist Tree Testing?
Beim Tree Testing, auf Deutsch Baumtest, prüfst du die Struktur deiner Navigation ganz ohne Design. Die Nielsen Norman Group beschreibt es so: Testpersonen sollen in einer hierarchischen Kategorienliste den Ort finden, an dem ein bestimmter Inhalt liegt. Getestet werden nur die Ordnung von oben nach unten und die Beschriftungen.
Die Testperson sieht zum Beispiel nur „Produkte, Service, Über uns“. Klickt sie auf „Service“, klappen die Unterpunkte auf. Ihre Aufgabe: „Du willst eine Bestellung zurückschicken. Wo suchst du?“ Kein Layout, keine Bilder, keine Suche lenkt ab.
Der UX-Forscher Jeff Sauro nennt das einen Usability-Test am Skelett der Navigation, bei dem die Design-Haut abgezogen ist. Erfunden hat die Methode die Informationsarchitektin Donna Spencer, ursprünglich auf Papier mit Karteikarten.
Die wichtigsten Kennzahlen
- Erfolgsquote: Wie viel Prozent haben das richtige Ziel gefunden?
- Direktheit: Wie viele sind ohne Zurückgehen und Umwege ans Ziel gekommen?
- Erster Klick: Welche Hauptkategorie haben die meisten zuerst gewählt? Ist der falsch, sind meist die Labels der obersten Ebene unklar.
- Pfade: Wo sind Leute abgebogen, wo umgekehrt?
- Zeit: Wie lange hat eine Aufgabe gedauert?
Was ist eine gute Erfolgsquote? Die NN/g verweist auf eine Auswertung von Albert und Tullis über 98 Tree-Testing-Studien.
Beispiel A
Typische Aufgabe
62 %
Erfolg im Median
98
Studien ausgewertet
So schneidet eine Aufgabe in einem durchschnittlichen Tree Test ab.
Beispiel B
Kritische Aufgabe
> 90 %
Zielwert Erfolg
61–80 %
gilt als gut
Was die meisten Besucher suchen, sollte fast jeder finden.
Hohe Erfolgsquote, aber niedrige Direktheit heißt: Die Leute finden das Ziel, irren aber vorher herum. Dann stimmt meist ein Label nicht.
Wie viele Teilnehmer und Aufgaben?
Tree Testing ist eine quantitative Methode, du brauchst also mehr Leute als im klassischen Usability-Test. Dave O'Brien, Mitentwickler des Tools Treejack, empfiehlt rund 50 Teilnehmende je Nutzergruppe und etwa zehn Aufgaben pro Person. Willst du zwei Varianten eines Menüs vergleichen, nennt die NN/g mehr als 50 Teilnehmende je Baum.
Warum so viele? Sauro hat die Fehlermarge ausgerechnet: Bei 10 Personen liegt sie bei rund 27 Prozentpunkten, bei 39 Personen bei 15, bei 93 Personen bei 10. Mit zehn Leuten weißt du also nur, ob etwas grob funktioniert.
Häufige Fehler
Fehler 1 · Das Zielwort steht in der Aufgabe
„Wo findest du die Rücksendung?“, und der Menüpunkt heißt „Rücksendung“. Dann testest du Wortgleichheit, nicht Verständnis. Beschreib das Ziel als Situation: „Die Schuhe passen nicht. Was tust du?“
Fehler 2 · Den Baum nur oben anlegen
Bau den Baum bis zur untersten Ebene, auf der die Inhalte wirklich liegen. Ein Zweig als richtige Antwort sagt nichts darüber, ob jemand den konkreten Inhalt findet.
Fehler 3 · Zu viele Aufgaben pro Person
Nach 20 Aufgaben kennt jeder den Baum auswendig, die letzten Ergebnisse sind wertlos. Bleib bei rund zehn und verteil weitere auf mehr Teilnehmende.
So machst du deinen ersten Tree Test
- Baum anlegen: Deine geplante Navigation als Textliste bis zur untersten Ebene.
- Aufgaben schreiben: Zehn Situationen aus dem echten Leben deiner Kunden, mit den häufigsten Anliegen zuerst.
- Pilot fahren: Zwei, drei Leute live durchklicken lassen und missverständliche Aufgaben umschreiben.
- Testen: Mit Tools wie Treejack von Optimal Workshop, UXtweak oder Maze online an rund 50 Personen.
- Verbessern und wiederholen: Labels ändern, erneut testen. Der zweite Lauf ist billig.
Tree Testing passt perfekt hinter Card Sorting: Erst sortieren Nutzer Inhalte und zeigen dir, wie sie denken. Daraus baust du einen Baum, den der Tree Test dann prüft.
Häufige Fragen
Was ist der Unterschied zwischen Tree Testing und Card Sorting?
Card Sorting erzeugt eine Struktur: Nutzer gruppieren Inhalte. Tree Testing prüft eine fertige Struktur: Nutzer suchen darin nach Zielen.
Wie viele Teilnehmer braucht ein Tree Test?
Rund 50 Personen je Nutzergruppe sind ein guter Richtwert. Beim Vergleich zweier Menüs eher mehr als 50 je Variante.
Welche Erfolgsquote ist gut?
In einer Auswertung von 98 Studien lag der Median bei 62 Prozent. Für wichtige Aufgaben solltest du über 90 Prozent anpeilen.
Was bedeutet Direktheit beim Tree Testing?
Der Anteil der Teilnehmenden, die ohne Zurückgehen und ohne Umwege ihr Ziel angesteuert haben. Niedrige Direktheit deutet auf unklare Labels.
Kann ich einen Tree Test ohne Tool machen?
Ja, die Methode entstand auf Papier mit Karteikarten. Für viele Teilnehmende und eine saubere Auswertung ist ein Online-Tool aber deutlich bequemer.
