IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

19
denkwerk 2007 IA Konferenz Stuttgart Validierung vorläufiger Navigationshierarchien oder: Was kommt eigtl. nach einem Card Sort? Steffen Schilb, denkwerk

Transcript of IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

Page 1: IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

denkwerk 2007 IA Konferenz Stuttgart

Validierung vorläufiger Navigationshierarchienoder: Was kommt eigtl. nach einem Card Sort?

Steffen Schilb, denkwerk

Page 2: IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

denkwerk 2007 IA Konferenz Stuttgart

Recap Card Sorting

Flickr: Yandle

Page 3: IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

denkwerk 2007 IA Konferenz Stuttgart

Methode

Page 4: IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

denkwerk 2007 IA Konferenz Stuttgart

Varianten

• Closed Card Sorting

• Bilden von Untergruppen

• Card Labeling

• Non-Affinity Sorting (Constantine and Lockwood)

• “Kartenpriorisierung” (Gerry McGovern)

• Computerbasiertes Card Sorting

Page 5: IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

denkwerk 2007 IA Konferenz Stuttgart

Die Analyse

Page 6: IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

denkwerk 2007 IA Konferenz Stuttgart

Card Sorting: Ein Vergleich

Mit Karteikarten

+ Einfache Handhabung

+ „Räumliche“ Trennung d. Inhalte

+ Flexibilität: Nachfragen möglich

- „Subjektive“ Ergebnisse

- Zeitaufwändige Analyse

- Wenig geeignet für große Studien

Am Computer

+ Geeignet f. große Studien;

Remote testing

+ Statistisch valide Ergebnisse

- Nicht sehr flexibel; Wenig

anpassungsfähig

- Kategoriennamen verschwinden

Page 7: IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

denkwerk 2007 IA Konferenz Stuttgart

Neues Tool: OptimalSort

Page 8: IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

denkwerk 2007 IA Konferenz Stuttgart

Am Ende steht...

Unterrubrik xyz

Unterrubrik

Unterrubrik

Unterrubrik

Unterrubrik

Unterrubrik

Rubrik 1

Unterrubrik xyz

Unterrubrik

Unterrubrik

Unterrubrik

Unterrubrik

Rubrik 2

Unterrubrik xyz

Unterrubrik

Unterrubrik

Unterrubrik

Unterrubrik

Unterrubrik

Rubrik 3

Unterrubrik xyz

Unterrubrik

Unterrubrik

Unterrubrik

Unterrubrik

Unterrubrik

Rubrik 4

Unterrubrik xyz

Unterrubrik

Unterrubrik

Unterrubrik

Unterrubrik

Rubrik 5

Unterrubrik xyz

Unterrubrik

Unterrubrik

Unterrubrik

Unterrubrik

Unterrubrik

Rubrik 6

www.webseite.com

Page 9: IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

denkwerk 2007 IA Konferenz Stuttgart

Card-Based Classification Evaluation

Page 10: IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

denkwerk 2007 IA Konferenz Stuttgart

So funktioniert‘s: Vorbereitung

Schritt 1 Schritt 2

Schritt 3

Page 11: IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

denkwerk 2007 IA Konferenz Stuttgart

So funktioniert‘s: Durchführung

Szenario Optionen

2

Page 12: IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

denkwerk 2007 IA Konferenz Stuttgart

So funktioniert‘s: Analyse

X: 1. Wahl Nutzergruppe 1x: 2. Wahl Nutzergruppe 1

O: 1. Wahl Nutzergruppe 2o: 2. Wahl Nutzergruppe 2

Page 13: IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

denkwerk 2007 IA Konferenz Stuttgart

Card-Based Classification Evaluation: Ein Vergleich

Mit Karteikarten

+ Einfache Handhabung

+ Flexibilität: Nachfragen möglich

- Wenig Analysemöglichkeiten

- Wenig geeignet für große Studien

Am Computer

+ Geeignet f. große Studien;

Remote testing

+ Bessere Analysemöglichkeiten

- Nicht sehr flexibel; Wenig

anpassungsfähig?

Page 14: IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

denkwerk 2007 IA Konferenz Stuttgart

Die Computer-gestützte Variante: Heurekia

Page 15: IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

denkwerk 2007 IA Konferenz Stuttgart

Testsubjekt: Klassifikationssystem koeln.de

Page 16: IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

denkwerk 2007 IA Konferenz Stuttgart

Einsatzgebiete

Hierarchische Struktur Organische Struktur

Lineare/sequentielle Struktur Matrix Struktur„Informational Websites“

• Städte

• Kommunen

• Große Firmen

Page 17: IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

denkwerk 2007 IA Konferenz Stuttgart

Stärken: Was kann die Methode leisten?

• Labeling: Verständlichkeit, Eindeutigkeit

• “Mentales Modell”: Orientierung innerhalb eines Klassifikationsschemas

• Auffindbarkeit von “Inhalten”

• Generell: Vorabcheck des hierarchischen Grundgerüsts

Page 18: IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

denkwerk 2007 IA Konferenz Stuttgart

Schwächen: Was kann die Methode nicht leisten?

• Subjektivität in der Formulierung d. Fragen

• Subjektivität in der Auswahl der Szenarien

• Inhalte werden nicht wirklich gefunden, sondern nur Kategoriebegriffe

“gesucht”

• Das Browse/Surf-Verhalten wird nicht unbedingt realistisch abgebildet

• Es gibt keine “Converging Branches” (In der Software)

Page 19: IA Konferenz 2007: Validierung hierarchischer Navigationshierachien

denkwerk 2007 IA Konferenz Stuttgart

Danke!

Noch Fragen?

[email protected]

[email protected]