Post on 06-Aug-2020
LEHRSTUHL FÜR DIDAKTIK UND AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
USABILITYTESTING LEICHT GEMACHT
Julia Küfner
28.01.2013
LEHRSTUHL FÜR DIDAKTIK UND
AISBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
USABILITY? BENUTZERFREUNDLICHKEIT? WARUM?
12.03.2013
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
WARUM?
Häufig wird viel Aufwand in gute E-Learning Anwendungen gesteckt.
Eigentlich gute Anwendungen scheitern häufig.
Selten werden Nutzer befragt (nur über Fragebogen)
Skepsis gegenüber Usabilitytesting
Moodle kann sehr unterschiedlich eingesetzt werden. (Schule,
Hochule, Firmen, ….)
Jeder Anwendungsbereich bedeutet individuelle Anforderungen an
die Plattform
„Was in meinem Moodle gut funktioniert, funktioniert nicht
unbedingt in Ihrem“
12.03.2013
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
Sie müssen
kein Experte
sein!
12.03.2013
Titel der Präsentation und Name des Redners
4
>>
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
Learning by
doing
12.03.2013
Titel der Präsentation und Name des Redners
5
>>
LEHRSTUHL FÜR DIDAKTIK UND
AISBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
USABILITYTESTING ? USER-CENTRED DESIGN ?
12.03.2013
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
SOFTWARE ENTWICKLUNGSPROZESS FRÜHER
12.03.2013 7
Anforderungs-analyse
Entwurf Realisierung Auslieferung/
Nutzung
Fokus auf Auftraggeber. Endnutzer werden gar nicht oder erst am
Ende befragt und involviert
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
USER CENTRED DESIGN
"Human-centered design is characterised by: the active
involvement of users and a clear understanding of user and
task requirements; an appropriate allocation of function between
users and technology; the iteration of design solutions; multi-
disciplinary design." - ISO 13407
12.03.2013
Titel der Präsentation und Name des Redners
8
Realisierung
Anforderungsanalyse
Entwurf
Nutzung
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
Sie sind nicht
der Nutzer!
12.03.2013
Titel der Präsentation und Name des Redners
9
>>
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
Know your
users!
12.03.2013
Titel der Präsentation und Name des Redners
10
>>
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
UCD METHODEN
12.03.2013
Titel der Präsentation und Name des Redners
11
Card Sorting
Fokusgruppen
Personas
Usabilitytest
Cognitive walkthrough
Eyetracking
Expertenreview
Paper Prototyping
LEHRSTUHL FÜR DIDAKTIK UND
AISBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
UCD METHODE: USABILITYTESTING
12.03.2013 12
Titel der Präsentation und Name des Redners
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
Im Allgemeinen ist ein
Usabilitytest ein 1:1 Interview.
(teilweise mit Assistenten)
1 Proband benutzt das
Testobjekt und wird dazu vom
Interviewer beobachtet und
befragt
USABILITYTEST
12.03.2013
Titel der Präsentation und Name des Redners
13
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
PLANUNG USABILITYTEST
Was möchten Sie auswerten, wem wollen
sie ihre Ergebnisse präsentieren?
Reicht es wenn sie während des Tests
mitschreiben? (Zitate, Probleme)
Benötigen sie quantitative Daten?
Zitate mitschreiben (mit Uhrzeit)
Brauchen Sie
Audio/Videoaufzeichung?
Eyetracking?
man braucht weniger als man
denkt!
12.03.2013
Titel der Präsentation und Name des Redners
14
„No equipment? That's no excuse for not testing your design. “
http://www.nngroup.com/articles/travel
ing-usability-lab/
http://camstudio.org/
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
PLANUNG USABILITYTEST
Was möchten Sie testen?
z.B. die Moodle Plattform oder eine spezielle Aktivität
Was möchten Sie herausfinden ?
konkretes Nutzerziel? z.B. Anmeldung für Kurs, Aufgabe
abgeben, Werden alle relevanten Inhalte schnell gefunden
Out-of the Box test > z.B. Wie finden Erstsemesterstudenten
eigentlich die moodle Plattform im Internet und was ist ihr
erster Eindruck/Nutzung
Vergleichstest > Ist Kursformat A oder B besser?
12.03.2013
Titel der Präsentation und Name des Redners
15
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
PLANUNG USABILITYTEST REKRUTIERUNG
Wen müssen Sie folglich testen ? Welche Personengruppe/n ist/sind
betroffen?
Ziel: 5-6 Personen je Gruppe (Leicht verfügbar/ schwer
verfügbar?)
Tipp für die Rektrutierung: Vermitteln Sie Ihren potentiellen
Probanden dass Sie den Test durchführen um moodle für sie zu
verbessern! „Moodle soll schöner werden“
12.03.2013
Titel der Präsentation und Name des Redners
16
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
BEISPIEL KURSFORMATE /KURSSTRUKTUR
Pro Block ein gesonderter Kurs (-> viele Kurse, komplexe Struktur)
12.03.2013
Titel der Präsentation und Name des Redners
17
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
BEISPIEL KURSFORMATE /KURSSTRUKTUR
Ein Kurs pro Block, pro Abschnitt eine Veranstaltung
(-> lange Kurse)
12.03.2013
Titel der Präsentation und Name des Redners
18
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
BEISPIEL KURSFORMATE /KURSSTRUKTUR
Vergleich Collapsed Topics Format vs. 1 Seiten Format
(ab moodle 2.3)
12.03.2013
Titel der Präsentation und Name des Redners
19
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
PLANUNG USABILITYTEST LEITFADEN - BEISPIEL
Vorbefragung
Alter_____________ , Semester ___________
Durchgang 1
Bitte stellen Sie sich vor Sie möchten Information ….. in Moodle
herausfinden. Wie würden Sie dafür vorgehen ?
Wie/Wo loggt Student sich ein ?
Wie kommt er zum entsprechenden Kurs (Seitennavigation, Meine Kurse,
Startseite)
Probleme bei Navigation?
Probleme Information zu finden ?
Kommentare / Probleme / Bemerkungen ?
Wie hat Ihnen das jetzt gefallen ?
12.03.2013
Titel der Präsentation und Name des Redners
20
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
TIPPS FÜR DIE TESTUMGEBUNG
Je nach Testgegenstand können Sie direkt in Ihrem vorhandenen
Moodle testen
Bei Vergleichstest oder Test von neuen Inhalten/Aktivitäten können
Sie neue Kurse in einem Testbereich anlegen
Bei Tests die ganze Umstrukturierungen in Moodle bedeuten,
empfiehlt es sich eine Testversion anzulegen
moodle kann man auch lokal auf Ihrem Rechner installieren http://docs.moodle.org/24/de/Vollst%C3%A4ndiges_Installationspaket_f%C3%BCr_Windows
12.03.2013
Titel der Präsentation und Name des Redners
21
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
PLANUNG USABILITYTEST TESTDURCHLAUF
Testdurchlauf mit Kollegen oder Testproband (Technik, Ablauf, Zeit)
Bitten Sie den Testprobanden um Feedback zum Test aber auch zu
Ihrem Verhalten während des Testablaufs.
Überlicherweise dauert ein Testdurchlauf je nach Testgegenstand
zwischen 30 – 60 Minuten
12.03.2013
Titel der Präsentation und Name des Redners
22
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
Testen Sie
früher als Sie
denken dass es
sinnvoll ist! 12.03.2013
Titel der Präsentation und Name des Redners
23
>>
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
TIPPS EINFÜHRUNG FÜR DEN PROBANDEN
Begrüßung …nicht zu viel verraten!
Heute wollen wir uns mal XXX anschauen
Ablauf erklären und Angst nehmen
Hierzu werde ich Ihnen erst einmal ein paar allgemeine Fragen
stellen und dann ein paar konkrete Aufgaben geben. Hier würde ich
Sie bitten dass sie diese genauso ausführen wie sie es auch zu
Hause tun würden.
Ganz wichtig! Ich teste nicht Sie sondern die Anwendung und
möchte sehen ob die Anwendung Sie bei Ihrer Nutzung unterstützt.
Sie können also keine Fehler machen.
12.03.2013
Titel der Präsentation und Name des Redners
24
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
TIPPS EINFÜHRUNG FÜR DEN PROBANDEN
Laut Denken
Wenn Sie die konkreten Aufgaben durchführen würde ich Sie bitten
laut zu denken damit ich einen Eindruck davon habe was in Ihnen
vorgeht.
Ich persönlich bin an der Entwicklung dieser Anwendung nicht
beteiligt / Ich arbeite nicht in der Lehre Sie haben also nichts zu
befürchten / Ich bin mit der Anwendung nicht verheiratet und
möchte wirklich herausfinden wie man sie verbessern kann…
… ich bin Ihnen daher in keinster Weise böse wenn Sie die
Anwendung kritisieren.
12.03.2013
Titel der Präsentation und Name des Redners
25
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
TIPPS WÄHREND DEM TEST Bleiben Sie neutral! Auch wenn Sie die Anwendung entwickelt haben
versuchen Sie sich so zu verhalten als ob es nicht Ihre wäre und Sie
nur für den Test bezahlt werden!
Wenn Proband etwas nicht versteht/falsch macht /negativ
kommentiert.
Nehmen Sie es nicht persönlich!
Nicht eingreifen/berichtigen/helfen (nur in Notfällen wenn
Testfortgang sonst gefährdet)
Fragen Sie nach! „Wo sind wir jetzt?“ „Was ist gerade passiert?“
„Was können Sie hier alles machen?“
Verwenden sie keine Fachsprache! (nicht „dropdown Menü“,
„Coverflow“…)
12.03.2013
Titel der Präsentation und Name des Redners
26
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
Machen Sie eine Kurzauswertung
direkt nach dem Test
z.B. Mitschrift als Exceltabelle
Themenbezogen
Wenn Sie die Ergebnisse anderen
präsentieren möchten:
Schreiben Sie einen kleinen
Bericht mit Screenshots und
wichtigen Problemen
Schneiden Sie Highlights als
Video zusammen
AUSWERTUNG
12.03.2013
Titel der Präsentation und Name des Redners
27
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
ERGEBNISSE UMSETZEN
Usability ist kein Hexenwerk, oft reichen schon banale Änderungen
Probanden nennen häufig konkrete Verbesserungsvorschläge
Bei komplexen Problemen mit anderen Diskutieren, Guidelines zu
Rate ziehen
Evaluieren Sie ihre Änderungen
12.03.2013
Titel der Präsentation und Name des Redners
28
LEHRSTUHL FÜR DIDAKTIK UND
AUSBILDUNGSFORSCHUNG IN DER MEDIZIN
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
MEHR INFORMATION
Usability Professionals‘ Association
http://www.upassoc.org/
12.03.2013
Titel der Präsentation und Name des Redners
29
KLINIKUM DER UNIVERSITÄT MÜNCHEN®
NAME DER EINRICHTUNG.
KANN AUCH 2 ZEILIG SEIN
VIELEN DANK FÜR IHRE AUFMERKSAMKEIT
12.03.2013 30
ANSPRECHPARTNER:
Julia Küfner
Klinikum der Universität München
Lehrstuhl für Didaktik und Ausbildungsforschung
in der Medizin
E-Mail:julia.kuefner@lmudle.de