scoyo

Lernzuwachsmessung

Duisburg, 15.06.2009

Lernzuwachsmessung

Studiendesign

Zur Messung des Lernzuwachses innerhalb der scoyo-Plattform wurde vom Lehrstuhl für

Mediendidaktik der Universität Duisburg-Essen ein quasi-experimentelles Studiendesign

entwickelt, dem ein Versuchsplan mit Vorher- / Nachhermessung zugrunde liegt. Vor dem

eigentlichen Feldexperiment fand ein Pretest zur Messung des vorhandenen Vorwissens

der Schüler statt (Zeitpunkt t0 / vor Bearbeitung der Lernsequenz). Nach einer Feld- bzw.

Lernzeit von einer Woche wurde dann noch ein Posttest (Zeitpunkt t1 / nach Bearbeitung

der Lernsequenz) durchgeführt.

Bevor die Inhalte einer Lernsequenz präsentiert wurden, erfolgte dabei zunächst einmal die

Präsentation der Fragen aus dem Pretest, bevor den Schülern die entsprechenden

Lernmodule für eine Zeit von einer Woche freigeschaltet wurden. Nach Ablauf dieser

Woche wurde ein Posttest durchgeführt, bei dem die Schüler erneut eine Reihe von Fragen

beantworten mussten. Diese waren nicht inhaltsgleich mit den Fragen aus dem Pretest,

jedoch strukturähnlich und vom gleichen Schwierigkeitsgrad. Der Test umfasste jeweils

zehn Wissensfragen, die sich unmittelbar auf die Inhalte der Lerngeschichten bezogen. Ob

und in welchem Umfang die Lernplattform zwischen den Messzeitpunkten tatsächlich

genutzt wurde, wurde über die Daten einer Logfile-Analyse geprüft. Zusätzlich wurde noch

nach möglichen intervenierenden Variablen für den zu messenden Lernerfolg gefragt, z.B.

ob außer der scoyo-Lernplattform noch weitere Lernmaterialien während der Dauer des

Experimentes genutzt wurden. Die Zielvariable der Studie bildete der Lernzuwachs ∆LZ

zwischen den Messzeitpunkten, d.h. die Veränderung des Wissensstandes der Schüler,

wenn man ihr Abschneiden im Pretest mit dem Resultat des Posttests vergleicht.

An dem Feldexperiment nahmen insgesamt N= 824 Schüler aus 16 Bundesländern teil. Als

Ergebnis des Feldexperimentes wurde ein durchschnittlicher Lernzuwachs von 64 Prozent

festgestellt.

Lernzuwachsmessung

(Ergebnisse der Erstanalyse)

Universität Duisburg-Essen

Steinbeis Transferzentrum Bildung und Medien Prof. Dr. Michael Kerres

Prozentualer Lernzuwachs nach Bearbeitung der scoyo Lernsequenzen

0

10

20

30

40

50

60

70

Die Bearbeitung der scoyo Lernsequenzen verbessert das Abschneiden der Schüler im Posttest um 64,32 %

Lernzuwachs nach Lernsequenzen

Lernsequenz Stichproben- größe

Prestestergebnis (arithmetisches

Mittel)

Posttestergebnis (arithmetisches

Mittel)

Differenz (absolut)

Differenz (Prozent)

Signifikanz

LS 1 (Mathe: Einführung der Dezimalzahlen)

N = 152 5,45 8,07 + 2,61 + 48,07 % p < 0,01

LS 2 (Mathe: Körper, Netze, Schrägbilder)

N = 34 4,74 6,32 + 1,59 + 33,33 % p < 0,01

LS 3 (Chemie: Erarbeitung des Stoffbegriffs)

N = 280 4,51 7,40 + 2,88 + 64,08 % p < 0,01

LS 5 (Geschichte: Von der Gründung Roms zur Republik)

N = 365 3,83 6,85 + 3,01 +78,85 % p < 0,01

Summe über alle LS N = 831 4,40 7,23 + 2,84 + 64,32% p < 0,01

Lernzuwachs nach Bundesländern

0,00%

20,00%

40,00%

60,00%

80,00%

100,00%

120,00%

140,00%

Meckle

nburg

-Vorp

ommern

Bayern

Nieders

achs

en

Sachs

en

Brande

nburg

Baden

-Würt

tembe

rg

Bremen

Schles

wig-Hols

tein

Nordrhe

in-W

estfa

len

Hambu

rgBerl

in

Hesse

n

Sachs

en-A

nhalt

Rheinl

and-P

falz

Saarla

nd

Thürin

gen

Prozentualer Lernzuwachs nach Schultyp

0,00%

10,00%

20,00%

30,00%

40,00%

50,00%

60,00%

70,00%

80,00%

90,00%

Gymnasium Realschule Gesamtschule Mittelschule

Empfundener Spielspaß: "Das Lernen mit scoyo hat mir Spaß gemacht"

010203040506070

trifft zu trifft eher zu trifft eher nicht zu trifft nicht zu

89,7 % der Befragten stimmen der Aussage zu, dass das Lernen mit scoyo Spaß gemacht hat!

Lernzuwachs nach empfundenem Spielspaß: "Das Lernen mit scoyo hat mir Spaß gemacht"

0,00%10,00%20,00%30,00%40,00%50,00%60,00%70,00%80,00%

trifft zu trifft eher zu trifft eher nicht zu trifft nicht zu

Der Lernzuwachs fällt tendenziell bessser aus, je höher der empfundene Spielspaß ist

Lernzuwachs nach Vorwissen

0,00%10,00%20,00%30,00%40,00%50,00%60,00%70,00%80,00%90,00%

ja, schon mal mit dem Themabeschäftigt

nein, Thema war völlig neu

Teilnehmer ohne Vorwissen profitieren stärker von der Bearbeitung einer Lernsequenz als Teilnehmer mit Vorwissen

Lernzuwachs nach Vorwissen (Quelle)

50,00%52,00%54,00%56,00%58,00%60,00%62,00%64,00%66,00%68,00%

Habe das Thema schon einmalim Schulunterricht bearbeitet

Habe schon mal bei andererGelegenheit davon gehört

Teilnehmer mit außerschulischem Vorwissen profitieren in stärkerem Maße von der Bearbeitung einer Lernsequenz als Teilnehmer mit schulischem Vorwissen

Filterung unplausibler Fälle

Stichprobe

N = 1163 Fälle

bereinigte Stichprobe

N = 824 Fälle

Fallausschluss nach Zeitmuster

(Bearbeitungszeit Pretest / Posttest

zu gering)

Fallausschluss nach Zeitmuster

(Bearbeitungszeit Lernsequenz zu

gering)