Von der Kursevaluation zur...

39
Von der Kursevaluation zur Unterrichtsforschung Konzeption und Ergebnisse der Begleitforschung in einem Deutsch- Intensivkurs für japanische Studierende Michael Schart [email protected]

Transcript of Von der Kursevaluation zur...

Page 1: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Von der Kursevaluation zur Unterrichtsforschung

Konzeption und Ergebnisse der

Begleitforschung in einem Deutsch-

Intensivkurs für japanische Studierende

Michael [email protected]

Page 2: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Inhalt

Forschungsfeld

Konzeption der Evaluation

Evaluationsergebnisse 2003-2007

Beispiel für die Verbindung von Evaluation und empirischer Unterrichtsforschung

Page 3: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Forschungsfeld

”Intensivkurs Deutsch für Studierende der Sozialwissenschaften” (German Area Studies) an der Juristischen Fakultät der Keio-Universität Tokio

Zielgruppe: Studierende der Fachrichtungen Jura und Politikwissenschaft

grundlegende Idee: Fachstudium und Fremdsprachenlernen verbinden

2 Phasen: I. 1993-2002 II. seit 2003

Page 4: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Ziele des Kurses

Sprach- und Sachkompetenz entwickeln

umfassende Kommunikationsfähigkeit auf Deutsch

„intelligentes Grammatikwissen” aufbauen

Diskussionsfertigkeit und –festigkeit

gesellschaftliche Probleme fachspezifisch auf Deutsch erörtern können

die eigene Kultur vermitteln und gegebenenfalls auch verteidigen können

Selbständigkeit und Motivation zum Lernen unterstützen

Sambe (1996, 2000); Richter (1999)

Page 5: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Mittelstufe 1

Mittelstufe 2

Oberstufe

Grundstufe A

Grundstufe B

1. Studienjahr 2. Studienjahr 3. & 4. Studienjahr

Kursstruktur

Page 6: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Mittelstufe 1

Mittelstufe 2

Oberstufe

Grundstufe A

Grundstufe B

AufnahmetestEinstufungstest

1. Studienjahr 2. Studienjahr 3. & 4. Studienjahr

Wege durch den Kurs

Page 7: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Forschungsmotivation

Legitimierung Vergewisserung Qualitätsverbesserung Erkenntnisgewinnung

Page 8: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Forschungsebenen

interneForschende

externeForschende

Page 9: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Forschungsinstrumente

interneForschende

externeForschende

● Fragebögen● ”Blitzlichter”● Tagebücher● Videoaufnahmen ● Dokumentenanalyse

● Fragebögen

● Dokumentenanalyse

● Einzel- und Gruppeninterviews

● Unterrichtsbeobachung

Page 10: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Forschungsinstrumente

interneForschende

● Fragebögen (Sphinx, MaxQDA)

● Dokumentenanalyse

Page 11: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Für & Wider von Lehrveranstaltungs-bewertungen mit Fragebögen

Studierende als wichtige Zielgruppe Studierende als ”Experten” ab n>10 relativ stabile, objektive und valide

Ergebnissen Mittelwerte spiegeln repräsentatives Meinungsbild

Page 12: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Für & Wider von Lehrveranstaltungs-bewertungen mit Fragebögen

Studierende als ”Alltags-Evaluatoren” Erhebungsartefakte Auswertungsartefakte Reduzierung der Evaluation auf Urteile der

Studierenden

( Helmke 2003, Kromrey 2001, Rindermann 1997, Schnell & Kopp 2001)

Page 13: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Konsequenzen

Fragebögen langfristig entwickeln Itemsammlungen nutzen Likert-skalierte Items und offene Fragestellungen

kombinieren Streuung berücksichtigen Balance zwischen Meinungen der Studierenden

und Kurskonzeption anstreben

→ komplexe Sachverhalte erfordern komplexe Methoden

→ Fragebögen ein wichtiges Instrument summativer Evaluation/ Unterrichtsentwicklung

Page 14: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Studierende 2003 - 2007

Personen im Intensivkurs 169 Teilnehmende in den Gruppen 326 potentielle Fragebögen 581 erhaltene Fragebögen 409 Rücklaufquote 70,4 %

Page 15: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Studierende 2003 - 2007

2003 2004 2005 2006 20070

2

4

6

8

10

12

14

16

18

20

Studierende im Intensivkurs 2003-2007

Grundstufen Mittelstufe 1 Mittelstufe 2 Oberstufe

TN

pro

Kur

s

Page 16: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Wege durch den Kurs: Gruppe 1

19

16

3

5

Gesamtzahl der TN 169

Page 17: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Wege durch den Kurs: Gruppe 2

52

25

19

Gesamtzahl der TN 169

Page 18: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Wege durch den Kurs: Gruppe 3

9

2

7

7

3

Gesamtzahl der TN 169

2

9

3

Page 19: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Items des Fragebogens

Zufriedenheit mit Studium, Intensivkurs & Unterricht

Selbsteinschätzung (Aktivität, Motivation)

Ziele und Struktur des Unterrichts

Lehrende (Einstellung, Kompetenz)

Unterrichtsatmosphäre

Unterrichtsmaterial und Lernplattform

Page 20: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Ergebnisse

I. verallgemeinerbare Aussagen

Page 21: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Gesamtbewertung des Unterrichts

03 04 05 06 073

3,5

4

4,5

5

Mittelstufe 1

03 04 05 06 073

3,5

4

4,5

5

JD

Oberstufe

Page 22: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Lernenzeit außerhalb des Unterrichts

03 04 05 06 070%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

von 5.00 bis 6.00von 4.00 bis 5.00von 3.00 bis 4.00von 2.00 bis 3.00von 1.00 bis 2.00weniger als 1.00

Mittelstufe 1

Page 23: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Ergebnisse

I. verallgemeinerbare Aussagen

II.Intensivkurs und Studium

Page 24: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Zufriedenheit mit Studium und Intensivkurs

03 04 05 06 073

3,5

4

4,5

5

SIK

03 04 05 06 073

3,5

4

4,5

5

SIK

Grundstufe Oberstufe

Page 25: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Zufriedenheit mit Studium und Intensivkurs

03 04 05 06 073

3,5

4

4,5

5

SIK

03 04 05 06 073

3,5

4

4,5

5

SIK

Mittelstufe 1 Mittelstufe 2

Page 26: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Wichtigkeit des Deutschlernens

GS M 1 M 2 OS0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

nicht wichtigeher unwichtigweder nocheher wichtigsehr wichtig

Page 27: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Ergebnisse

I. verallgemeinerbare Aussagen

II.Intensivkurs und Studium

III. Unterrichte einer Niveaustufe

Page 28: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Ergänzen sich die Unterrichte?

03 04 05 06 072,5

3

3,5

4

4,5

5GSM 1M 2OS

Page 29: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Ergebnisse

I. verallgemeinerbare Aussagen

II.Intensivkurs und Studium

III. Unterrichte einer Niveaustufe

IV.Lehrende

Page 30: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Bewertung der Lehrenden

Engagement JEngagement D

3

3,5

4

4,5

5

GSM 1M 2OS

Freundlichkeit JFreundlichkeit D

3

3,5

4

4,5

5

GSM 1M 2OS

Page 31: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Bewertung der Lehrenden

Kompetenz JKompetenz D

3

3,5

4

4,5

5

GSM 1M 2OS

Page 32: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Ergebnisse

I. verallgemeinerbare Aussagen

II.Intensivkurs und Studium

III. Unterrichte einer Niveaustufe

IV.Lehrende

V.formorientiertes und inhaltsorientiertes Material

Page 33: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Unterrichtsmaterial

03 04 05 06 073

3,5

4

4,5

5

Int JEff JInt DEff D

Grundstufe

03 04 05 06 073

3,5

4

4,5

5

Int JEff JInt DEff D

Mittelstufe 1

Page 34: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Ergebnisse

I. verallgemeinerbare Aussagen

II. Intensivkurs und Studium

III. Unterrichte einer Niveaustufe

IV.Lehrende

V.formorientiertes und inhaltsorientiertes Material

VI.zentrale Kursziele und Unterrichtsdesign

Page 35: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

zentrale Kursziele

Aut J Aut D Kul J Kul D3

3,5

4

4,5

5

GSM 1M 2OS

Page 36: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

zentrale Kursziele

Oberstufe: 28% ”zu viel Inhaltsorientierung”

Mittelstufe 1: 35% ”zu viel Inhaltsorientierung”

Mittelstufe 2: 65% ”zu viele Alltagsthemen, zu wenig fachliche Inhalte”, 26% ”zu viel Formorientierung”

Page 37: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Anknüpfungspunkte für die Unterrichtsforschung

Übergang Grundstufe – Mittelstufe 1

interessantes Material für Grundstufe

fachliche Inhalte für Grundstufe

Kompetenz der deutschen Lehrenden

Erfahrungen der deutschen Lehrenden

Page 38: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Forschungsfragen

Bereitet ein größerer Anteil aufgabenorientierten und inhaltsorientierten Unterrichts besser auf die Anforderungen der Mittelstufe vor?

Gibt es beim Verhalten und bei den Lernprozessen der Studierenden in beiden Klassen unterschiedliche Muster?

Wie entwickeln sich die Studierenden beider Klassen über 3 Jahre hinweg?

Wie nehmen die Studierenden selbst die beiden Konzeptionen wahr? Welche positiven und negativen Aspekte werden betont?

Page 39: Von der Kursevaluation zur Unterrichtsforschungforschung.id-keio.org/wp-content/uploads/2017/02/Vortrag-Essen-20… · Von der Kursevaluation zur Unterrichtsforschung Konzeption und

Grundstufe B

Grundstufe A

Forschungskonzeption

interne Forschende

externe Forschende

●Fragebögen

●Lerntagebuch

●Video-aufzeichnungen des Unterrichts

● Produkte der Lernenden

●Interviews

●Videos des Unterrichts, einzelner Aufgaben & Prüfungen

● Produkte der Lernenden

→ kognitive & soziokulturelle Perspektive