Intelligente Unterstützung für argumentatives Schreiben · 2014 | Computer Science Department |...

14
1 Christian Stab Intelligente Unterstützung für argumentatives Schreiben 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab | Workshop „Text als Werkstck - Wege zu einer computergesttzten berarbeitung von deutschen TextenDeutsches Institut fr Internationale Pdagogische Forschung, Frankfurt am Main, 7. Juli 2014.

Transcript of Intelligente Unterstützung für argumentatives Schreiben · 2014 | Computer Science Department |...

Page 1: Intelligente Unterstützung für argumentatives Schreiben · 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab | Workshop ... die dreidimensionale

1

Christian Stab

Intelligente Unterstützung für

argumentatives Schreiben

2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab |

Workshop „Text als Werkstuck - Wege zu einer computergestutzten Uberarbeitung

von deutschen Texten“ Deutsches Institut fur Internationale Padagogische Forschung,

Frankfurt am Main, 7. Juli 2014.

Page 2: Intelligente Unterstützung für argumentatives Schreiben · 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab | Workshop ... die dreidimensionale

2 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab |

Intelligente Unterstützung für argumentatives Schreiben

Motivation

Formulieren von Argumenten ist eine komplexe Aufgabe Ein Argument muss überzeugend, verständlich und nachvollziehbar sein

Die Komponenten eines Arguments müssen klar erkennbar sein

Ein Argument sollte mit der Kernaussage des Textes im Einklang stehen

Studien zeigen, dass Schüler Schwächen beim argumentativen Schreiben haben Nur ein Viertel der 12. Jahrgangsstufe ist in der Lage überzeugende Argumente zu schreiben (NAEP Persuasive

writing assessment (2007))

Ziele von argumentativer Schreibunterstützung: Individuelle Förderung der Argumentationsfähigkeiten und der Schreibkompetenz

Unterstützung von Autoren beim argumentativen Schreiben

Formatives Feedback für die Verbesserung von Argumenten

Verbesserung der Argumentationsqualität

Page 3: Intelligente Unterstützung für argumentatives Schreiben · 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab | Workshop ... die dreidimensionale

3 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab |

Intelligente Unterstützung für argumentatives Schreiben

Was sind Argumente?

Ein Argument besteht aus mehreren Komponenten

Behauptung (Claim oder Conclusion)

Anfechtbares Statement dessen Richtigkeit unklar ist, bspw. Meinung oder wiss. Schlussfolgerung

Gründe (Premises oder Support)

Eine Begründung zur Stärkung der Behauptung

Argumentationsstrukturen

from Peldzsus & Stede 2013

Page 4: Intelligente Unterstützung für argumentatives Schreiben · 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab | Workshop ... die dreidimensionale

4 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab |

Intelligente Unterstützung für argumentatives Schreiben

Was sind Argumente?

„In Museen werden detaillierte

Informationen und Hintergrundwissen zu

den Ausstellungstücken angeboten.

Deshalb ist ein Museumsbesuch besser

als sich Kunstwerke online anzusehen.

Zudem, ist es etwas anderes ein

Kunstwerk online zu sehen als es mit

eigenen Augen zu betrachten, da man in

einem Bild im Internet die Texturen oder

die dreidimensionale Struktur eines

Kunstwerks nicht erkennt.“

Behauptung

Begründung

Ein Museumsbesuch ist

besser als sich

Kunstwerke online

anzusehen

In Museen werden

detaillierte

Informationen und

Hintergrundwissen zu

den

Ausstellungstücken

angeboten

Es ist etwas anderes

ein Kunstwerk online

zu sehen als es mit

eigenen Augen zu

betrachten

da man in einem Bild

im Internet die

Texturen oder die

dreidimensionale

Struktur eines

Kunstwerks nicht

erkennt

Page 5: Intelligente Unterstützung für argumentatives Schreiben · 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab | Workshop ... die dreidimensionale

5 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab |

Intelligente Unterstützung für argumentatives Schreiben

Teilaufgaben / Herausforderungen

Automatische Erkennung der Argumentkomponenten

Unterscheidung von argumentativen und nicht argumentativen Textteilen

Identifikation von Behauptungen und Gründen

Identifikation der Argumentationsstruktur Welche Komponenten gehören zusammen?

Erkennung von argumentativen Diskursrelationen

Vorschläge zur Verbesserung von Argumenten

Beurteilung der Argumentationsqualität

Identifikation von „Schwachstellen“ in der Argumentation

Page 6: Intelligente Unterstützung für argumentatives Schreiben · 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab | Workshop ... die dreidimensionale

6 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab |

Intelligente Unterstützung für argumentatives Schreiben

Was sind gute Argumente?

Qualitätskriterien von Argumenten (Dalmer 2012)

(1) Die Struktur ist nachvollziehbar und verständlich

(2) Begründungen sind relevant für die Behauptung

(3) Die Begründungen sind allgemein akzeptabel (bspw. Faktenwissen)

(4) Die Begründungen sind hinreichend für die Behauptung

(5) Enthält Begründungen, die einer möglichen Widerlegung standhalten

Page 7: Intelligente Unterstützung für argumentatives Schreiben · 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab | Workshop ... die dreidimensionale

7 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab |

Intelligente Unterstützung für argumentatives Schreiben

Feedback zur Argumentationsstruktur (Kriterium 1)

Reihenfolge der Argumentationskomponenten

Argumente die mit der Behauptung beginnen werden besser verstanden und erinnert (Britt and Larson 2003)

„In Museen werden detaillierte

Informationen und Hintergrundwissen zu

den Ausstellungstücken angeboten.

Deshalb ist ein Museumsbesuch besser

als sich Kunstwerke online anzusehen.

Zudem, ist es etwas anderes ein

Kunstwerk online zu sehen als es mit

eigenen Augen zu betrachten, da man in

einem Bild im Internet die Texturen oder

die dreidimensionale Struktur eines

Kunstwerks nicht erkennt.“

Die Behauptung steht hier nach

einer Begründung

„Ein Museumsbesuch ist besser als sich

Kunstwerke online anzusehen.

In Museen werden detaillierte

Informationen und Hintergrundwissen zu

den Ausstellungstücken angeboten.

Zudem, ist es etwas anderes ein

Kunstwerk online zu sehen als es mit

eigenen Augen zu betrachten, da man in

einem Bild im Internet die Texturen oder

die dreidimensionale Struktur eines

Kunstwerks nicht erkennt.“

Page 8: Intelligente Unterstützung für argumentatives Schreiben · 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab | Workshop ... die dreidimensionale

8 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab |

Intelligente Unterstützung für argumentatives Schreiben

Feedback zur Argumentationsstruktur (Kriterium 1)

Diskursmarker erleichtern das Erkennen und Verstehen von

Argumenten

Die erste Begründung ist nicht

„markiert“

„Ein Museumsbesuch ist besser als sich

Kunstwerke online anzusehen.

In Museen werden detaillierte Informationen

und Hintergrundwissen zu den

Ausstellungstücken angeboten. Zudem, ist

es etwas anderes ein Kunstwerk online zu

sehen als es mit eigenen Augen zu

betrachten, da man in einem Bild im

Internet die Texturen oder die

dreidimensionale Struktur eines Kunstwerks

nicht erkennt.“

„Ein Museumsbesuch ist besser als sich

Kunstwerke online anzusehen.

Ein Grund dafür ist, dass Museen

detaillierte Informationen und

Hintergrundwissen zu den

Ausstellungstücken anbieten. Zudem,

ist es etwas anderes ein Kunstwerk

online zu sehen als es mit eigenen

Augen zu betrachten, da man in einem

Bild im Internet die Texturen oder die

dreidimensionale Struktur eines

Kunstwerks nicht erkennt.“

Page 9: Intelligente Unterstützung für argumentatives Schreiben · 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab | Workshop ... die dreidimensionale

9 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab |

Intelligente Unterstützung für argumentatives Schreiben

Feedback zur Relevanz der Begründungen (Kriterium 2)

Sind die Begründungen relevant für die Behauptung?

Behauptung

Begründung

Ein Museumsbesuch ist

besser als sich Kunstwerke

online anzusehen

In Museen werden

detaillierte Informationen

und Hintergrundwissen

zu den

Ausstellungstücken

angeboten

Es ist etwas anderes ein

Kunstwerk online zu

sehen als es mit eigenen

Augen zu betrachten

da man in einem Bild im

Internet die Texturen

oder die

dreidimensionale Struktur

eines Kunstwerks nicht

erkennt

? ?

?

Page 10: Intelligente Unterstützung für argumentatives Schreiben · 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab | Workshop ... die dreidimensionale

10 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab |

Intelligente Unterstützung für argumentatives Schreiben

Feedback zu Begründungen (Kriterium 3)

Basieren die Begründungen auf Faktenwissen oder werden weitere

Begründungen benötigt?

Ein Museumsbesuch ist

besser als sich Kunstwerke

online anzusehen

In Museen werden

detaillierte Informationen

und Hintergrundwissen

zu den

Ausstellungstücken

angeboten

Es ist etwas anderes ein

Kunstwerk online zu

sehen als es mit eigenen

Augen zu betrachten

da man in einem Bild im

Internet die Texturen

oder die

dreidimensionale Struktur

eines Kunstwerks nicht

erkennt

Ist das wirklich

wahr? Wahr

Wahr

Page 11: Intelligente Unterstützung für argumentatives Schreiben · 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab | Workshop ... die dreidimensionale

11 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab |

Intelligente Unterstützung für argumentatives Schreiben

Feedback zur Vollständigkeit (Kriterium 4+5)

Sind die Komponenten ausreichend oder gibt es Gegenargumente? (Setzt umfangreiche Datenbanken voraus)

Ein Museumsbesuch ist

besser als sich Kunstwerke

online anzusehen

In Museen werden

detaillierte Informationen

und Hintergrundwissen

zu den

Ausstellungstücken

angeboten

Es ist etwas anderes ein

Kunstwerk online zu

sehen als es mit eigenen

Augen zu betrachten

da man in einem Bild im

Internet die Texturen

oder die

dreidimensionale Struktur

eines Kunstwerks nicht

erkennt

Das Internet

bietet viele

Informationen

die bei Bedarf

aufgerufen

werden können.

Museumsbesuche

sind mit hohen

Reisekosten

verbunden.

Onlineportale

bieten nicht nur

Bilder sondern

auch

dreidimensionale

Animationen an.

Page 12: Intelligente Unterstützung für argumentatives Schreiben · 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab | Workshop ... die dreidimensionale

12 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab |

Intelligente Unterstützung für argumentatives Schreiben

Zusammenfassung

Argumentative Schreibunterstützung ermöglicht formatives Feedback zu Argumenten

bietet eine individuelle Förderung der argumentativen Schreibkompetenz

unterstützt Autoren beim Schreiben von überzeugenden Argumenten

Voraussetzungen für solche Systeme NLP-Methoden zur Erkennung von Argumentkomponenten und -strukturen

Automatische Methoden zur Bewertung der Argumentationsqualität

Umfangreiche Datenbanken, die argumentationsbezogene Suche ermöglichen

Forschungsfragen Wie effektiv sind die verschiedenen Arten von Feedback?

Welche Feedbackarten verbessern die Schreibkompetenz und die Argumentationsfähigkeiten?

Page 13: Intelligente Unterstützung für argumentatives Schreiben · 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab | Workshop ... die dreidimensionale

13 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab |

Kontakt / Contact

Christian Stab Technische Universität Darmstadt

Ubiquitous Knowledge Processing Lab

Hochschulstr. 10, 64289 Darmstadt, Germany

+49 (0)6151 16 - 4197

+49 (0)6151 16 - 5455

stab (at) ukp.informatik.tu-darmstadt.de

Vielen Dank für die Aufmerksamkeit

Fragen?

Page 14: Intelligente Unterstützung für argumentatives Schreiben · 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab | Workshop ... die dreidimensionale

14 2014 | Computer Science Department | UKP Lab - Prof. Dr. Iryna Gurevych | Christian Stab |

Literatur

M. Anne Britt and Aaron A. Larson. 2003. Constructing representations of arguments. Journal of Memory and Language, 48(4):794 – 810.

T. Edward Damer (2012). Attacking Faulty Reasoning: A practical guide to fallacy-free reasoning. Cengage Learning; 7th edition

National Assessment of Educational Progress. (2007). NAEP 2007 writing report card: Findings from the National Assessment of Educational Progress.

Washington, DC: U.S. Department of Education, Institute of Education Sciences, National Center for Education Statistics.

Andreas Peldszus and Manfred Stede (2013). From Argument Diagrams to Argumentation Mining in Texts: A Survey. International Journal of Cognitive

Informatics and Natural Intelligence (IJCINI), 7(1), 1–31. doi:10.4018/jcini.2013010101

Christian Stab and Iryna Gurevych. 2014. Annotating argument components and relations in persuasive essays. In Proceedings of the 25th

International Conference on Computational Linguistics (COLING 2014), page (to appear), Dublin, Ireland, August.