1 / 24

Crazytalk

wie digitale Bilder durch Vorlesensprechen lernen

2 / 24

Mit Beispiel voran

3 / 24

Medienbildung● Literalität ist Ergebnis einer sozialen Praxis, die an

Medien gekoppelt ist.

● Beim digital erstellten Trickfilm kommen alle Medien- und Zeichensysteme seit Beginn der Höhlenmalerei zur Anwendung

● Dreh- und Angelpunkt unserer Projekte ist dabei das Sprechen beim Tun und somit das sprachgebundene Denken

● Bei der Gesichtsanimation koppeln wir das emotional stärkste Zeichensystem – den menschlichen Blick - an die Sprache

4 / 24

Crazytalk

● Automatische Erkennung von Sprachmerkmalen / Sprechmerkmalen

● automatische Zuweisung zu Gesichtsausdrücken

● Transformation verbal nonverbal→● in der Grundfunktion auch von

Grundschulkindern intuitiv bedienbar

5 / 24

Gesichtsmerkmale

Automatisch erkannt, manuell verbessert

6 / 24

Phoneme, Morphing, Visem

Sonagramm Visem

7 / 24

Viseme = Mundbilder

● Herkunft: Lippenlesen, Gebärdensprache, Gehörlosenpädagogik

● Erweitert:Augenbrauen, Augen, Gesichtsmuskel

8 / 24

Viseme = Mundbilder

9 / 24

Aktivieren / deaktivieren von Gesichtsmuskeln

10 / 24

Viseme = Mundbilder

● erleichtern Textverständnis durch Mimik:– Aussprache, Artikulation

– Gefühle, Befindlichkeiten

– Haltungen

– Absichten

● verstärken Gefühle durch „Blickkontakt“ mit dem Alter-Ego der eigenen Rolle

11 / 24

Anwendung Grenzach-Wyhlen

● Betreuung Ganztagsgrundschule

– Projekt: Vom BUCH zum Trickfilm(Schwerpunkt Buch und Geschichte)

● Atelierunterricht Grundschule

– Vom Daumenkino zum Trickfilm(Schwerpunkt Technik)

● TrickfilmClub

12 / 24

Rahmen

● 5 bis 18 Teilnehmer● 0 bis 70% Schüler mit Migrationshintergrund● 1. - 4. Klasse● 12 UE bis 40 UE

→ Sehr unterschiedliche Arbeits-Anordnungen je nach Alterszusammensetzung, Sprachniveaus, Anzahl der Kinder, verfügbarer Zeit und Zielvorgabe

13 / 24

Häufige Sprachprobleme

● Syntax mit Merkmalen konzeptioneller Schriftlichkeit

– mehrteilige Prädikate

– Verständnisprobleme bei Inversion von Satzgliedern (PSO, OPS)

● Artikulation („Sauberschwert“ statt „Zauberschwert“)

● Gestaltung:Betonung und Staupausen als Merkmal der Sinnerkennung beim Lautlesen

14 / 24

Betonung durch Vereinfachung

● Je abstrakter ein Gesicht dargestellt ist, desto mehr Gesichtsmerkmale müssen in der Animation deaktiviert werden

● Medial ungeübte Kinder haben Schwierigkeiten,emotionale Ausdrücke zuzuordnen

–

15 / 24

Betonung durch Vereinfachung, ABER….

„Je abstrakter das Gesicht,desto höher der Wahrnehmungsaufwand“(Scott McCloud)

16 / 24

Betonung durch Vereinfachung

zufrieden

einfach

hinterhältig

schwer

17 / 24

Daraus folgt ….

● Annahme größerer Verständlichkeit durch Vereinfachung kann nicht einfach vorausgesetzt werden

● Gesichtsanimation mit Bedacht auswählen

● Beurteilungskriterium: kognitiver Aufwand

18 / 24

Gefühl, Ausdruck, Sprache

BedenkenBedenken Sorge Angst Schrecken

Zufriedenheit Vergnügen Freude Gelächter

... ... ... ...

Jede Nuance hat einen Namen – Wortschatzübungen mit Adjektiven, Verben und Substantiven (erfreut, erfreuen, Freude)

Grundgefühl →Intensitätssteigerung → Gefühlsnuancen

19 / 24

Praktische Herausforderungen

● Disziplin (!) Arbeit mit Beamer empfohlen, →Führungshaltung, Frontalposition

● Streuung: flüssig lesende Erstklässler, Viertklässler mit grundlegenden Leseproblemen

● Auswendig lernen statt lesen (bei fundamentalen Leseproblemen, Erstklässler)

● „Ich habe mich getraut und keiner hat gelacht“

20 / 24

Beispiele

● Artikulation:Gedichte und Zungenbrecher (Artikulation)

● Syntax:Ninjago-Comics in Dialog umschreiben

● Gestaltendes Lesen:animierte Erzähler (Kleiderschrank als Vorleser von „Des Kaisers neue Kleider“)

21 / 24

Crazytalk 8

● Sprachsynthesesystem● TEIL von Crazytalk Animator (nicht verwechseln!)● Hersteller: Reallusion Inc.● Preisstaffel: 49,- / 129,- / 169,- (Stand:März 2018)

22 / 24

Ausblick: Phonologische Bewusstheit

23 / 24

Quellen und Literatur● Crazytalk 8: Erste Schritte

https://www.reallusion.com/de/crazytalk/tutorial.html

● Grundlagen der Lesedidaktik und der systematischen schulischen Leseförderunghttp://d-nb.info/1139382152

● Eigenständiges Lesenhttp://d-nb.info/1153622513

● Gekonnt vorlesen, IN: Stimm- und Sprechtraining für den Unterricht‘http://d-nb.info/1079229280

● Scott McCloud: Comics richtig lesen, ISBN: 978-355172113-6http://swb.bsz-bw.de/DB=2.1/PPNSET?PPN=087368633&INDEXSET=1

● Scott McCloud: Mixing emotional primarieshttps://i.imgur.com/kQYj6LG.jpg

● Quelle Folie 15Kopf von Fritz Hoffmann-La Roche (https://commons.wikimedia.org/wiki/File:La_roche_1896.jpg), „La roche 1896“, de:User:Wait4Weekend (original uplaoder to de:), La roche 1896, Ausschnitt Kopf: Fritz Hoffman-La Roche, Umrissfilter, CC0 1.0, https://creativecommons.org/publicdomain/zero/1.0/legalcode )

24 / 24

Fragen, Anregungen, Kritik?

Detlev HoffmeierGemeindebücherei Grenzach-Wyhlenhoffmeier@grenzach-wyhlen.de