Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für...

25
Evaluation als Dialog Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig- Partnerschaften 30. September 2010 Christa Bauer, Elisabeth Amtmann

Transcript of Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für...

Page 1: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Evaluation als DialogEvaluation als Dialog

Mag.a Christa Bauer, Bakk.a Elisabeth AmtmannEvalitas KG

Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September 2010

Christa Bauer, Elisabeth Amtmann

Page 2: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Überblick

Input• Evaluation im Allgemeinen• Selbstevaluation im Speziellen

Begriffe– Grundsätze – Anforderungen an die Akteurinnen und Akteure– Instrumente– Ablauf– Weiterführende Links und Literatur

Training

Christa Bauer, Elisabeth Amtmann

Page 3: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Evaluation in internationalen Projekten – wozu?

Weiterentwicklung der Projektarbeit Qualitätssicherung

Ständige Bewegung sichert Stabilität!

Christa Bauer, Elisabeth Amtmann

Page 4: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Evaluation im Allgemeinen

„Evaluation bedeutet ganz allgemein, Erfahrungen der pädagogischen Praxis wahrzunehmen, zu reflektieren, zu bewerten und zu nutzen.“ (Hackl 2005, S. 168).

InteraktionInteraktion

EVALUATIONEVALUATIONChrista Bauer, Elisabeth Amtmann

Alltagsroutine Professionelles Handeln

Page 5: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Zirkel der Alltagsroutine

Christa Bauer, Elisabeth Amtmann

Page 6: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Selbstevaluation im Besonderen

„Selbstevaluation in der Ausbildung und/oder von Lernen ist der Prozess des systematischen Einholens, der Analyse und des Austausches von Daten, die Bildungsprozesse von Einzelpersonen, Gruppen oder Organisationen (Institutionen, usw.) betreffen, um das Lernen zwischen allen betroffenen Parteien voranzutreiben, so dass Beurteilungen und Entscheidungen auf Daten beruhen und nicht auf Annahmen.“ (Tilkin/Kerkhofs 2005, S. 8).

Christa Bauer, Elisabeth Amtmann

Page 7: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Wer oder was verbirgt sich hinter dem Selbst?

Sämtliche, in Bildungsprozesse involvierte Ebenen und Einheiten (Einzelpersonen, Lehrende und Lernende, Arbeitsgruppen, Abteilungen, gesamte Institutionen oder Organisationen)

können also ihre eigenen Rollen und ihre eigene Arbeit evaluieren und reflektieren.

Christa Bauer, Elisabeth Amtmann

Page 8: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Selbstevaluation ist …

… selbst bestimmte Evaluation in Trainings- und Organisationsentwicklungsprozessen. Zeit, Ort, Planung, Themen, Instrumente, Konsequenzen

… die Untersuchung einer Situation anhand vorher (gemeinsam?) formulierter Standards

Christa Bauer, Elisabeth Amtmann

Page 9: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Die 3 Grundsätze von Selbstevaluation

Selbstevaluation als Dialog

Selbstevaluation als Lernprozess

Selbstevaluation als Reflexion

Christa Bauer, Elisabeth Amtmann

Page 10: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Selbstevaluation als Dialog

Selbstevaluation - ein interner Dialogzwischen Trainer/innenzwischen Trainer/innen und Teilnehmer/innenzwischen Management und Mitarbeiter/innen

Selbstevaluation – ein externer Dialogzwischen Trainer/innen und Geldgebernzwischen Trainer/innen und Institutionenzwischen einer Organisation und der öffentlichen Hand

Christa Bauer, Elisabeth Amtmann

Page 11: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Auf dem Weg zu einem veränderten Lernverständnis

Christa Bauer, Elisabeth Amtmann

Input Output

Input OutputProzesse

Page 12: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Selbstevaluation als Lernprozess

Lernprozesse sind… nicht linear, sondern wechselseitig… immer auch soziale Prozesse… sie involvieren Emotionen

Christa Bauer, Elisabeth Amtmann

Page 13: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Christa Bauer, Selbstevaluation

Lernen ist identitätsstiftend

Lernen = Verändern = Verbessern

„Wenn ich etwas gelernt habe,

dann bin ich anders als vorher.“

Konstruktion von Wirklichkeit

Erweiterung der Handlungsmöglichkeiten

Page 14: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Christa Bauer, Selbstevaluation

Formel für erfolgreiches Lernen

D x V x F > RD = Dissatisfaction

V= VisionF= First StepsR= Resistance

Dannemiller Typon Ass. 2000

Page 15: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Zwecke von Selbstevaluation

Page 16: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Selbstevaluation als Reflexion

„…die Suche nach der zum Teil verborgenen Wirklichkeit erfordert die Bereitschaft, aus der «eigenen Situation» herauszutreten und diese kritisch zu hinterfragen“ (Altrichter 1994, zit.n. Holenstein 1999, S. 48).

Durch das Einholen von Feedback aus unterschiedlichen Quellen wird versucht, ein über das Subjekt hinausgehendes Verständnis sowohl der eigenen Rolle als auch des Kontextes zu sammeln und aufzubauen (vgl. Tilkin/Kerkhofs 2005, S. 14).

Christa Bauer, Elisabeth Amtmann

Page 17: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Anforderungen an die Akteurinnen und Akteure

• Bereitschaft zur Reflexion Bewusst werden eigener Gefühle, Haltungen und Werte – mit Fakten verbinden (Inhalt, Kontext, Prozess, Situationen) – in sinnvollen Zusammenhang stellen

• Beobachten und nicht interpretieren Die beobachtende Person ist immer Teil der beobachteten Situation!

• Konstruktive Feedback-Kultur

Christa Bauer, Elisabeth Amtmann

Page 18: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Wohin können

wir schauen?

Ökonomie:Ökonomie:Umgang mit Umgang mit RessourcenRessourcen

Projekttreffen:Projekttreffen:Organisation,Organisation,Produktivität, Produktivität, ZufriedenheitZufriedenheit

persönlich persönlich empfundene, zu empfundene, zu

klärende klärende ProblemeProbleme

vorgeschriebenvorgeschriebene / empfohlene e / empfohlene

BereicheBereicheKonflikteKonflikte

ZielerreichungZielerreichungStärken-Stärken-SchwächenSchwächen

analyseanalyse

Qualität der Qualität der interkulturellen interkulturellen KommunikationKommunikation

Themen eines Themen eines Qualitätsevalu-Qualitätsevalu-ationsmodellsationsmodells

Christa Bauer, Elisabeth Amtmann

Page 19: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Die Wahl der passenden Instrumente

Christa Bauer, Elisabeth Amtmann

Page 20: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Christa Bauer, Elisabeth Amtmann

Instrumente können sein…

PostkartenSketchFotolanguageWeltcaféZukunftsszenario

Bericht,SprechblasenFotos, VideoMindmaps,Fokusgruppen…

individuell

kollektiv

produktivreaktiv

GruppeninterviewRaumdiagonale4-EckenZielscheibe, Diagramme…

FragebogenInterviewSelbstevaluationsprofil

Page 21: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Christa Bauer, Elisabeth Amtmann

Kreative Instrumente/Feedbackformen

Mind MapSchwarzes Brett

Feedback/ Bilanzkonferenz

Sketch

Videoaufnahme

Objekte → Symbole

Themenaufstellung

Fotos

Fotolanguage

Postkarten

Skulpturen

Comics

Geschichten

Blitzlicht

Brief

Raumdiagonale

Wandzeitung

4-Ecken

Evaluationszielscheibe

Szenario

Zukunftsszenario

Feedbackstern

Spielkarten

Post it-Notizen

Page 22: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

WER? evaluiert

• WEN oder WAS?

• WANN?

• WO?

• WOZU?

• mit welchen MITTELN?

• unter welchen BEDINGUNGEN?

Evaluations-Planungszyklus

Page 23: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Ablauf des SE-Prozesses

Christa Bauer, Elisabeth Amtmann

• Gegenstand (Situation, Handlung, Person, Institution, Programm)

• Anspruch / Ziel / Standard

• Informationen einholen / Daten sammeln• Beobachten oder Feedback

• Informationen verdichten / Daten auswerten

• Interpretieren / Bewerten

• Konsequenzen ziehen

• Dokumentieren

Page 24: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Warum gerade Selbstevaluation?

Christa Bauer, Selbstevaluation

Selbstevaluation ist

… motivierend… Kompetenz orientiert… unterstützt Lernprozesse… interaktiv… reflexiv… dialogisch… fördert konstruktive Prozesse der Weiterentwick-lung aller Beteiligten

Page 25: Evaluation als Dialog Mag. a Christa Bauer, Bakk. a Elisabeth Amtmann Evalitas KG Projekttag für Comenius- und Grundtvig-Partnerschaften 30. September.

Wertvolle Links und Literatur

Christa Bauer, Selbstevaluation

Selbstevaluation in internationaler Projektarbeit – www.mice-t.netSelbstevaluation in Schulen – www.i-probenet.euSelbstevaluation in der Erwachsenenbildung – www.sealll.euProjektmanagement und Projektmonitoring – http://qas.programkontoret.se

DeGEval (2004): Empfehlungen zur Anwendung der Standards für Evaluation im Handlungsfeld der Selbstevaluation. Mainz: Eigenverlag Deutsche Gesellschaft für Evaluation e.V.Heiner, Maja (1988): Von der forschungsorientierten zur praxisorientierten Selbstevaluation. Entwurf eines Konzeptes. In: Heiner, Maja (Hrsg.): Selbstevalua-tion in der sozialen Arbeit. Fallbeispiele zur Dokumentation und Reflexion beruflichen Handelns. Freiburg im Breisgau: Lambertus-Verlag, S. 7 – 40.Holenstein, Hildegard (1999): Fähig werden zur Selbstevaluation: Erfahrungs-berichte und Orientierungshilfen; nationales Forschungsprogramm 33, Wirksamkeit unserer Bildungssysteme. Zürich: Verlag Ruegger.Spiegel, Hiltrud von (1993): Aus Erfahrung lernen: Qualifizierung durch Selbsteva-luation. Münster: Votum-Verlag.Tilkin, Guy/Kerkhofs, Lies (2005): Handbuch SEALLL. In: http://www.sealll.eu/docs/manual/Sealll01_DE.pdf [15.03.2009].