bmvit.gv.at

Orientierungslose Wirkungsorientierung?

Begriffe, Narrative und Instrumente der wirkungsorientierten

Haushaltsführung

bmvit.gv.at

Inhalt

• Begriffschaos

− Was gibt es für Begriffe?

− Was bedeuten diese Begriffe?

• Wirkung und Wirkungsnarrative

− Was wirkt tatsächlich?

• Instrumente zur Wirkungsmessung

− Wirkungsorientierung vs. Evaluierung

bmvit.gv.at

BEGRIFFSCHAOS

bmvit.gv.at

• Wie beschreibt/beziffert man die Welt?

• Zentrale Bezeichnungen reflexiv-iterativer Systeme (neben vielen weiteren Wortschöpfungen)

− Feedback

− Reporting

− Monitoring

− Controlling

− Evaluierung

bmvit.gv.at

• Wirkungsorientierung?

• Wirkungscontrolling?

• Wirkungsmonitoring?

• 2017 für 2016 nach BHG 2013?

bmvit.gv.at

„Wirkungscontrolling“

• Glossar:

bmvit.gv.at

„Wirkungscontrolling“

• Wirkungscontrolling-VO:

bmvit.gv.at

„Wirkungsmonitoring“

• Glossar:

bmvit.gv.at

„Evaluierung“ • Handbuch wirkungsorientierte Steuerung:

bmvit.gv.at

„interne Evaluierung“ • § 4 WFA-Grundsatz-VO:

• § 11:

bmvit.gv.at

„interne Evaluierung“

• WFA-Handbuch:

• Glossar:

bmvit.gv.at

„Wirkungsevaluation“

• Glossar:

bmvit.gv.at

Wirkungsorientierung im BHG: Begriffshierarchie

Wirkung, Folgen

• Grundprinzipien für Haushaltsführung, Rechtsetzung und Vorhaben

• Verankert in BHG sowie diversen VO und Begleitdokumenten

Controlling

• Organisation der Wirkungsorientierung in den Ressorts

• Verankert in BHG, VO und diversen Begleitdokumenten

Monitoring

• Begleitende Datenerfassung in Budgetvollzug und Abwicklung von Vorhaben

• Verankert in diversen Begleitdokumenten und www.wirkungsmonitoring.gv.at

Evaluierung

• Rückschauende Überprüfung von Mittelverwendung und durchgeführten Vorhaben

• Verankert in BHG, VO und diversen Begleitdokumenten

http://www.wirkungsmonitoring.gv.at/

bmvit.gv.at

WIRKUNG und WIRKUNGSNARRATIVE

bmvit.gv.at

„Folgenabschätzung“

• § 4 WFA-Grundsatz-VO:

• Handbuch:

bmvit.gv.at

(Er)zählen: Methoden

• § 12 WFA-Grundsatz-VO:

• WFA-Handbuch:

bmvit.gv.at

Evaluierungsprodukt Berichte • Wirkungscontrolling-VO:

bmvit.gv.at

„Wirkung“

• § 4 WFA-Grundsatz-VO:

• § 3 Angaben zur Wirkungsorientierung-VO:

bmvit.gv.at

Echte Wirkungen – BVA 2019

Globalbudget FTI/BMVIT, Gleichstellungsziel: eindeutige „Messung“, direkte Konsequenz

bmvit.gv.at

Wirkung in „echten“ Evaluierungen I • BRIDGE (Ausschreibung 2017)

bmvit.gv.at

Wirkung in „echten“ Evaluierungen II

• Frontrunner (Ausschreibung 2018)

bmvit.gv.at

Wettbewerb der Wirkungsnarrative

• Verwaltung vs. Politik

• Evidence based policy vs. policy based evidence?

− „One case is anecdotical, two cases are data“

• Fakten, Zahlen, Daten vs. Geschichten erzählen

bmvit.gv.at

Wer hat die schönste Wirkung im ganzen Land?

• BMDW/Strategiebericht UG33

• BMVIT/Strategiebericht UG34

bmvit.gv.at

INSTRUMENTE ZUR WIRKUNGSMESSUNG

bmvit.gv.at

Wirkung und Evaluierung

• Wirkungsorientierung und Evaluierung stehen in keiner Konkurrenz zueinander

• Worum soll es eigentlich bei Wirkungsorientierung (hauptsächlich) drehen?

• Wie sonst soll man Wirkungen überprüfen können?

− Das Gesamtsystem „Wirkungsorientierung“ von Haushalt, Regelungen und Vorhaben ist diesbezüglich etwas holprig und wenig stringent

− „Klassische“ Evaluierungen beschäftigen sich meist auch mit Wirkungen

bmvit.gv.at

Vergleich Haushaltsrecht zu Evaluierung in Forschung, Technologie und Innovation

BHG 2013 FTI

Wer? Intern + BMF, BMÖDS Extern

Was wird evaluiert? Wirkungsziele • Ex-ante

Zielsetzungen auf unterschiedlichen Ebenen

Wirkung • Terms of reference

Wie wird kommuniziert?

WFA, WFA Evaluierung, Bericht zur Wirkungsorientierung

Evaluierungsbericht

Welche Maxime? Budgetdarstellung und -Planung

Value for money

bmvit.gv.at

bmvit.gv.at

UG 34 – WZ 1 - Indikatoren

bmvit.gv.at

Eingabe Daten BFG-Evaluierung

bmvit.gv.at

Behauptete Wirkungen – BVA 2019

Zusammen-hang?

Anm.: Datenquelle FFG-Wirkungsmonitoring

Relevanz?

bmvit.gv.at

Low hanging fruits – WFA-Evaluierung

WFA-Evaluierung „Talente“: Abzählen, mehr=besser

bmvit.gv.at

FAZIT

• Tooling funktioniert: Ausfüllen von eWO-WFA, BVA-Angaben

• Gefahren

− Self-fulfilling prophecies (die meisten Wirkungsziele werden „automatisch“ erreicht Ambitionsniveau?)

− Pflichtübungen (die meisten WFAs und ihre Evaluierungen)

• Echte Steuerung (z.B. über DB-Zielindikatoren) &

• Verpflichtende Konsequenzen FEHLEN OFT

bmvit.gv.at

Vielen Dank für Ihre Aufmerksamkeit

Abteilung III/i2 Forschungs- und Technologieförderung

Dr. Rupert Pichler rupert.pichler@bmvit.gv.at

Dr. Mario Steyer mario.steyer@bmvit.gv.at

mailto:ruper.pichler@bmvit.gv.atmailto:mario.steyer@bmvit.gv.at