Post on 19-Oct-2020
bmvit.gv.at
Orientierungslose Wirkungsorientierung?
Begriffe, Narrative und Instrumente der wirkungsorientierten
Haushaltsführung
bmvit.gv.at
Inhalt
• Begriffschaos
− Was gibt es für Begriffe?
− Was bedeuten diese Begriffe?
• Wirkung und Wirkungsnarrative
− Was wirkt tatsächlich?
• Instrumente zur Wirkungsmessung
− Wirkungsorientierung vs. Evaluierung
bmvit.gv.at
BEGRIFFSCHAOS
bmvit.gv.at
• Wie beschreibt/beziffert man die Welt?
• Zentrale Bezeichnungen reflexiv-iterativer Systeme (neben vielen weiteren Wortschöpfungen)
− Feedback
− Reporting
− Monitoring
− Controlling
− Evaluierung
bmvit.gv.at
• Wirkungsorientierung?
• Wirkungscontrolling?
• Wirkungsmonitoring?
• 2017 für 2016 nach BHG 2013?
bmvit.gv.at
„Wirkungscontrolling“
• Glossar:
bmvit.gv.at
„Wirkungscontrolling“
• Wirkungscontrolling-VO:
bmvit.gv.at
„Wirkungsmonitoring“
• Glossar:
bmvit.gv.at
„Evaluierung“ • Handbuch wirkungsorientierte Steuerung:
bmvit.gv.at
„interne Evaluierung“ • § 4 WFA-Grundsatz-VO:
• § 11:
bmvit.gv.at
„interne Evaluierung“
• WFA-Handbuch:
• Glossar:
bmvit.gv.at
„Wirkungsevaluation“
• Glossar:
bmvit.gv.at
Wirkungsorientierung im BHG: Begriffshierarchie
Wirkung, Folgen
• Grundprinzipien für Haushaltsführung, Rechtsetzung und Vorhaben
• Verankert in BHG sowie diversen VO und Begleitdokumenten
Controlling
• Organisation der Wirkungsorientierung in den Ressorts
• Verankert in BHG, VO und diversen Begleitdokumenten
Monitoring
• Begleitende Datenerfassung in Budgetvollzug und Abwicklung von Vorhaben
• Verankert in diversen Begleitdokumenten und www.wirkungsmonitoring.gv.at
Evaluierung
• Rückschauende Überprüfung von Mittelverwendung und durchgeführten Vorhaben
• Verankert in BHG, VO und diversen Begleitdokumenten
http://www.wirkungsmonitoring.gv.at/
bmvit.gv.at
WIRKUNG und WIRKUNGSNARRATIVE
bmvit.gv.at
„Folgenabschätzung“
• § 4 WFA-Grundsatz-VO:
• Handbuch:
bmvit.gv.at
(Er)zählen: Methoden
• § 12 WFA-Grundsatz-VO:
• WFA-Handbuch:
bmvit.gv.at
Evaluierungsprodukt Berichte • Wirkungscontrolling-VO:
bmvit.gv.at
„Wirkung“
• § 4 WFA-Grundsatz-VO:
• § 3 Angaben zur Wirkungsorientierung-VO:
bmvit.gv.at
Echte Wirkungen – BVA 2019
Globalbudget FTI/BMVIT, Gleichstellungsziel: eindeutige „Messung“, direkte Konsequenz
bmvit.gv.at
Wirkung in „echten“ Evaluierungen I • BRIDGE (Ausschreibung 2017)
bmvit.gv.at
Wirkung in „echten“ Evaluierungen II
• Frontrunner (Ausschreibung 2018)
bmvit.gv.at
Wettbewerb der Wirkungsnarrative
• Verwaltung vs. Politik
• Evidence based policy vs. policy based evidence?
− „One case is anecdotical, two cases are data“
• Fakten, Zahlen, Daten vs. Geschichten erzählen
bmvit.gv.at
Wer hat die schönste Wirkung im ganzen Land?
• BMDW/Strategiebericht UG33
• BMVIT/Strategiebericht UG34
bmvit.gv.at
INSTRUMENTE ZUR WIRKUNGSMESSUNG
bmvit.gv.at
Wirkung und Evaluierung
• Wirkungsorientierung und Evaluierung stehen in keiner Konkurrenz zueinander
• Worum soll es eigentlich bei Wirkungsorientierung (hauptsächlich) drehen?
• Wie sonst soll man Wirkungen überprüfen können?
− Das Gesamtsystem „Wirkungsorientierung“ von Haushalt, Regelungen und Vorhaben ist diesbezüglich etwas holprig und wenig stringent
− „Klassische“ Evaluierungen beschäftigen sich meist auch mit Wirkungen
bmvit.gv.at
Vergleich Haushaltsrecht zu Evaluierung in Forschung, Technologie und Innovation
BHG 2013 FTI
Wer? Intern + BMF, BMÖDS Extern
Was wird evaluiert? Wirkungsziele • Ex-ante
Zielsetzungen auf unterschiedlichen Ebenen
Wirkung • Terms of reference
Wie wird kommuniziert?
WFA, WFA Evaluierung, Bericht zur Wirkungsorientierung
Evaluierungsbericht
Welche Maxime? Budgetdarstellung und -Planung
Value for money
bmvit.gv.at
bmvit.gv.at
UG 34 – WZ 1 - Indikatoren
bmvit.gv.at
Eingabe Daten BFG-Evaluierung
bmvit.gv.at
Behauptete Wirkungen – BVA 2019
Zusammen-hang?
Anm.: Datenquelle FFG-Wirkungsmonitoring
Relevanz?
bmvit.gv.at
Low hanging fruits – WFA-Evaluierung
WFA-Evaluierung „Talente“: Abzählen, mehr=besser
bmvit.gv.at
FAZIT
• Tooling funktioniert: Ausfüllen von eWO-WFA, BVA-Angaben
• Gefahren
− Self-fulfilling prophecies (die meisten Wirkungsziele werden „automatisch“ erreicht Ambitionsniveau?)
− Pflichtübungen (die meisten WFAs und ihre Evaluierungen)
• Echte Steuerung (z.B. über DB-Zielindikatoren) &
• Verpflichtende Konsequenzen FEHLEN OFT
bmvit.gv.at
Vielen Dank für Ihre Aufmerksamkeit
Abteilung III/i2 Forschungs- und Technologieförderung
Dr. Rupert Pichler rupert.pichler@bmvit.gv.at
Dr. Mario Steyer mario.steyer@bmvit.gv.at
mailto:ruper.pichler@bmvit.gv.atmailto:mario.steyer@bmvit.gv.at