TIPC hat sich der entscheidenden und herausfordernden Aufgabe gestellt, einen Ansatz zur Bewertung transformativer Strategien und Experimente zu entwickeln, der mit seinen politischen Grundsätzen übereinstimmt. Dieser Ansatz wird als „TIPC-Methodik“ bezeichnet, die eine Formative Evaluation (FE) Theory of Change (ToC) für Transformative Outcomes (TOs) umfasst. Die FE ToC-Erstellung wurde von geleitet TIPC-Partner, INGENIO.
Teil dieser Überlegung war, dass erstens TIP-Projekte ehrgeizig sind und in komplexen Umgebungen und Systemen betrieben werden. Es geht nicht nur darum, eine Technologie zu entwickeln oder sie in einem bestimmten Kontext einzusetzen. Transformation erfordert organisatorische, institutionelle und kulturelle Veränderungen. Viele dieser Veränderungen finden über den Ort und den Zeitraum des ursprünglichen Projekts und der Intervention hinaus statt. Wenn wir warten, um eine Politik zu bewerten, bis ihr Potenzial Auswirkungen sich abzeichnen, ist es möglicherweise unmöglich, solche Auswirkungen den zu bewertenden Maßnahmen zuzuordnen. Daher werden die aus der Analyse gewonnenen Erkenntnisse zu spät gewonnen, um in einem effektiven Lernprozess verwendet zu werden. Wir müssen Attributions- und Timing-Probleme angehen.
Zweitens hängt die Bewertungspraxis von der Art und dem Umfang der zu bewertenden Aktivität, den verfügbaren Ressourcen und der verfügbaren Bewertungskapazität, dem Punkt im politischen Prozess, an dem die Bewertung eingeführt wird, und der Governance-Struktur ab, innerhalb derer die zu bewertende Aktivität durchgeführt wird . TIPC-Aktivitäten werden in sehr unterschiedlichen Kontexten durchgeführt und umfassen eine Vielzahl internationaler Experimente an drei Hubs.
Obwohl wir kein einziges Instrumentarium für die allgemeine Anwendbarkeit entwickeln können, hat TIPC einen konzeptionellen Rahmen und einen generischen Ansatz definiert, der Attributions- und Timing-Probleme angehen kann, die an lokale Gegebenheiten angepasst werden können.
Die Hauptelemente dieses formativen Evaluationsansatzes sind die folgenden:
- Unser Bewertungsansatz ist prägend und inklusiv. Formative Evaluation bezieht sich auf eine seit langem etablierte Reihe von Prinzipien und Praktiken, die darauf abzielen, die Politikgestaltung und -umsetzung in enger Zusammenarbeit mit allen Akteuren, die an diesen Aufgaben beteiligt sind oder direkt davon profitieren, zu verbessern.
- Es konzentriert sich auf tdie Identifizierung und Überwachung von transformativen Ergebnissen. Das Transformative Innovation Policy Consortium (TIPC) leitet eine Reihe von „zwölf transformativen Ergebnissen“ ab, die nachvollziehbar und auf die betrachteten politischen Interventionen zurückzuführen sind und die als Indikatoren dafür verwendet werden können, ob und wie die Intervention Prozesse auslöst, die wahrscheinlich transformativer Natur sein.
- Im Zentrum des Ansatzes stehen Lernziele. Die Überwachung, ob und wie solche Ergebnisse aus den Interventionen hervorgehen, wird zu einem Schritt in einem Lernprozess, der die Politikentwicklung und -umsetzung in Richtung auf die transformativen Ziele lenkt.
- Der Ansatz verwendet flexible „Theorien des Wandels“. Die ToC identifiziert die transformativen Ergebnisse, die mit der Intervention angestrebt werden, und die Art und Weise, wie die Interventionen zu solchen Ergebnissen führen sollen. Im Zuge der Weiterentwicklung der Intervention können die aus dem Evaluierungsprozess gewonnenen Erkenntnisse dazu führen, dass die ToC überarbeitet und angepasst werden.
- es ist basierend auf einem verschachtelten, mehrstufigen Ansatz. Mehrere, miteinander verbundene Theorien des Wandels können verwendet werden, um verschiedene Ebenen politischer Aktivitäten zu adressieren: Projekte, die auf Nischenebene operieren, Programme, die eine Vielzahl von transformativen Projekten umfassen, oder Policy-Mix, der Instrumente in verschiedenen Politikbereichen einsetzt. Auf verschiedenen Ebenen der politischen Aktivität erwarten wir, dass auch die wichtigsten angestrebten transformativen Ergebnisse unterschiedlich sind. Das Design dieser ToCs basiert auf der Übergangstheorie.
