Die Bewertung der Auswirkungen ist mehr als die Durchführung von Umfragen, es ist ein geordneter Prozess, um Entscheidungen auf der Grundlage von Fakten zu treffen. Bei Resuelve tun wir dies in sechs Schritten: den aktuellen Zustand verstehen, Strategie ausrichten, Prototypenbeweise erstellen, Beweise entwerfen, Beweise sammeln und Beweise melden. Jeder Schritt verbindet die Theorie des Wandels mit der Realität der Bevölkerung und mit dem, was das Team wirklich tun kann. Das Ziel besteht nicht nur darin, zu messen, sondern auch zu lernen, was funktioniert, was angepasst werden muss und wie man das Versprechen von soziale Auswirkungen: das Leben anderer verändern kann. einlösen kann.

Verstehen Sie den aktuellen Zustand

Vor der Messung müssen wir Experten im Kontext des Programms werden. Dieser erste Schritt besteht darin, sich intensiv mit dem konkreten Thema zu befassen: Was wird heute mit wem, wo, unter welchen Bedingungen und mit welchen bekannten oder wahrgenommenen Ergebnissen getan?

Hier überprüft Resolve Dokumente, Zahlen, frühere Studien und hört vor allem Schlüsselpersonen zu: internes Team, Verbündete und Zielgruppe. Das Ziel besteht darin, einen klaren Überblick darüber zu erstellen, wo Sie angefangen haben: Probleme, Lücken, aktuelle Bemühungen, Erfolge und Schmerzen.

In dieser Phase versuchen wir, Fragen zu beantworten wie:

  • Welches Problem versucht das Programm heute in der Praxis zu lösen?
  • Was wurde bereits versucht und mit welchen Ergebnissen?
  • Welche Zeit-, Ressourcen- oder Kontextbeschränkungen bestehen?

Strategie, Ziele und Theorie des Wandels aufeinander abstimmen

Die Theorie der Veränderung ist der Fahrplan, um das Leben anderer zu verändern (der Schritt für Schritt, um dies zu erreichen). Hier prüfen wir, ob das, was das Programm heute tut, wirklich mit der versprochenen Veränderung zusammenhängt.

Dazu gehört bei Resuelve, die Theorie des Wandels anhand von Dimensionen und Subdimensionen zu verstehen: also die Unterteilung der Strategie in Teile, die nicht aufeinander treten und zusammen alles Wichtige abdecken (so etwas wie eine Liste „ohne Lücken oder Wiederholungen“). Beispielsweise kann eine Dimension „Beschäftigungsfähigkeit“ sein und innerhalb dieser Dimensionen können Unterdimensionen wie „Fähigkeiten“, „aktive Suche“ und „Unterstützungsnetzwerke“ vorhanden sein.

Mit diesem Schritt soll sichergestellt werden, dass jede Programmaktivität einen klaren Platz innerhalb dieser Dimensionen und Unterdimensionen einnimmt und dass jede Dimension mit einer bestimmten zu erreichenden Veränderung verknüpft ist. Auf diese Weise vermeiden wir lockere Aktivitäten, die nicht zum Ziel beitragen, oder Dimensionen, die so allgemein sind, dass sie nicht zur Entscheidungsfindung beitragen.

Dies impliziert:

  • Ziele überprüfen und anpassen, sodass sie spezifisch und erreichbar sind.
  • Überprüfen Sie, ob Interventionen (was unternommen wird, um zu versuchen, Leben zu verändern) angesichts des identifizierten Problems sinnvoll sind.
  • Stellen Sie sicher, dass die vorgeschlagenen Routen (Aktivitäten → Outputs → Ergebnisse → Auswirkungen) mit der Bevölkerung und dem Kontext konsistent sind.

Das Ergebnis ist ein gemeinsames Ziel, allen ist klar, welche Veränderungen zu erwarten sind, mit welchen Fristen und durch welche Mechanismen.

Prototypenbeweis

In diesem Schritt werden Indikatoren und Referenzrahmen aus verschiedenen Quellen untersucht: nationale und internationale Literatur, sektorale Rahmen, kulturelle und organisatorische Kriterien. Der Schlüssel besteht darin, im kleinen Rahmen zu testen, welche Indikatoren und Fragen wirklich dabei helfen, die Zweifel des Programms zu beantworten.

Anstatt sofort eine große Messung zu starten, wird ein kostengünstiger Prototyp zusammengestellt. Dies ist wie eine kleine Version der Bewertung, mit einer kleinen Gruppe von Personen und einer begrenzten Anzahl von Indikatoren und Fragen. Es dient dazu, zu testen, ob die Sprache verstanden wird, ob die Logistik funktioniert, wie lange die Antwort dauert und ob die Informationen, die herauskommen, wirklich zur Beantwortung der Fragen des Programms beitragen.

Dieser Prototyp dient dazu:

  • Sehen Sie, ob die Leute die Fragen verstehen und sie bequem beantworten können.
  • Identifizieren Sie anhand der verfügbaren Daten und der verfügbaren Zeit, welche Indikatoren messbar (brauchbar) sind.
  • Testen Sie, ob die generierten Informationen kommunizierbar und für die Entscheidung nützlich sind.

Es ist besser, das Design der Beweise geringfügig zu korrigieren, als es erst spät zu erkennen, wenn alle Messungen bereits durchgeführt wurden.

Designbeweis

Mit dem fein abgestimmten Prototyp kommt der vollständige Designbeweis. Dies definiert wie, wo, mit wem und durch welche Instrumente gemessen wird. Es ist Zeit, den methodischen Plan im Detail herunterzuladen.

Dieser Schritt umfasst:

  • Entwerfen Sie die Instrumente (Umfragen, Interviewleitfäden, Registrierungsformulare usw.).
  • Definieren Sie die Art der Auswertung, die verwendet werden soll: Potenzial für Veränderung auswerten (einen Moment), im Laufe der Zeit bewerten (vorher und nachher) oder mit Kontrolle auswerten (Vergleich mit einer ähnlichen Gruppe ohne Programm).
  • Legen Sie den Probenahmeplan fest: Wer wird gemessen, wie viele Personen, zu welchen Zeiten.
  • Entscheiden Sie, ob die Sammlung durch das Resuelve-Team, das Programmteam oder einen Dritten erfolgen soll. Wenn ein anderes Team dies übernimmt, sind klare Schulungen zu Instrumenten, Ethik und Protokollen geplant.

Das Ergebnis ist ein konkreter und umsetzbarer Messplan, den das Team versteht und umsetzen kann, ohne den Betrieb zu verlangsamen.

Beweise sammeln

In diesem Schritt kommen Sie vom Papier zur Tat: Umsetzen des Sammelplans. Hier werden die Instrumente, Feldteams, Agenden und definierten Kanäle in die Tat umgesetzt.

Bei der Ernte wird besonders darauf geachtet:

  • Befolgen Sie vereinbarte Protokolle (wer fragt, wie, in welcher Reihenfolge).
  • Respektieren Sie die Einwilligung nach Aufklärung und den Schutz personenbezogener Daten.
  • Datenqualität überwachen: Konsistenz überprüfen, Pilottests durchführen, Fehler rechtzeitig korrigieren.
  • Notieren Sie alle Änderungen gegenüber dem, was geplant war (z. B. Zugangsschwierigkeiten zu einigen Bereichen oder Beispieleinstellungen).

Eine gute Kollektion ist genauso wichtig wie gutes Design; Ohne Qualitätsdaten verliert die Bewertung an Aussagekraft.

Beweise melden

Schließlich ist es an der Zeit, die Beweise in klare Botschaften zu übersetzen, um eine Entscheidung zu treffen. Dabei geht es nicht nur darum, einen langen Bericht zu verfassen, sondern darum, unterschiedliche Formate bereitzustellen, die eine Verbindung zu den Menschen herstellen, die Entscheidungen treffen.

In Resolves umfasst die Berichterstellung Folgendes:

  • Schriftliche Berichte mit Methodik, wichtigsten Erkenntnissen und umsetzbaren Empfehlungen.
  • Executive-Präsentationen für Managementteams mit Schwerpunkt auf möglichen Entscheidungen.
  • Medienkits oder visuelle Elemente (Infografiken, Zusammenfassungen, Dashboards), um die Ergebnisse gegebenenfalls an Verbündete oder externe Zielgruppen zu kommunizieren.

Es wird erläutert, was sich in welchem ​​Ausmaß für wen geändert hat und je nach Design, wie viel auf das Programm zurückzuführen ist. Auch die Grenzen der Evidenz und die vorgeschlagenen nächsten Schritte werden deutlich gemacht.

Häufig gestellte Fragen

Abschluss

Bei der Bewertung der Wirkung geht es nicht nur darum, „am Ende zu messen“, sondern um einen geordneten Weg von sechs Schritten zu gehen: den aktuellen Zustand verstehen, die Strategie ausrichten, Prototypen erstellen und die Beweise entwerfen, Qualitätsdaten sammeln und Ergebnisse melden, die zur Entscheidungsfindung dienen. Somit ist die Bewertung keine externe Anforderung mehr, sondern wird zu einem Instrument zur Verbesserung des Programms und zur besseren Erfüllung des Versprechens einer Auswirkung sozialen -Veränderung des Lebens anderer-. Möchten Sie dies Schritt für Schritt mit einem realistischen und umsetzbaren Plan auf Ihr Programm anwenden? Lass uns reden.