Systematisch evaluieren

Grundqualifizierung für Netzwerkkoordinatoren vermittelt Handwerkszeug

Planung ist in der Evaluation das A und O. Das war am Ende der zweitägigen Grundqualifizierung zur Maßnahmenevaluation allen Teilnehmenden klar. Bis zu 50 Prozent der investierten Zeit könne auf die Planung entfallen, insbesondere beim ersten Evaluationsvorhaben.

Nur wenn gleich zu Beginn Zeit investiert wird, um zu klären, welchen Zweck die Evaluation verfolgt, kann anschließend eine geeignete Evaluationsart ausgewählt werden. Soll zum Beispiel über die Einstellung oder Fortsetzung eines Sprachförderprojekts entschieden werden, sind fundamentale Interessen der verantwortlichen und durchführenden Personen betroffen. Hier sind externe und unabhängige Evaluatoren gefragt.

„Wird dann angeführt, es stünden keine Mittel für eine Fremdevaluation zur Verfügung, kann zumindest aufgezeigt werden, dass mit einer internen Evaluation der Zweck der Entscheidungsfindung nicht erfüllt werden kann“, erläutert Workshopleiter Stefan Schmidt von der Firma schmidtevaluation den Zusammenhang zwischen dem Evaluationszweck und dem passenden Vorgehen.

Als besonders schwierig und zugleich entscheidend in der Planung haben die Teilnehmenden die Konkretisierung des Untersuchungsgegenstands identifiziert. Die Diskussion ergab, wie wichtig ein kleinteiliges Vorgehen ist. Eine breit angelegte Fragestellung ist schnell nicht mehr handhabbar. Ausgehend von der Diskussion wünscht sich Lisa Kasper aus der Landeskoordinierungsstelle „Kein Kind zurücklassen!“ einen neuen Blickwinkel: „Es geht darum, nicht gleich die Wirkung eines komplexen Bildungsangebots erfassen zu wollen, sondern sich auf die Frage zu konzentrieren, welche Angebote aus Sicht der Kinder oder der Eltern besonders hilfreich sind.“
Je realistischer und fokussierter die Fragestellungen formuliert sind, desto einfacher ist es, den Mix aus qualitativen und quantitativen Methoden zu bestimmen, mit denen zählbare Ergebnisse (Output), die Wirkung beim Einzelnen (Outcome) und mögliche Einwirkungen im Sozialsystem (Impact) erfasst werden können.

In Arbeitsgruppen wurde das vermittelte Handwerkszeug anschließend direkt angewendet. Die kommunalen Teams entwickelten ein Evaluationsdesign für eine gerade aktuelle Maßnahme aus dem eigenen Arbeitskontext.
Weitere Bestandteile der beiden Workshoptage waren die Erarbeitung eines Fragebogens und die Reflexion der eigenen Rolle als Netzwerkkoordinator/In. Die Teilnehmerinnen und Teilnehmer bewerten gute Kommunikationskompetenzen als Grundvoraussetzung für erfolgreiche Netzwerkkoordination.

Auch für die Maßnahmenevaluation ist Kommunikationskompetenz entscheidend. Schließlich müssen die Netzwerkkoordinatoren wichtige kommunikative Aufgaben bewältigen: Sie müssen mit den Partnern den Evaluationsfokus diskutieren, die Ergebnisse an die Mitwirkenden zurückspielen und die Auswertungsworkshops im Austausch mit den Partnern organisieren.
All diese Aufgaben fallen an, wenn eine Kommune sich entscheidet, konsensorientiert vorzugehen und mit den Evaluationsergebnissen auch weiter zu arbeiten. Dass das Zeit und Ressourcen kostet, liegt auf der Hand. Doch diese Investitionen können dabei helfen, sinnvolle Präventionsarbeit zu leisten, die Wirkung zeigt.