Von Dokumentation zu Evaluation
Modul 9.2 baut direkt auf Modul 9.1 auf. Was nicht nachvollziehbar dokumentiert wird, kann später nicht seriös ausgewertet werden. Gleichzeitig ist Evaluation mehr als Statistik. Sie fragt, ob Angebote fachlich begründet, wirksam plausibilisiert, nutzbar reflektiert und fair bewertet werden.
| Anschluss | Bedeutung für 9.2 |
|---|---|
| 9.1 Dokumentation | liefert Fallzahlen, Prozessdaten, Vereinbarungen, Beobachtungen und Reflexionsspuren. |
| Band 6 Prävention | liefert Projektlogik, Zielgruppenbezug und Schutzfaktoren. |
| Band 7 Teilhabe | schärft den Blick für Zugangsgerechtigkeit und nicht erreichte Gruppen. |
| Band 8 Netzwerk | zeigt, dass Wirkung oft in Kooperation entsteht und nicht allein einer Fachkraft zugerechnet werden kann. |
Kompetenzziele, Lernziele und Workload
Kompetenzziele
- Evaluation von Kontrolle, Statistik und Öffentlichkeitsarbeit unterscheiden.
- fachlich sinnvolle Ziele, Kriterien und Indikatoren formulieren.
- Wirkung plausibel beschreiben, ohne Kausalität vorzutäuschen.
- Beteiligung, Datenschutz und Ethik in Evaluation berücksichtigen.
- Evaluationsergebnisse in Qualitätsentwicklung übersetzen.
Messbare Lernziele
- eine Wirklogik für ein Angebot erstellen
- mindestens sechs Indikatoren entwickeln
- ein Mini-Erhebungsdesign planen
- Fehler in Evaluationsberichten erkennen
- einen Qualitätszyklus für die eigene Praxis formulieren
| Baustein | Workload | Produkt |
|---|---|---|
| Theorie und Standards | 120 Minuten | Prüfraster |
| Wirklogik und Indikatoren | 150 Minuten | Wirkmodell |
| Fallwerkstatt | 120 Minuten | Evaluationsentscheidung |
| Transferauftrag | 240 Minuten | Mini-Evaluationsplan |
Vorwissen aktivieren: Was gilt bei dir als Erfolg?
Viele Schulsozialarbeitsangebote gelten als erfolgreich, wenn sie gut besucht sind oder wenn Rückmeldungen positiv ausfallen. Das kann ein Hinweis sein, reicht aber nicht. Evaluation fragt genauer: Wer wurde erreicht? Wer wurde nicht erreicht? Was hat sich verändert? Was bleibt unklar?
Mini-Check: Welche Aussage beschreibt Evaluation am besten?
Evaluation, Wirkung und Qualität unterscheiden
Evaluation ist die systematische Bewertung eines Gegenstandes anhand begründeter Kriterien. In der Schulsozialarbeit kann sie sich auf Beratung, Gruppenangebote, Prävention, Netzwerkarbeit, Übergänge, Beteiligungsformate oder Gesamtstrukturen beziehen.
Evaluation
Bewertet Planung, Umsetzung, Ergebnisse und Nutzen eines Angebots anhand transparenter Kriterien.
Wirkung
Beschreibt plausible Veränderungen bei Personen, Gruppen, Strukturen oder Zugängen. Kausalität ist vorsichtig zu behandeln.
Qualitätssicherung
Sichert Standards, prüft Abläufe und übersetzt Erkenntnisse in Verbesserungen.
Vier Ebenen von Wirkung
| Ebene | Frage | Beispielindikator |
|---|---|---|
| Output | Was wurde getan? | Anzahl Beratungsgespräche, Gruppenstunden, Elternkontakte |
| Outcome | Was hat sich bei Zielgruppen verändert? | mehr Wissen über Hilfen, bessere Konfliktstrategien, höhere Beteiligung |
| Impact | Welche längerfristigen Beiträge sind plausibel? | stabilere Übergänge, weniger Ausschlüsse, bessere Zugänge zu Hilfen |
| Strukturwirkung | Was verändert sich im System? | klarere Abläufe, bessere Kooperation, gesicherte Fallwege |
Wissenschaftsbox: gute Evaluation ist nützlich, machbar, fair und genau
Evaluationsstandards betonen, dass Evaluation nicht nur methodisch korrekt sein muss. Sie soll auch für Beteiligte nützlich sein, mit angemessenem Aufwand durchgeführt werden, fair mit Betroffenen umgehen und nachvollziehbare Daten erzeugen.
Vier Prüffragen
- Nützlichkeit: Wer braucht die Ergebnisse wofür?
- Durchführbarkeit: Ist der Aufwand angemessen?
- Fairness: Werden Beteiligte respektvoll und nicht schädigend einbezogen?
- Genauigkeit: Sind Daten, Deutungen und Grenzen nachvollziehbar?
Forschungsnahe Haltung
Schulsozialarbeit sollte Evaluation nutzen, ohne sich auf reine Zahlenlogik reduzieren zu lassen. Qualitative Daten, Fallvignetten, Rückmeldungen und Reflexionsprotokolle können neben Kennzahlen fachlich sehr wertvoll sein.
Evaluation darf Vertrauen nicht beschädigen
Evaluation arbeitet mit Daten. In der Schulsozialarbeit können diese Daten besonders sensibel sein, weil sie Beratung, familiäre Belastungen, Konflikte, Gesundheit, Armut, Migration, Gewalt oder Kinderschutz berühren können. Deshalb gilt: so wenig personenbezogen wie möglich, so transparent wie nötig.
| Grundsatz | Konsequenz |
|---|---|
| Zweckbindung | Vor der Datenerhebung muss klar sein, wofür Daten genutzt werden. |
| Datensparsamkeit | Keine personenbezogenen Daten erheben, wenn aggregierte oder anonyme Daten reichen. |
| Transparenz | Beteiligte müssen verstehen, was erhoben wird und warum. |
| Schutz sensibler Daten | Fallnotizen, Beratungsdetails und Schutzauftragsdaten gehören nicht in allgemeine Evaluationsberichte. |
| Nicht-Schädigung | Evaluation darf Schüler:innen, Familien oder Fachkräfte nicht stigmatisieren. |
Von Zielen zu Indikatoren
Ein Indikator ist ein beobachtbarer Hinweis darauf, ob ein Ziel erreicht oder ein Prozess verbessert wurde. Gute Indikatoren sind fachlich passend, realistisch erhebbar und nicht stigmatisierend.
| Baustein | Leitfrage | Beispiel |
|---|---|---|
| Ausgangslage | Welches Problem oder welcher Bedarf liegt vor? | Viele Schüler:innen Klasse 5 kennen Unterstützungsangebote nicht. |
| Ziel | Was soll sich verändern? | Schüler:innen wissen, wo sie Hilfe bekommen. |
| Maßnahme | Was wird getan? | Klassenbesuche, Pausenpräsenz, niedrigschwellige Sprechzeit. |
| Indikator | Woran wird Veränderung sichtbar? | Schüler:innen können mindestens zwei Hilfswege benennen. |
| Datenquelle | Wie wird es erhoben? | Kurzabfrage, Reflexionskarten, anonymisierte Nutzungsauswertung. |
Praxisfall: Das Sozialtraining soll „nachweislich wirken“
Ausgangslage: Eine Schule möchte wissen, ob ein Sozialtraining in Jahrgang 5 „wirkt“. Die Schulleitung fragt nach Zahlen. Lehrkräfte wünschen weniger Konflikte. Schüler:innen berichten, dass sie sich in der Klasse teilweise unsicher fühlen. Die Schulsozialarbeit soll ein Evaluationskonzept erstellen.
Arbeitsauftrag
- Formuliere ein realistisches Ziel des Sozialtrainings.
- Lege drei Indikatoren fest.
- Entscheide, welche Daten anonym oder aggregiert erhoben werden können.
- Formuliere eine Grenze der Aussagekraft.
- Leite eine konkrete Qualitätsverbesserung ab.
Entscheidungsübungen
1. Ein Projekt hatte 42 Teilnehmende. Was sagt diese Zahl?
2. Welche Daten gehören nicht in einen allgemeinen Jahresbericht?
3. Welche Formulierung ist fachlich sauber?
Methodenkoffer Evaluation
Kleine Methoden
- anonyme Blitzabfrage vor und nach einem Angebot
- Zielscheibe mit vier Qualitätsdimensionen
- Feedbackkarten mit drei Fragen
- Kurzinterview mit Schüler:innenvertretung
- Teamreflexion nach festen Kriterien
- Fallvignetten ohne personenbezogene Details
Qualitätszyklus
- Ziel klären
- Kriterien festlegen
- Daten sparsam erheben
- Ergebnisse gemeinsam deuten
- Verbesserung beschließen
- Umsetzung prüfen
Mini-Vorlage: Evaluationsplan
| Feld | Eintrag |
|---|---|
| Gegenstand | Welches Angebot wird evaluiert? |
| Zweck | Verbesserung, Rechenschaft, Entscheidung oder Lernen? |
| Fragestellung | Was soll geklärt werden? |
| Indikatoren | Welche Hinweise werden genutzt? |
| Datenquellen | Feedback, Dokumentation, Beobachtung, Interview, Statistik? |
| Ethik und Datenschutz | Wie werden Personen geschützt? |
| Nutzung | Welche Entscheidung folgt aus den Ergebnissen? |
Typische Fehler in Evaluation und Qualitätssicherung
| Fehler | Risiko | Bessere Lösung |
|---|---|---|
| Nur Fallzahlen berichten | Reichweite wird mit Wirkung verwechselt. | Fallzahlen mit Zielgruppen-, Prozess- und Ergebnisinformationen kombinieren. |
| Erfolge übertreiben | Verlust fachlicher Glaubwürdigkeit. | plausible Beiträge beschreiben und Grenzen offenlegen. |
| Defizitberichte über Familien | Stigmatisierung und Vertrauensverlust. | Barrieren, Ressourcen und Unterstützungsbedarfe anonymisiert darstellen. |
| Evaluation ohne Nutzung | Datensammlung ohne Wirkung. | vorher festlegen, welche Entscheidung die Ergebnisse unterstützen. |
| Datenschutz zu spät prüfen | rechtliches und ethisches Risiko. | Datenschutz vor der Erhebung planen. |
Gelingensnachweis: Mini-Evaluationsplan
Erstelle einen Mini-Evaluationsplan für ein reales oder fiktives Angebot der Schulsozialarbeit. Der Plan soll fachlich begründet, datensparsam und nutzbar sein.
Bewertungsraster
| Kriterium | Erfüllt, wenn... |
|---|---|
| Zielklarheit | Ziel, Zielgruppe und Fragestellung eindeutig benannt sind. |
| Indikatoren | mindestens drei passende Indikatoren formuliert wurden. |
| Methodik | Datenerhebung realistisch, niedrigschwellig und angemessen ist. |
| Ethik | Datenschutz, Beteiligung und Nicht-Stigmatisierung berücksichtigt sind. |
| Nutzung | klar ist, wie Ergebnisse zur Verbesserung verwendet werden. |
Transferauftrag, Literatur und Ausblick
Literatur und Quellenhinweise
- DeGEval: Standards für Evaluation. Nützlichkeit, Durchführbarkeit, Fairness und Genauigkeit.
- DBSH: Berufsethik und professionelle Verantwortung in der Sozialen Arbeit.
- Niedersächsisches Kultusministerium: Erlass „Soziale Arbeit in schulischer Verantwortung“.
- SGB VIII § 13a Schulsozialarbeit.
- Merchel, J.: Qualitätsmanagement in der Sozialen Arbeit.
- Heiner, M.: Qualitätsentwicklung durch Evaluation.
- von Spiegel, H.: Methodisches Handeln in der Sozialen Arbeit.