In dieser Rubrik möchten wir Ihnen Antworten auf häufig gestellte Fragen zum Thema „Evaluation in Gesundheitsförderung und Prävention“ geben.

Grundsätzlich sollten Sie sich bei einem Evaluationsprojekt zu Beginn überlegen, woran Sie den Erfolg Ihrer Maßnahme messen wollen. Die Evaluation sollte sich auf die wichtigsten Erfolgsparameter konzentrieren. Es ist immer schwierig, sehr umfassende Fragestellungen zu bearbeiten, da dann sehr viele unterschiedliche Faktoren zu berücksichtigen sind. Wenn Sie z. B. in ihrem Kindergarten das gesamte Gesundheitsverhalten der Kinder evaluieren wollen (Bewegung, Ernährung, Entspannung etc.), fangen Sie am Besten zunächst mit einem kleinen Teil an. Nehmen wir an, Sie planen die Einführung neuer Bewegungsangebote im nächsten Kindergartenjahr. Dann könnten Sie diese evaluieren, indem Sie zu Anfang und zum Ende des Kindergartenjahres einen Motoriktest durchführen. Auf diesem Weg können Sie Veränderungen im Bewegungsverhalten feststellen.

Bei dem oben genannten Beispiel möchten Sie das Bewegungsverhalten der Kinder bewerten. Wenn Sie dieses insgesamt erfassen wollten, müssten Sie das Bewegungsverhalten der Kinder zu Hause, im Kindergarten, beim Sport, in der Freizeit etc. erheben. Da dies meist nicht zu leisten ist, wählt man bestimmte Indikatoren bzw. Erfolgsparameter aus, die einen Hinweis darauf geben, dass sich das Bewegungsverhalten verbessert hat. Wenn z. B. viele Kinder zu Anfang des Kindergartenjahres keinen Hampelmannsprung beherrschen und nicht fangen können und sich dies zu Ende des Kindergartenjahres gebessert hat, ist dies ein Indikator für ein verbessertes Bewegungsverhalten. Indikatoren für die Besserung des Ernährungsverhaltens könnten z. B. ein höherer Konsum von Obst und Gemüse oder weniger Verzehr von Süßigkeiten und Soft-Drinks sein.

Eine Ergebnisevaluation sollte möglichst vor Beginn und nach Ende eines neuen Projekts durchgeführt werden, d. h. Sie müssen bei der Planung ihrer Maßnahme frühzeitig auch Überlegungen zur Evaluation berücksichtigen. So können Sie am besten überprüfen, ob sich etwas verändert hat. Häufig wird zu spät entschieden, die Effekte einer Maßnahme zu überprüfen. Wenn diese bereits angelaufen ist, ist der Spielraum bereits stark eingeschränkt und es lassen sich nur selten zuverlässige Aussagen treffen.
Wenn Sie eine Prozessevaluation durchführen möchten, muss diese während des laufenden Projekts erfolgen. Sie können z. B. über Interviews feststellen, ob die Eltern Ihr Angebot zum gemeinsamen Schulfrühstück unterstützen. Wenn Sie dadurch feststellen, dass die Eltern sich nicht genug in das Projekt eingebunden fühlen, könnten Sie die Eltern z B. reihum an den Vorbereitungen für das Frühstück beteiligen.

Eine Kontrollgruppe ist eine Gruppe, in der man im Gegensatz zur Interventionsgruppe keine Maßnahme durchführt. Ansonsten sollte sie der Gruppe, die an der Maßnahme teilnimmt, möglichst ähnlich sein. In der Grundschule könnte dies z. B. die Parallelklasse sein. In beiden Gruppen führt man wie oben beschrieben die Evaluation am Anfang und Ende des Schuljahres durch. Dann vergleicht man die Ergebnisse der beiden Gruppen. Wenn sich in beiden Klassen die Ergebnisse verbessert haben, liegt es wahrscheinlich nicht an der Maßnahme, sondern an anderen Faktoren, die in beiden Klassen wirken (z. B. das gestiegene Alter oder ein Angebot, das die gesamte Schule betrifft). Hat sich aber das Bewegungsverhalten nur in der Gruppe mit Bewegungsprogramm gebessert, ist dies ein Hinweis auf dessen Wirksamkeit. Ohne eine Kontrollgruppe lässt sich nur schwer nachweisen, dass ein Effekt tatsächlich auf der durchgeführten Maßnahme beruht.

Ein Pretest (“Vortest”) dient dazu, ein neu entwickeltes Instrument (einen Fragebogen, Leitfaden o. ä.) an einer kleinen Gruppe zu erproben, bevor es in der eigentlichen Erhebung eingesetzt wird. So kann man z. B. einen Fragebogen von ein paar Personen vorab ausfüllen lassen um zu testen, ob alle Formulierungen verständlich sind. Am besten eignen sich hierfür Personen, die der Zielgruppe ähnlich sind.

Die Auswertungsmethode ist vor allem abhängig von der Menge ausgefüllter Fragebögen. Bei kleinen Fallzahlen ist eine Auswertung per Hand möglich. Hierzu können Sie entweder eine Strichliste führen oder die Punktwerte mit dem Taschenrechner zusammenrechnen. Je mehr Fragebögen Sie auswerten müssen, desto komplizierter wird dies ohne einen Computer. Für die computergestützte Auswertung bieten sich z. B. das Statistikprogramm SPSS oder das Programm Excel an. Vielleicht finden Sie ja auch ein Elternteil in Ihrer Einrichtung, das sich mit diesen Programmen auskennt und bereit ist, eine kleine Auswertung zu übernehmen? Oder Sie nehmen Kontakt zu einer Universität oder Fachhochschule auf: Viele Studiengänge führen Praxisprojekte oder Abschlussarbeiten mit Studierenden durch, in denen die Auswertung Ihrer Befragung ein Bestandteil sein könnte.

Die Rücklaufquote bezeichnet den prozentualen Anteil der Fragebögen, die Sie zurück erhalten. Wenn Sie beispielsweise einen Fragebogen an hundert Kinder schicken und hinterher 60 ausgefüllte Fragebögen zurückbekommen, spricht man von einer 60%-igen Rücklaufquote.

Es gibt sehr detaillierte Datenschutzbestimmungen, die in den unterschiedlichen Bundesländern und Institutionen individuell geregelt sind. Prinzipiell sollten Sie beachten, dass

• eine Teilnahme immer freiwillig ist,
• bei Minderjährigen das Einverständnis der Eltern vorliegt,
• die Teilnehmenden über Zweck, Art und Umfang der Maßnahme informiert sind,
• die Daten nicht an Dritte weitergegeben werden dürfen,
• die Daten anonym sind, also dass keine Rückschlüsse auf Personen möglich sind.

Die eigenständige Erstellung eines Fragebogens ist sehr aufwändig. Auf den ersten Blick erscheint die Konzepterstellung gar nicht so schwierig, doch um hinterher einen Fragebogen zu erhalten, der wirklich die Dinge erfasst, die Sie wissen wollen, benötigen Sie ein detailliertes methodisches Wissen. Deshalb empfehlen wir Ihnen, bereits bestehende und getestete Fragebögen zu nutzen. Andernfalls bietet es sich auch hier an, eine (Fach)Hochschule oder Universität zu Rate zu ziehen.
Wenn Sie sich trotzdem an eine eigenständige Erstellung heranwagen, haben wir einige grundlegende Tipps, die sie beachten sollten:

• Verwenden Sie eine verständliche Sprache und ein ansprechendes Layout für die Zielgruppe. So sollte ein Fragebogen für 11-jährige Kinder anders aufgebaut sein als für 18-jährige junge Erwachsene.
• Gestalten Sie den Aufbau klar und verständlich, z. B. unterteilt in verschiedene Themenblöcke.
• Kennzeichnen Sie deutlich, ob eine Frage mit einer oder mit mehreren Kreuzen beantwortet werden muss.
• Sie sollten einen Pretest durchführen, um herauszufinden ob die Fragen verständlich sind.
• Auch auf die Einhaltung des Datenschutzes sollten Sie achten.
• Prüfen Sie bei jeder Frage genau, ob sie wirklich das beantwortet was Sie wissen wollen und ob sie wirklich wichtig ist.

Um methodisches Know-how zu erhalten, könnten Sie sich beispielsweise an eine (Fach)Hochschule oder Universität wenden. Hier wäre es z. B. denkbar, die Evaluation mit einer Diplom- bzw. Masterarbeit einer Studentin oder eines Studenten zu verbinden.
Weitere Hilfen finden Sie auch in der angegeben Literatur und unter den Links.