18
Dokumentation und Evaluation

Dokumentation und Evaluation - pebonline.de · Elemente der Evaluation . Prozessevaluation Ergebnisevaluation Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

  • Upload
    others

  • View
    11

  • Download
    0

Embed Size (px)

Citation preview

Page 1: Dokumentation und Evaluation - pebonline.de · Elemente der Evaluation . Prozessevaluation Ergebnisevaluation Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

Dokumentation und Evaluation

Page 2: Dokumentation und Evaluation - pebonline.de · Elemente der Evaluation . Prozessevaluation Ergebnisevaluation Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

• Planmäßige Umsetzung

• Finanzielle und personelle Ausstattung

• Erreichung der Zielgruppe

• Akzeptanz des Angebots bei der Zielgruppe

• Gefallen des Angebots bei der Zielgruppe

• Wissenserweiterung/Einstellungsänderung bei der Zielgruppe

• Verhaltensänderungen bei der Zielgruppe

• Verbesserung der biomedizinischen Parameter

Was eine Evaluation klären kann

Page 3: Dokumentation und Evaluation - pebonline.de · Elemente der Evaluation . Prozessevaluation Ergebnisevaluation Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

Evaluation nutzt …

… den Verantwortlichen

… der Zielgruppe

… dem Geldgeber

• Vermittelt zusätzliches Wissen und motiviert

• Hilft Stärken und Schwächen selbst zu erkennen

• Prüfung der Zielerreichung

• Dokumentiert den Wert der Arbeit

• Argumentation zur Fortführung

• Optimierung des Programms

• Beleg für gute Investition des Geldes

• Beleg für ergebnisorientierten Umgang

Page 4: Dokumentation und Evaluation - pebonline.de · Elemente der Evaluation . Prozessevaluation Ergebnisevaluation Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

• Datenerhebung: Befragen, Messen, Beobachten,

Dokumentieren

• Analyse: Auszählen, Statistische Berechnungen,

Zusammenfassung, Abgleich mit Arbeitsplan

• Bewertung: Wo stehen wir im Vergleich mit unseren

Zielen? Was lief gut, was lief weniger gut? Wo kann man

das Projekt verbessern?

• Verwertung: Projektoptimierung, Rückkopplung an

Partner, Pressearbeit

Elemente der Evaluation

Page 5: Dokumentation und Evaluation - pebonline.de · Elemente der Evaluation . Prozessevaluation Ergebnisevaluation Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

Prozessevaluation Ergebnisevaluation

Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

zu vorher und mit Kontrollgruppe)

Begutach-

tungsgegen-

stand

Umsetzung des Projekts

(eingesetzte Ressourcen,

Programmtreue),

Zielgruppenerreichung

(Akzeptanz, Reichweite)

Veränderungen bei Wissen,

Einstellung und Verhalten der

Zielgruppe, biomedizinische

Parameter,

Veränderungen der

Verhältnisse/Lebensumfeld

Zielsetzung Sicherung und

kontinuierliche

Verbesserung der Qualität

Überprüfung Programmauswirkung

und -erfolg

Nutzen Rechtzeitiges Erkennen von

Problemen, kontinuierliche

Verbesserung

Informationen darüber, ob das

Programm verändert werden sollte

Evaluationsformen

Page 6: Dokumentation und Evaluation - pebonline.de · Elemente der Evaluation . Prozessevaluation Ergebnisevaluation Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

Prozess-

evaluation

Page 7: Dokumentation und Evaluation - pebonline.de · Elemente der Evaluation . Prozessevaluation Ergebnisevaluation Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

Dimensionen der Prozessevaluation

• Programmumsetzung:

Ressourcen

Programmtreue

• Zielgruppenerreichung:

Programmreichweite

Programmakzeptanz

Page 8: Dokumentation und Evaluation - pebonline.de · Elemente der Evaluation . Prozessevaluation Ergebnisevaluation Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

Leitfragen der Prozessevaluation I

Programmumsetzung

Ressourcen Programmtreue

Steht genügend Personal zur

Verfügung?

Ist es ausreichend qualifiziert?

Können die Materialien/Aktionen wie

geplant entwickelt/umgesetzt werden?

Ist die räumliche Ausstattung

angemessen?

Wird der Zeitplan eingehalten?

Reichen die finanziellen Mittel aus? Welche Probleme treten bei den

Aktivitäten auf?

Page 9: Dokumentation und Evaluation - pebonline.de · Elemente der Evaluation . Prozessevaluation Ergebnisevaluation Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

Leitfragen der Prozessevaluation II

Zielgruppenerreichung

Programmreichweite Programmakzeptanz

Wie viele Personen nutzen die

Maßnahme/Materialien? Wie häufig?

Sind die Informationen bzw.

Veranstaltungen für die Zielgruppe

relevant, verständlich und interessant?

Welche Hindernisse halten von der

Nutzung ab?

Sprechen die Materialien die

Zielgruppe an?

Wie viele Personen können sich an die

Botschaften erinnern?

Sind die Inhalte neu? Macht die

Nutzung der Angebote Spaß?

Page 10: Dokumentation und Evaluation - pebonline.de · Elemente der Evaluation . Prozessevaluation Ergebnisevaluation Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

• Dokumentation

• Abgleich mit Finanzplan

• Abgleich mit Projektplan

• Befragung Projektmitarbeiter

• Befragung der Zielgruppe

Instrumente der Prozessevaluation

Page 11: Dokumentation und Evaluation - pebonline.de · Elemente der Evaluation . Prozessevaluation Ergebnisevaluation Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

Dokumentation

planen

Page 12: Dokumentation und Evaluation - pebonline.de · Elemente der Evaluation . Prozessevaluation Ergebnisevaluation Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

• Wichtige Unterlagen:

Entwickelte Konzepte, gestellt Anträge

Kosten- und Finanzierungsplan

Entwickelte Materialien

Projektberichte, veröffentlichte Presseartikel

Protokolle von Sitzungen

Relevante Korrespondenz, Gesprächsnotizen

TN-Zahlen (Beobachtungsbögen) etc.

Dokumentation - schriftliche Fixierung

Page 13: Dokumentation und Evaluation - pebonline.de · Elemente der Evaluation . Prozessevaluation Ergebnisevaluation Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

• Anzahl Teilnehmer/Nutzer

• Anzahl verteilter Materialien

• Geäußerte positive und negative Feedbacks einzelner

Teilnehmer

• Besonders günstige und ungünstige

Rahmenbedingungen

• Anzahl benötigtes Personal

• Zugriffe auf Homepage

• Clippings

Dokumentation - Beobachtungsbögen

Page 14: Dokumentation und Evaluation - pebonline.de · Elemente der Evaluation . Prozessevaluation Ergebnisevaluation Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

• Name des Projekts

• Zeitraum der Berichterstattung

• Projektverantwortliche, Mitarbeiter

• Durchgeführte Schritte

• Stattgefundene Treffen/Sitzungen (Termin, Teilnehmer, wichtigste Themen)

• Entwickelte Materialien

• Ausgegebene Finanzmittel

• Aufgetretene Probleme, Lösungen

• Eventuell benötigte Hilfestellungen, zusätzliche Ressourcen

Dokumentation - Berichte erstellen

Page 15: Dokumentation und Evaluation - pebonline.de · Elemente der Evaluation . Prozessevaluation Ergebnisevaluation Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

Ergebnis-

evaluation

Page 16: Dokumentation und Evaluation - pebonline.de · Elemente der Evaluation . Prozessevaluation Ergebnisevaluation Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

Verhaltenspräventive

Maßnahmen

Verhältnispräventive

Maßnahmen

Kurzfristige

Auswirkungen

Gesundheitswissen,

Einstellungen

Verhaltensabsicht Hat sich das Wissen zum Thema

verbessert?

Besteht eine positive Meinung

und Motivation zu

Verhaltensänderungen?

Gesundheitsförderliche Politik,

Angebote Wurden kommunale und politische

Partner gewonnen?

Konnten gesundheitsförderliche

Regelungen realisiert werden?

Mittelfristige

Auswirkungen

Gesundheitsverhalten und

biomedizinische Parameter Hat sich das

gesundheitsbezogene Verhalten

gebessert?

Gesundheitsförderliche Umwelt Wurden gesundheitsförderliche

Lebensverhältnisse geschaffen?

Konnten gesellschaftliche

Normen/Werte verändert werden?

Langfristige

Auswirkungen

Gesundheitszustand, Krankheitshäufigkeit, Sterblichkeit,

Lebensqualität, Chancen- und Zugangsgleichheit

Ergebnisevaluation

Page 17: Dokumentation und Evaluation - pebonline.de · Elemente der Evaluation . Prozessevaluation Ergebnisevaluation Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

• Verhaltenspräventive Maßnahmen:

Befragung der Zielgruppe (Fragebögen, Interview)

Messung der biomedizinischen Parameter (vorher, nachher,

Kontrollgruppe)

• Verhältnispräventive Maßnahmen

Dokumentation und Abgleich mit Zustand vorher

Datenerhebung bei der Ergebnisevaluation

Page 18: Dokumentation und Evaluation - pebonline.de · Elemente der Evaluation . Prozessevaluation Ergebnisevaluation Zeitpunkt Während der Durchführung Am Ende (idealerweise im Vergleich

www.in-form.de

Impressum

Herausgegeben von Plattform Ernährung und Bewegung e.V.,

Wallstr. 65, 10179 Berlin

2015

mit Förderung durch das Bundesministerium für Ernährung und Landwirtschaft

aufgrund eines Beschlusses des Deutschen Bundestages.

Illustration: Andreas Gärtner