Evaluationsforschung Flashcards

Question

Was ist eine summative Evaluation?

Answer 1

Eine summative Evaluation findet nach dem Abschluss einer Maßnahme statt und bewertet deren Gesamtergebnisse. Sie umfasst Aspekte wie die Wirksamkeit, Effizienz und Akzeptanz der Maßnahme

Answer 2

Eine Prozess- oder Implementierungsevaluation bewertet, wie eine Maßnahme durchgeführt wird. Sie untersucht Aspekte wie die Intensität der Nutzung, die Zielgruppenbeteiligung und die Zufriedenheit der Beteiligten. Diese Evaluationsform erfolgt während der Durchführung der Maßnahme

Answer 3

Eine ergebnisorientierte Evaluation konzentriert sich auf die Bewertung der Resultate einer Maßnahme, wie z.B. die Wirksamkeit und Effizienz. Sie untersucht, ob die gesetzten Ziele erreicht wurden und welche Wirkungen die Maßnahme hatte

Answer 4

Die Kombination von quantitativen und qualitativen Methoden ermöglicht es, sowohl messbare Daten als auch detaillierte, kontextbezogene Informationen zu erfassen. Quantitative Daten liefern statistisch fundierte Ergebnisse, während qualitative Daten tiefere Einblicke in individuelle Erfahrungen und Meinungen bieten

Answer 5

Eine Kosten-Effektivitäts-Analyse bewertet die Kosten einer Maßnahme im Verhältnis zu einem natürlichen Wirkungsparameter (z.B. Kosten pro Kilogramm Gewichtsreduktion). Sie vergleicht den finanziellen Aufwand für verschiedene Maßnahmen und deren Effektivität

Answer 6

Eine Kosten-Nutzwert-Analyse verwendet konstruierte Nutzwerte als Mess- und Vergleichseinheit. Sie bewertet die Effizienz einer Maßnahme, indem verschiedene Effekte, wie z.B. Gewichtsreduktion und subjektives Wohlbefinden, auf einer Skala verglichen werden

Answer 7

Nicht-intendierte Wirkungen sind unerwartete positive oder negative Effekte einer Maßnahme, die nicht Teil der ursprünglichen Zielsetzung waren. Eine umfassende Evaluation sollte diese Effekte ebenfalls erfassen und bewerten

Answer 8

"Willingness to Pay" bezieht sich auf die subjektive Zahlungsbereitschaft von Stakeholdern für die positiven Effekte einer Maßnahme. Stakeholder geben an, wie viel sie bereit wären, für bestimmte Vorteile oder Verbesserungen zu zahlen, z.B. für die Verbesserung der Wasserqualität oder die Reduktion von gesundheitlichen Beschwerden

Answer 9

QALY steht für "Quality-Adjusted Life Year" und ist ein Maß in der gesundheitsökonomischen Evaluation. Es kombiniert Lebensdauer (in Jahren) und Lebensqualität (auf einer Skala von 0 bis 1). Ein QALY von 1 entspricht einem Lebensjahr in voller Gesundheit, ein QALY von 0 steht für den Tod

Answer 10

Willingness to Pay (Zahlungsbereitschaft): Wie viel Stakeholder bereit wären zu zahlen, um positive Effekte zu erhalten. Willingness to Accept (Akzeptanzbereitschaft): Wie viel Stakeholder akzeptieren würden, um negative Effekte in Kauf zu nehmen

Answer 11

Interne Validität: Bezieht sich darauf, wie gut eine Studie kausale Zusammenhänge zwischen der Maßnahme und den beobachteten Effekten herstellt. Externe Validität: Bezieht sich darauf, wie gut die Ergebnisse der Studie auf andere Kontexte oder Populationen verallgemeinert werden können

Answer 12

Die Randomisierung in experimentellen Designs stellt sicher, dass Teilnehmer zufällig den Experimental- oder Kontrollgruppen zugewiesen werden. Dies erhöht die interne Validität, da Störfaktoren gleichmäßig auf die Gruppen verteilt werden und somit Verzerrungen minimiert werden

Answer 13

Evaluationskriterien können auf verschiedenen Grundlagen festgelegt werden: Ziele der Maßnahme Anforderungen und Erwartungen der Stakeholder Festgelegte Qualitätsstandards Expertenurteile

Answer 14

SMART-Ziele sind spezifische, messbare, ansprechende, realistische und terminierte Ziele. Diese Kriterien helfen dabei, klare und erreichbare Evaluationsziele zu setzen

Answer 15

Beim Eingruppen-Posttest-Design wird nur eine Gruppe nach einer Maßnahme evaluiert. Es fehlt jedoch eine Vergleichsgruppe, wodurch die Ergebnisse anfällig für externe Einflüsse sind und nicht klar ist, ob die Maßnahme die Veränderungen verursacht hat

Answer 16

Dieses Design vergleicht die Ergebnisse einer Experimentalgruppe und einer Kontrollgruppe sowohl vor als auch nach der Intervention. Dies ermöglicht es, die Wirksamkeit der Maßnahme besser zu bewerten, indem Veränderungen in beiden Gruppen verglichen werden

Answer 17

Eine Placebo-Kontrollgruppe erhält eine scheinbare Intervention, die der eigentlichen Maßnahme ähnlich ist, aber keinen Wirkstoff oder wirkliche Effekte enthält. Dies dient dazu, den Placebo-Effekt auszuschließen und die eigentliche Wirkung der Intervention zu isolieren

Answer 18

Grundlagenforschung: Entwicklung von Theorien und deren Überprüfung mit dem Ziel zu beschreiben, erklären und vorherzusagen (z.B. Formen und Ursachen von Depression) Interventionsforschung: Entwicklung und Überprüfung von Theorien, die auf zielgerichtete Veränderungen (Interventionen) abzielen (z.B. Therapieansätze und –techniken für Depression) Evaluationsforschung: Wissenschaftlich fundierte Bewertung von anwendungsorientierten Sachverhalten und Interventionen hinsichtlich verschiedener Kriterien wie Effektivität, Effizienz, Nachhaltigkeit oder Akzeptanz (z.B. Beurteilung der Wirksamkeit oder Effizienz von verschiedenen Depressionstherapien).

Answer 19

▪ Evaluation bedeutet “Bewerten”, dient als Planungs- und Entscheidungshilfe und hat somit etwas mit der Bewertung von Handlungsalternativen zu tun. ▪ Evaluation ist ziel- und zweckorientiert. Sie hat primär das Ziel, praktische Maßnahmen zu überprüfen, zu verbessern oder über sie zu entscheiden. ▪ Evaluationsforschung soll dem aktuellen Stand wissenschaftlicher Techniken und Forschungsmethoden angepasst sein. ▪ Als typisch wissenschaftliche Auftragsforschung im Praxisfeld hängen oft weitreichende Entscheidungen von ihr ab (z.B. Weiterführung einer Bildungsmaßnahme, Schließung einer sozialen Einrichtung, Änderung eines Gesetzes)

Answer 20

▪ Evaluation (Bewertung): Prozess der Beurteilung des Wertes eines Produktes, Prozesses oder eines Programmes, was nicht notwendigerweise systematische Verfahren oder datengestützte Beweise zur Untermauerung einer Beurteilung erfordert ▪ Evaluationsforschung: explizite Verwendung wissenschaftlicher Forschungsmethoden und –techniken (primär psychologische und sozialwissenschaftliche) für den Zweck der Durchführung einer Bewertung. Evaluationsforschung betont die Systematik und Wissenschaftlichkeit der Herangehensweise anstelle der reinen Behauptung bzgl. des Wertes und Nutzens einer bestimmten Aktivität.

Answer 21

* Ziel der Evaluationsforschung ist die Bewertung anwendungsorientierter Maßnahmen und Handlungsalternativen anhand verschiedener Kriterien wie z.B. Effektivität und Effizienz * Evaluation können Vielzahl praktischer Konsequenzen haben, deshalb ist die Einbeziehung verschiedener Anspruchsgruppen (stakeholder) wichtig * Evaluationsstudien können verschiedene Ziele und Kriterien haben und unterscheiden sich auch bzgl. des Zeitpunkts (formative vs. summative Evaluation) * Ergebnisorientierte Evaluation fokussiert auf die Effektivität und Effizienz von Maßnahmen, mit unterschiedlichen Ansätzen zur Beurteilung ihrer Effizienz * Unterschiedliche experimentelle und nicht-experimentelle Design, die in der Evaluationsforschung eingesetzt werden. Häufig Kombination von quantitativen und qualitativen Methoden (Mixed-Methods-Designs).