Was versteht man unter tatsachenorientierter Evaluation?
Effektivitäts- und Effizienzkriterieumorientiert Programmorientiert
Was versteht man unter wertorientierter Evaluation?
Experten- / Kennerschaftorientiert Gegnerschaftorientiert Konsumentenorientiert Beiteiligteninteressenorientiert Richtlinienorientiert Entscheidungsorientiert
Was fällt unter formative Evaluation (grob)?
Planungsanalysen Programmüberwachung (Monitoring)
Was fällt unter summative Evaluation?
Wirksamkeitsanalysen Effizienzanalysen
Was versteht man unter Planungsanalysen?
Versorgungs- und Bedarfsforschung Beurteilung der Programmtheorie und -konzeption Angemessenheitsbeurteilung und Machbarkeitsstudien (Evaluierbarkeitsassessment)
Was versteht man unter Programmüberwachung?
Implementationsanalysen Qualitätssicherung
Was versteht man unter Wirksamkeitsanalysen?
Konsumentenbefragungen Effektivitäsforschung Verlaufs- oder Prozess-Forschung Prozess-Ergebnisforschung Meta-Analysen
Was versteht man unter Effizienzanalysen?
Kosten-Nutzen-Analysen Kosten-Effektivitätsanalysen
Was sind Aspekte der Qualitätssicherung?
Strukturqualität Prozessqualität Ergebniqualität
Was sind Voraussetzungen für Qualitätssicherung?
Normen & empirische Erkenntnisse (Qualitätskriterien) und kontinuierliche Erfassung relevanter Ergebnisparameter
Was sind verschiede Dimensionen von Implementation?
Bereitstellung / delivery -> Hatten alle zu erreichenden die Möglichkeit der Teilnahme? Beteiligung / adherence -> Haben alle Beteiligten kooperiert? Nutzung und Inanspruchnahme / receipt -> Haben alle vorgesehenen Personen an der Intervention teilgenommen?
Was sind Globalziele von Intervention?
Verhinderung / Linderung / Heilung von Problemen und Störungen Entwicklungs- und Persönlichkeitsförderung Steigerung der Lebensqualität
Welche Funktionen erfüllt Evaluation?
Legitimationsfunktion Kontrollfunktion Erkenntnisfunktion Dialogfunktion Taktische Funktion
Wie legitimiert sich Evaluation?
Wissenschaftliche Fundierung (Überlegenheit der Wissenschaft) Ethische und Rechtliche Argumente Materielle Argumente (Monetär / Ökonomisch)
Was sind Grundannahmen rationaler Evaluationsstrategien?
Grundsätzliche Planbarkeit sozialer Prozesse Veränderbarkeit menschlichen Verhaltens und Erlebens Kausalität
Zwischen welchen Personen können sich Interessenkonflikte ergeben?
Programm-Entwickler Programm-Anwender Programm-Vertreiber Programm-Evaluator Programm-Finanzierer Programm-Nutzer (Empfänger)
Wie sieht der Transformationsprozess zur Festlegung von Erfolgkriterien aus?
Globalziele festlegen -> konkretisieren / konkrete Interventionsziele -> Kriterien zu deren Messung festlegen
Wie lassen sich Interventionsziele zeitlich strukturieren?
Perspektive Zeit: kurz-, mittel-, langfristig; Nah-, Zwischen- und Fernziele Perspektive Inhalt: Distal und Proximale Ziele Perspektive Vermittlung / Mediation: Instrumentelle Ziele und Endziele
Wie lassen sich Ziele grundsätzlich kritisieren?
Verwirklichungsmöglichkeiten Verwirklichungsfolgen Zielkonflikte -> Widersprüche in der Zielsetzung
Wie ist das Vorgehen beim Goal Attainment Scaling?
Auswahl individueller Ziele (3 bis 5) Individuelle Festlegung und Operationalisieren von standardisierten Zielerreichungsstufen Überprüfung der Zielerreichung und Zusammenfassung der Zielerreichungswerte (ggf. Gewichtung anhand ihrer Relevanz -> vorher festgelegt)
Was sind Probleme der Kriterienbildung?
- Eingeschränkte Validität von Zufriedenheitsskalen - Generell eingeschränkte Validität von Selbstauskünften - intensive Nutzung von Ad-hoc-Instrumenten - intensive Nutzung von unstandardisierten Instrumenten - Verwenden eingeschränkter Zielkriterien (wenig, begrenzte oder methodisch fragwürdige Instrumente)
Anhand welcher Kriterien lassen sich Untersuchungsdesign unterscheiden?
Zeitpunkt Häufigkeit Ort / Situation Gegenstand (Grundgesamtheit, Zufallsstichprobe, bestimmte Auswahlverfahren)
Was sind Ziele von Wirksamkeitsevaluationen?
Kausaler Schluss der Wirkung einer Intervention auf einen Effekt (interne Validität) Repräsentativität / Generalisierbarkeit der Untersuchung (externe Validität) Ausschluss / Kontrolle von konfundierenden Einflussfaktoren und alternativen Erklärungen
Was sind Bedingungen für Kausalität?
Systematische Kovariation zwischen Ursache und Effekt Ursachen gehen Effekten zeitlich voraus Es exsistieren keine anderen Erklärungen
Worüber kann trianguliert werden?
Personen Daten Methoden Theorien
Was sind Aspekte der Implementation?
Fidelity / Konzepttreue -> wie genau wurde sich an die Vorgaben gehalten Integrität -> wurde bei allen das gleiche gemacht Engagement und Motivation der Administratoren und Diesnleister
Wie lässt sich das Nutzungproblem analysieren?
Wissenschaftstheoretischer Diskurs -> Verständnis eines Theorie-Praxis-Problems Analyse des Verwendungsprozesses -> Welche Rolle spiele Wissen (Theorien / empirische Befunde) bei der Lösung praktischer Probleme? Verwendungsforschung -> Was sind Determinanten wissenschaftlicher Produkte?
Was sind Verwendungskontexte für wissenschaftliche Produkte?
- Umsetzungen in professionelle Handlungsstrategien - Nutzung in der Öffentlichkeit / Medien - Nutzung bei politischen Entscheidungsprozessen
Welche Nutzungstypen lassen sich unterscheiden?
Instrumentelle Nutzung Konzeptionelle Nutzung Argumentative / symbolische Nutzung
Welche Aspekte treten bei dem Transfer als Wissenschaftskommunikation auf?
Public Understanding Public Trust
Was sind die Funktionen integrativer Forschung?
Erkenntnisfunktion Kontrollfunktion Strukturierungfunktion Historische Funktion Allokationsfunktion Transferfunktion
