3
Versuchsplanung und Datenerhebung (Fach) / Externe Validität (Lektion)
- Externe Validität -> Gültigkeitsbereich/Generalisierbarkeit eines experimentellen Befundes - Hängt empirischer Befund ab von der spezifischen Wahl der Stichprobe (Units), Situation (Setting), Treatments und Ergebnismessung (Outcome) oder ist er generalisierbar auf den gesamten Pool an möglichen Stichproben, Settings, Treatment und Messungen? => UTOS -> Gibt es Moderatorvariablen, die die Größe des Effektes in Abhängigkeit der Stichprobe/Setting/Treatment/Messung beeinflussen? - das Konzept der „Generalisierung“ per se induktiver Ansatz (Schluss vom Spezifischen aufs Allgemeine) und somit logisch nicht zulässig - kann aber deduktivistisch geframed werden: Allgemeingültigkeit wird erstmal angenommen und dann durch identifizierte Moderatorvariablen eingeschränkt
- Gefährdungen externer Validität: UTOS 1. Interaktion zwischen kausalem Zusammenhang und Personen/ Untersuchungseinheiten (= Units) -> z.B. Bildung, Intelligenz, Geschlecht, Medikamente 2. Interaktion zwischen kausalem Zusammenhang und Merkmalen des Treatments -> z.B. bestimmte soziale Programme nur dann wirksam, wenn sie flächendeckend durchgeführt werden 3. Interaktion zwischen kausalem Zusammenhang mit Merkmalen des Kriteriums (AV/ Outcome) -> wenn Zusammenhang nur bei bestimmten Outcome-Variablen beobachtbar ist 4. Interaktion zwischen kausalem Zusammenhang und Untersuchungskontext (Setting) -> z.B. Zusammenhang nur im Labor, aber nicht im Feld
- Maximierung der externen Validität a) Zufallsfaktoren (zufälliges Ziehen von Versuchspersonen oder Items) b) konzeptuelle Replikationen, in der unterschiedliche Stichproben, Settings, Treatments und Messungen des Outcomes realisiert werden - Grenzen: erforderliche Stichprobengröße, Komplexität des Versuchsplans, statistische Power c) Meta- Analysen: Bewertung über unterschiedliche Studien hinweg - Kodierung von Effektgrößen und relevanten Moderatorvariablen -> Prüfung der Abhängigkeit der Effektgröße von Moderatorvariablen