16
Testtheorie und Testkonstruktion (Subject) / Erweiterungen der KTT zur Validitätsprüfung Multi-Trait-Multi-Method (Lesson)
Advertisement
- Konstruktvalidität Empirische Belege dafür, dass ein Test das [theoretische] Konstrukt erfasst, was er messen soll und nicht ein anderes
- Nomologoisches Netzwerk Konstrukte sind in einem nomologischen Netzwerk verankert o Nomologisch: Theoretisch, durch Verknüpfung von Aussagen herleitbar Aussagen und Gesetze über Beziehungen von Beobachtbaren Merkmalen Theoretischen Kunstrukten & Beobachtbarem Theoretischen Konstrukten
- Konvergente Validität Zusammenhänge mit Instrumenten, deren Validität bereits bekannt ist und die das gleiche / ein ähnliches Merkmal messen -> D.h. sie korrelieren bzw. konvergieren
- Diskriminante Validität (Im Idealfall) keine Zusammenhänge mit Instrumenten, deren Validität bereits bekannt ist, die in anderes Merkmal messen ->D.h. sie divergieren
- Grundgedanken zu konvergenter und diskriminanter Validität Konvergente Validität muss deutlich höher sein als die diskriminante -> Mehr Zusammenhang mit Ähnlichem als Abgrenzung von anderem. - Wahl der Korrelate abhängig von nomologischem Netzwerk
- "Multitrait“-Analyse Verschiedene „Konstrukte“ (Merkmale/Eigenschaften) erfassen Das zu validierende Verfahren wird in Beziehung zu ähnlichen [konvergenten] oder anderen [diskriminanten] Konstrukten gesetzt
- „Multimethod-Analyse“ Unterschiedliche Methoden einsetzen Korrelationen zw. gleichen Methoden (nur Selbsteinschätzungen; nur Verhaltensbeobachtungen etc.) fallen oft höher aus als bei Methodenvariation (z.B. Selbsteinschätzungen und Fremdbeurteilungen, objektive Maße etc.)
- Multitrait-Multimethod-Analyse (Campbell & Fiske, 1959) Eigenschaften werden mittels verschiedener Methoden erfasst Darstellung in einer Multitrait-Multimethod-Matrix (Korrelationsmatrix) Systematische Kombination mehrere Traits (Merkmale) mit mehreren Methoden Isolierung von Methodeneffekten
- Isolierung von Methodeneffekten method informant occasion
- Methodeneffekt method sprachgebundener vs. sprachfreier Test -> Multitrait-Multimethod-Analyse
- Advertisement
- Methodeneffekt informant Selbst- vs. Fremdauskunft -> Multitrait-Multiinformant-Analyse
- Methodeneffekt occasion Verschiedene Messzeitpunkte -> Multitrait-Multioccasion-Analyse
- Multitrait-Multimethod-Analyse Grundannahme Valide Messungen, wenn ... ... Messungen eines Merkmals mit verschiedenen Methoden zu hoher Merkmalskonvergenz führen ... Diskrimination bei Messungen unterschiedlicher Merkmale sowohl innerhalb einer Methode als auch zwischen verschiedenen Methoden nachweisbar
- Methodeneffekte = Überhöhte Korrelationen zwischen verschiedenen Traits (gemessen mit derselben Methode oder unterschiedlichen Methoden) - Ziel: Verhinderung, dass hohe Korrelationen fälschlicherweise im Sinne einer hohen Merkmalskonvergenz interpretiert werden, wenn sie maßgeblich auf Methodeneinflüsse zurückgeführt werden kann
- MTMM-Matrix Korrelationsmatrix Mindestens 2, besser 3 Methoden und Traits 2 Arten von Korrelationsblöcken o Monomethod o Heteromethod
- MTMM-Matrix 4 Arten von Koeffizienten o Monotrait-Monomethod o Monotrait-Heteromethod o Heterotrait-Monomethod o Heterotrait-Heteromethod