Testtheorie und Testkonstruktion (Fach) / 6.2) KTT: Reliabilität (Lektion)
In dieser Lektion befinden sich 19 Karteikarten
Allgemein, Retest, Parallel, Split-Half, interne Konsistenz
Diese Lektion wurde von Eidechse erstellt.
- Was ist die Reliabilität allgemein und in der KTT? Beschreibt allgemein, wie messgenau ein Fragebogen/Test ist in der KTT: Anteil der wahren Varianz an der Gesamtvarianz Basis zur Berechnung des Standardmessfehlers, der zur Ermittlung von Konfidenzintervallen benötigt wird
- Welche Werte kann die Reliabilität annehmen und wie können diese interpretiert werden? Werte zwischen 0 und 1 Rel=1: keine Messfehler, gesamte Varianz ist wahre Varianz (Var(x) = Var(τ)) Rel=0: keine wahre Varianz, alle Varianz geht auf den Messfehler zurück (Var(x) = Var(ε)) Je größer der wahre Varianzanteil Var(τ) an Gesamtvarianz Var(x), desto messgenauer (reliabler) ist der Test
- Welche Methoden werden zur Reliabilitätsschätzung herangezogen? Retest-Reliabilität Paralleltest-Reliabilität Split-Half-Reliabilität Interne Konsistenz
- Was ist ein Retest bzw. die Retest-Reliabilität? Testwiederholung: derselbe Test wird in derselben Stichprobe wiederholt vorgelegt Korrelation beider Testdurchführungen = Retest-Reliabilität
- Welche Annahme macht das Konzept der Retest-Reliabilität? wahre Werte verändern sich zwischen den Testdurchführungen nicht und auch die Messfehlereinflüsse bleiben gleich
- Wie können sich veränderte wahre Werte auf die Retest-Reliabilität auswirken? Merkmal vollkommen stabil od. Erinngerungseffekt: perfekte Retest-Reliabilität Systematische Merkmalsveränderung: kein Einfluss auf Retest-Reliabilität Unsystematischer Lern-/Übungseffekt: Verminderung der Retest-Reliabilität Instabiles Merkmal: Verminderung der Retest-Reliabilität
- Welchen Effekt hat die Länge des Retest-Intervalls? je kürzer desto weniger Veränderung des Merkmals, aber umso mehr Erinnerungseffekte
- Was ist ein Paralleltest? Vorlegen von 2 parallelen Testformen Korrelation der Testwerte der Paralleltests
- Wann sind 2 Tests parallel? Items aus dem Itemuniversum Mittelwerte und Standardabweichungen gleich Hohe Korrelation zwischen den beiden Testwerten --> gleiche wahre Werte, gleiche Fehlervarianzen
- Wie sieht der Ablauf einer Paralleltest-Reliabilitätsschätzung aus? kurzes Zeitintervall zwischen den Testungen, dann machen beide Gruppen den je parallelen Test einzelne Items ggf. umkodieren Summenscores von A und B berechnen Summenscores korrelieren
- Wann ist die Paralleltest-Reliabilität hoch? wenn 2 parallele Testformen (gleiche wahre Werte und gleiche Fehlervarianzen) hoch miteinander korrelieren
- Was ist die Split-Half-Reliabilität? Reliabilitätsschätzung durch Aufteilung des Tests in 2 möglichst parallele Hälften (bei ausreichend großer Itemzahl) --> Korrelation der Testhälften Korrelation stellt jedoch nur die Reliabilität für den "halben" Test dar --> je mehr Items ein Test hat, desto genauer misst er
- Wie kann die Korrelation der Testhälften korrigiert werden? Spearman-Brown-Formel: rechnerische Aufwertung der beiden Testhälften auf voll Testlänge beschreibt allgemein, wie sich die Reliabilität eines Tests bei Testverlängerung oder Testverkürzung ändert
- Welche Methoden der Testhalbierung gibt es? Odd-Even-Methode: ungeradzahlige vs. geradzahlige Items Zeitpartitionierungsmethode: Bearbeitungszeit in zwei gleichlange Abschnitte teilen Methode der Itemzwillinge: Paare von Items mit ähnlichen Eigenschaften bilden (gleiche Schwierigkeit, gleiche Trennschärfe)
- Was ist die interne Konsistenz? Verallgemeinerung der Testhalbierungsmethode auf so viele Teile, wie der Test Items hat Voraussetzung: alle Items müssen das gleiche Merkmal (den gleichen wahren Wert) messen
- Wie wird die interne Konsistenz berechnet? Cronbach's α : Zerlegung eines Tests mit m Items nicht in 2 sondern in m Teile
-
- Wie können die Werte der internen Konsistenz interpretiert werden? Rel = 0: Variablen unkorreliert --> am besten Rel =1
- Wann ist die interne Konsistenz hoch? Interne Konsistenz umso höher, je höher die Korrelationen zwischen den Items im Durchschnitt sind
- Welchen Einfluss hat die Testlänge auf die Reliabilität? Steigerung der Reliabilität eines Tests durch Testverlängerung --> Hinzunahme paralleler Testteile (gleiche wahre Werte, gleiche Varianzen) --> Verdopplung der Testlänge = Vervierfachung der wahren Varianz (bei Verdopplung der Fehlervarianz)