63

Diaagnosstik (Fach) / rejabität (Lektion)

Diese Lektion wurde von Disir erstellt.

Lektion lernen

zurück  |  weiter 1 / 2

• Definition grad der Zuverlässigkeit o Genuigkeit, mit der ein Tst mißt, was er mißt, egal, was er mißt.
• Reliabilität - Berechnung Reliabiltät = der Quotient aus der Varianz Wahrer Werte/Rohwertvarianz --> 1- (Fehlervarianz/Rohwervarianz)
• Reliabilität - Berechnung Reliabiltät = der Quotient aus der Varianz Wahrer Werte/Rohwertvarianz --> 1- (Fehlervarianz/Rohwervarianz)
• Rohwertvarianz setzt sich zusammen aus: Varianz Wahrer werte Plus Fehlervarianz
• Möglichkeiten der Reliabilitätsbestimmung: Paralleltestrerliabiität Retestreliabilität Split-Half-Reliabilität Konsistenzanalyse
• Was misst Paraleltestreliabiltät Gleichwertigkeit zweier Paralleltests
• Was misst Retestreliabilität zeitliche Stabilität
• Was misst Split-Half Reliabilität Gleichwertigkeit zweier Testhälften
• Womit misst man Konsistenzanalyse Crombachs alpha - interne Konsistenz
• Wann werden zwe Tests als Paralell bezeichnet? wenn sie die gleichen Wahren Werte u die gleichen Fehlervarianzen aufweisen
• Anzeige
• Was ist die Korrelation zweier Testformen? Eine Schätzung der Paralleltestreliabilitätdes Testverfahrens
• Problem bei der Bestimmung der Paralleltestreliabilität? es ist schwer bis unmöglich vollkommen parallele Tests zu konstruieren.
• Möglichkeiten der Aufgabenpaarung für den Paralleltestaufbau: vertikale Aufgabenpaarung - gleiche Schwierigkeit horizontale Aufgabenpaarung - gleiche Trennschärfe zufällige Aufgabenpaarung
• Wie sollten items gematcht werden, damit hinterher ein Paralleltest entsteht? Items sollten nach Schwierigkeit und Trennschärfe gematscht werden. jeweils eng beeinander liegende Items werden zu zwillingen gematcht.
• Paralleltests: sind zwei Trsts hinsichtlich ihrer Schwierigkeit und ihrer Trennschärfe vergleichbar, kriegt man auch... typischerweise die gleiche Streunug für die beiden Tests
• Retestreliabilität - warum? da jeder Test zu sich selbst parallel ist, kann die reliabilitätsbestimmung erfolgen, in dem derselbe Test zweimal vorgegeben wird.
• Wie wird retestreliabilität bestimmt? korrelation der Messwerte zweier zeitlich aufeinanderfolgender Messungen
• Wie wird retestreliabilität bestimmt? korrelation der Messwerte zweier zeitlich aufeinanderfolgender Messungen
• Problem der Restestreliabilitätsbestimmung: (allgemein) Erinnureungsefekte - Carry-over Effekte  Übungseffekte Aha-Erlebnisse bei Problemlösungstests nicht geeicgnet Sekundäreffekte
• Restesreliabilität - Problem: Echte MM-Änderungen -->reduzieren retestreliabilität Erinnerungseffekte --> erhöhen die Restesreliabiltät
• Retestzugewinn nach 1 Monat bei typischen intelligenztests: 0.5 standardabweichungen --> nennenswert
• Wie hoch wäre ungefähr die retestreliabilität eines Tests, wen sich jeder der Teilnehmer von zeitpunkt t1 zu t2 um exakt fünf punkte verbessert? genau 1. (nicht ungefähr) ;-)
• Was sind korrelationen? invariant gegenüber Mittelwertsunterschieden
• Differentieller Retestefekt: r(tt) < 1  Retestgewinn fällt bei jedeem testeilnehmer unterschiedlich aus, aber die Rangreihe ändert sich nicht.
• Wann ist differentieller restesgewinn problematisch? wenn übungsgewinne nach Leistungsstand, lernfähigkeit und gedächtnis individuell unterschiedlich ausfallen. !! Multifaktoriell beeinflußter, differentieller  Übungseffekt !! kann im krassesten Fall wenn sich die rangreihen umsortieren r=0 sein r(tt) << 1
• Split-Half Reliabilität - wie wird sie gemessen? Korrelation der einen Testhälfte mit der anderen odd-even-split-half
• Problem der Split-Half-reliabilität bei speed-Tests: Wie löst man das problem? split-Half reliabilität künstlich erhöht Alternative: Paralleltests Alternative Restes Alternative: Split-half nach Zeit anstelle nach items: zwei äquivalente Hälften mit jeweils eigenem Zeitlimit
• Split-half-reliabiltät bei speed-tests: was vermeidet man mit einem jeweils eigenem zeitlimit für die beiden testhälften: - dass ein gemeinsames zeitlimit dieselben Aufgaben beeinflusst
• Innere Konsistenz: Cronbachs alpha Verallgemeinerung der Testhalbierungsmethode Zerlegung in so viele Testteile, wie items vorliegen
• Cronbachs alpha - was wird verglichen? wofür ist Cronbachs alpha ein Maß? Varianz des Skalensumenwertes wird verglichen mit der Summe der Itemvarianzen Maß dafür, wie sehr die items in einem Test gleiches erfassen, jeweils untereinander korrelieren
• Anzeige
• Cronbachs alpha - was ist wünschenswert? Wünschenswert ist ein möglichst starker unterschied zwischen der Summe der Itemvarianz und der Testwertvarianz, weil dieser nur auf die Kovarianz zwischen dern Items zurück gehen kann - wenn die items gleiches messen - kovariieren sie hoch
• Cronbachs alpha - Gesamttestvarianz: Var(x)+Var(y)+2*Cov(xy)
• cronbachs alpha: Die Varianz des Testgesamtwertes ist umso höher, je höher die einzelnen items miteinander covariieren
• Möglicher wertebereich von cronbachs Alpha: Alpha = 0 wenn Testwevarianz = Summe der itemvarianzen --> keine kovariaz zwichen den Items - wie wenn man würfelt hohe positive korrelationen : Quotient der aus der summe der itemvarianzen u der dann sehr großen Gesamtvarianz klein --> Alpha geht gegen eins bei hohen negativen korrelationen zwischen den items kann der quotient aus der summe der irtemvarianzen und der dann sehr kleien Gesamtvarianz theoretischauch größer als eins werden, so dass auch negative werte von alpha möglich sind
• Ursaachen geringer reliabilität mögliche quellen von Fehlervarianz: Instrumentelle inkonstanz Bedingungsinkonstanz Merkmalsinkonstanz
• Ursaachen geringer reliabilität: Instrumentelle inkonstanz: Mangelhafte durchführungs u ausertungsobjektivität
• Ursachen geringer reliabilität Bedingungsinkonstanz Wiederholungseinflüsse Erinnerungseinflüsse Veränderung der Durchführungsbedingungen
• Ursachen geringer reliabilität Merkmalsinkonstanz Trennung nach states und traits   zb ärger und ängstlichkeit
• Vergleich der reliabilitätskoeffizienten Wann entpsricht der Konsistenzkoeffizient den anderen keoffizienten? wenn die dort hinzukommenden fehlervarianzen gleich null sind
• Vorteil cronbachs alpha: im allgemeinen hoher als retest o paralleltestreliabilität vorteilhaft bei fluktuierenden MM
• Bei einer Testwiederholung sollten... sollte... Erinnerungseinflüsse möglichst ausgeschaltet sein die Merkmalskonstanz noch gegeben sein
• Was ist besser? Paralleltestverfahren zur bestimmung der reliabilität o Restestverfahren? sofern möglich --> restestverfahren
• was tut die spearman-brown-prophecy formula? bestimmt die reliabiltät eines um den Faktor k verlängerten (k<1 -> verkürzten) Tests
• die spearman brow prophecy formula ermöglicht... zu bestimmen, wieviele items man zusätzlich braucht, um eine bestimmte reliabilität zu erhalten wie reliabel ein test noch ist, wenn man auf items verzichtet
• Voraussetzung der bestimmung der möglichen Reliabilität mit hilfe der spearman brown prophecy formula: alle items homogen u einander äquivalent
• Wozu kann man die spearman brown prophecy formula noch verwenden? ermöglicht auch die hochrechnung der nach der split-half-methode bestimmten reliabilität fürden halben test auf den ganzen test
• Aggregationsprinzip: Reliabilität der Messung eines MM steigt mit zunehmendem aggregationsniveau - verlängerung der Beobachtungsdauer korrelation  ssteigt bei Aggregation über das Urteil mehrer Erzieherinnen
• Zusammenhang zwischen reliabilität und Validität Reliabilität setzt der Validität eine oberer Grenze Validität eines Tests kann die Wurzel aus seiner Reliabilität nicht überschreiten
• Minderung je reliabler ein MM erfasst wird, desto zuverlässiger können zusammnenhänge mit anderen MM statistisch nachgewiesen werden
• Minderung die korrelation zweier MM x u y wird um den Faktor _______ ____, wenn das MM x nur mit einer __________ _______ gemessen wird Wurzel aus r(x) unterschätzt,  reliabilität <1 

zurück  |  weiter 1 / 2