43

Diaagnosstik (Fach) / ojekt (Lektion)

Diese Lektion wurde von Disir erstellt.

Lektion lernen

zurück  |  weiter 1 / 1

• Definition Objektivität Test soll Merkmale des Untersuchungsteilnehmers, nicht MM der  Untersuchungssituation o des Diagnostikers erfassen
• Objektivität, was ist NICHT gemeint? NICHT gemeint ist die Unabhängigkeit des Testergebnisses von KOGNITION u MOTIVATION der Probanden NICHT GEMEINT sind Objektive Tests im Sinne Catells (OLMT), die versuchen individuelle Unterschiede auf nicht verbale Art zu erfassen. SpezieleArt von Tests, die hier aber nicht gemeint ist
• Durchführungsobjektivität a) äußere Umstände der Testung b) maximale Standardisirung der Testsituation c) Minimierung der sozialen interaktion mit dem Versuchsleiter    -->  -->>>>(Pygmalioneffeektt - Rosenthal u Jacobson)   -->> Quantitative Bestimmung schwierig
• Auswertungsobjektivität Zuordnung von Verhalten zu Zahlen oder Kategorien ZB : Berehnung von Punktwertsummen  -  leicht bei MC-Items - schwer bei offnen Antwortformaten - schwer bei projektiven Items. - verwendung von Schablonen und festen Antwort-Schlüsseln Sicherheitshalber Doppelauswertung zb beim Pisa-Test
• Interpretationsobjektivität inhaltliche Deutung Vergleich mit Anforderungsprofil GUT: Einsatz statistischer Normen SCHLECHT : erfahrungsbasierte subjektive Deutung durch erfahrene Diagnostiker OPTIMIERUNG DURCH EXPLIZIETE REGELN
• Objektivität ist die ___________ für ____________ und _______________ Objektivität ist die MINDESTVORAUSSETZUNG für RELIABILITÄT und VALIDITÄT
• Berechnung der URTEILERÜBEREINSTIMMUNG prozentuale Übereinstimmung : Problem : Es wird die wahre Übereinstimmung überschätzt, weil Übereinstimmung durch Zufall nicht rausgerechnet wird. BESSER: COHENS KAPPA : RELATIVIERT DIE BEOBACHTETEE ÜBEREINSTIMMUNG AN DER NACH ZUFALL ERWARTBAREN ÜBEREINSTIMMUNG
• Welche Ausagen sind FALSCH? Was heißt ein p-Wert von < .01 a) ist inhaltlich zu interpretieren, die Aussage, die Trefferrate liegt über der Zufallserwartung (von hier vier Treffern), ist mirt einer Whrscheinlichkeit von 99.9% korrekt b) dass die Aussage, die Trefferrateee liegt NICHt über der Zufallserwartung (von vier Treffern) mit einer Wahrscheinlichkeit von 99.9% falsch ist c) ist die Nullhypothese einer zufälligen Trefferrate angesichts des ERgebnisses nur noch mit 1 % versehen d) ist die Nullhypothese einer zufälligen Trefferrate, zurückzuweisen, mit einer Wahrscheinlichkeit von 99% eine korrekte Entscheidung e) auch zufällig antwortende Teilnehmer können ein Ergebnis, we das beobachtete Erreichen
• Was heißt ein p-Wert von < .01 auch zufällig antwortende Teilnehmer können ein ergebnis wie das beobachtete erreichen
• 2. was heißt ein p-Wert von < .01 die Wahrscheinlichkeit xy Treffer durch Zufall zu erreichen, liegt bei weniger als 1%. das nimmt man zum Anlass zu sagen, dass Ergebnis sei signifikant Man interessiert sich für die Wahrscheinlichkeit bestimmte Daten zu bobachten, gegeben eine best. Hypothese gillt -->Wie Wahrscheinlich sind die Daten, gegeben die Hypothese (NICHT: wie wahrscheinlich ist die Hypothese, gegeben die Daten)
• Anzeige
• Cohens kappa - berechnet was?  COHENS KAPPA : RELATIVIERT DIE BEOBACHTETEE ÜBEREINSTIMMUNG AN DER NACH ZUFALL ERWARTBAREN ÜBEREINSTIMMUNG
• Iterpretationsobjektivität - bezieht sich auf was? bezieht sich auf die inhaltliche deutung
• Interpretationsobjektivität - welche Möglichkeit hat man die IO zu erreichen? Vergleich mit Anforderungsprofil
• Inerpretationsobjektivität - was ist schlecht? erfahrungsbasierte subjektive deutung durch diagnostiker
• wie kann man IO verbessern? Optimierung durch explizite Regeln
• Wie kann man Auswertungsobjekivität erreichen? Zuordnung von Verhalten zu Zahlen o Kategorien zb berechnung von punktwertsummen
• Aauswertungsobjektivität: berechnung von Punktwertsummen: wann leicht / schwer? was kann man dafür machen leicht bei mc items schwer bei freiem Antwortformat / projektiven items Verwendung von schablonen u festen antwortschlüsseln sicherheitshalber doppelauswertung siehe pisa-test  
• Worauf bezieht sich durchführungsobjektivität? auf die äußeren umstände der testung
• wie erreicht man durchführungsobjektivität? maximalestandardisierung der testsituation minimierung der sozialen inteaktion mit dem untersuchungsleiter
• was gefährdet die durchführungsobjektivität? soziale interaktion mit untersuchungsleiter - Pygmalion-effekt - rosenthal u jacobson
• es geht bei der interpretationsobjektivität um die Frage,... ob ein Test normiert ist.
• objektivität - beziehung zu anderen gütekriterien objektivität die mindestvoraussetzung für reliabilität u validität einer messung
• objekrivität . weniger strafe bei physisher attraktivität hohem soziökonomischen status weißer hautfarbe
• objktivitäz - maßnahmen um urteilerübereinstimmung objektiv zu erhöhen mehr leute, die korrigieren u den mittelwert bilden lehrer trainieren erwartungshorizonte  
• objktivitäz - maßnahmen um urteilerübereinstimmung objektiv zu erhöhen mehr leute, die korrigieren u den mittelwert bilden lehrer trainieren erwartungshorizonte klare bewertungskriterien operationalisierung des bewertungskriteriumsgenaue festlegung de umgangs mit wiederholten fehlern
• was ist besser - tonbandaufnahme o mitschriften? tonband r= .73 mitschrift: r = .81
• wie kann der grad einer urteilerübereinatimmung quantifiziert werden? prozentuale übereinstimmung - nicht so toll, weil übereinstimmung durch zufall nicht berücksichtigt wird u die urteilerübereinstimmung nach oben hin verfäscht chi2 test besser: cohens kappa    
• berechnung prozentualer übereinstimmung: (A+B)/(A+B+C+D)
• berechnung prozentualer übereinstimmung: (A+D)/(A+B+C+D)
• cohens kappa - was wird verglichen? vergleich der beobachteten übereinstimmung mit der aufgrund der randhäufigkeiten erwarteten übereinstimung
• Anzeige
• cohens kappa - was wird verglichen? vergleich der beobachteten übereinstimmung mit der aufgrund der randhäufigkeiten erwarteten übereinstimung wieviel besser als bei rein zufälligen urteilen ist die übereinstimung?
• cohens kappa - was wird verglichen? vergleich der beobachteten übereinstimmung mit der aufgrund der randhäufigkeiten erwarteten übereinstimung wieviel besser als bei rein zufälligen urteilen ist die übereinstimung?
• wie berechnet man die erwartete häufigkeit einer zelle? (zeilensumme * spaltensumme) / stichprobenumfang
• Cohens kappa formel: (beobachtete übereinstimmung - erwartete übereinstimmung) / (100% - Erwartete Übereinstimmung)
• cohens kappa - was steht im zähler, was steht im nenner? zähler: um wieviel besser als wie bei rein zufälligem urteil sind die urteiler? nenner: wieviel besser als wie bei rein zufälligem urteil zu erwarten können die urteiler maximal sein?
• cohens kappa - was steht im zähler, was steht im nenner? zähler: um wieviel besser als wie bei rein zufälligem urteil sind die urteiler? nenner: wieviel besser als wie bei rein zufälligem urteil zu erwarten können die urteiler theoretisch maximal sein?
• prozentuale übereinstimmung ist nicht aussagekräftig, weil... ...abhängig von den randhäufigkeiten
• cohens kappa.... (macht was?) ...relativiert die beobachtte übereinstimmung an der nach zufall erwartbaren übereinstimmung
• wie kann man urteilerübereinstimmung erhöhen? ergebnisse zu ............ ............ . ergebnisse zu kategorien zusammenfassen
• kategoriensysteme sollten ............ erschöpfend und disjunkt sein
• urteilerübereinstimmung bei nominalskalierten MM cohens kappa verallgemeinerung auf mehr als zwei urteilskategorien möglich auf mehr als zwei urteiler
• urteilerübereinstimmung bei ordinalskalieerten MM spearman rangkorrelation  (zwei urteiler) kendalls W (mehrere Urteiler)
• urteilerübereinstimmung bei intervallskaliertn MM Intraklassenkorrelation

zurück  |  weiter 1 / 1