Testtheorie und Testpraxis (Subject) / Testtheorie Standardisierte Verfahren (Lesson)

This lesson was created by jeayl.

Learn lesson

This lesson is not released for learning.

back  |  next 2 / 3

• Beschreiben Sie kurz Durchführung, Auswertung und Interpretation des WIT-2. Durchführung Dauer der Langform: 2:23 h Durchführung einzeln oder in Gruppen möglich Einsetzen der Module einzeln oder in beliebiger Kombination führt wegen Länge zu Konzentrationstiefs Auswertung Pro Subtest: Anzahl richtig gelöster Items bestimmen → Umrechnung der Rohwerte in Standardwerte → Ermittlung der Dimensionwerte → Profildarstellung geübte Auswertungskräfte benötigen ca. 30 Minuten Interpretation Zweck: Verständnis über kognitive Stärken und Entwicklungsfelder eines Testteilnehmers gewinnen und vermitteln Modul des schlussfolgernden Denkens = Indikator der fluiden Intelligenz Wahl der Normgruppe wirkt sich erheblich auf Interpretation aus
• Was gibt es zur Normierung des WIT-2 zu sagen? normiert an 2234 Personen drei bildungsspezifische Kategorien (Gesamtgruppe, Personen mit Abitur, Personen ohne Abitur) sechs altersspezifische Kategorien Auswahl der Normen muss reflektiert erfolgenAnsonsten: Gefährung der Interpretationsobjektivität
• Ist die Objektivität des WIT-2 gewährleistet? Durchführungsobjektivität √ detailliert beschriebene Abläufe vorgegebene Instruktionen Auswertungsobjektivität √ ausschließlich numerische Daten eindeutige Hinweise und Materialien Interpretationsobjektivität √ theoretische Einbettung ACHTUNG: nur bei reflektierter Anwendung der Normbasen
• Beurteilen Sie die Reliabilität des WIT-2. Retest-Reliabilität √ schwankt zwischen mittleren (.73) bis guten (.88) Werten Ausnahme: Arbeitseffizienz und MerkfähigkeitABER: variable Konzentrations- und Merkfähigkeiten Interne Konsistenz √ Cronbachs Alpha zwischen .77 und .98 sehr gut! ⇒ Reliabilität gegeben
• Ist die Validität des WIT-2 gegeben? Kriteriumsvalidität √ Zusammenhang mit externen Kriterien (Schulnoten, Berufserfolg, ... ) belegt Konstruktvalidität √ konvergente: hohe Korrelation mit entsprechenden Modulen in anderen Tests diskriminante: geringe Korrelation zu Tests mit anderen Konstrukten, bspw. Leistungsmotivation & Testängstlichkeit ⇒ Validität belegt
• Was ist zum Aufbau des WMT-2 zu sagen? Theoretische Grundlage Hierarchisches Modell von Cattell (Rasch-Modell) Testaufbau = Matrizentest 18 Aufgaben 3 vorangestellte Übungsaufgaben
• Was sind die Anwendungsbereiche des WMT-2? Berufs- und Laufbahnberatung Personalwesen Intelligenz- und Leistungsdiagnostik Einzelpersonen- und Gruppentestung möglich kulturfrei
• Beschreiben Sie kurz Durchführung, Auswertung und Interpretation des WMT-2. Durchführung Einführungsbeispiele Klären der Fragen Beginn des eigentlichen Tests bei Nichtwissen kein Kreuz setzen keine Zeitbegrenzung, knapp 20 bis 30 Minuten Auswertung Vergleich mit Antwortbögen Summe der korrekten Antworten bildet Rohscore Hinweise zum Umgang mit Mehrfachantworten und Korrekturen Interpretation normorientierte, kriteriumsorientierte und ipsative Interpretation möglich
• Was gibt es zur Normierung des WMT-2 zu sagen? gibt drei Normgruppen- österreichische Jugendliche- Erwachsene- Jugendliche und junge Erwachsene auf Berlin Interpretation schwierig, wenn keine passende Norm vorliegt
• Wie schätzen Sie die Objektivität des WMT-2 ein? Durchführungsobjektivität √ standardisierte Anweisungen Test sehr selbsterklärend Auswertungsobjektivität √ geschlossenes Antwortformat Rohscore durch Zählen ermittelt Interpretationsobjektivität √ Bewertung anhand vorgefertigter Werte Vergleich mit Normgruppen ⇒ Objektvität gegeben
• Advertisement
• Wie schätzen Sie die Reliabilität des WMT-2 ein? Retest-Reliabilität x r = .67 → niedrig Testhalbierungsreliabilität √ r = .82 → befriedigend Innere Konsistenz √ Cronbachs α = .76 → akzeptabel ⇒ Reliabilität teilweise gegeben
• Wie schätzen Sie die Validität des WMT-2 ein? Inhaltsvalidität √ Wiederholende Schlussfolgerungen Augenscheinvalidität √ Typischer Intelligenztest Konstruktvalidität √ Konvergente Validität √- SPM: r = .92- IST: r = .85 Diskriminante Validität √/x- ZVT: r = .29- 3DW: r = .69 → dieser Wert zu hoch! Kriteriumsvalidität √ Zusammenhang zwischen Matheleistungen und WMT-2 ⇒ Validität größtenteils gegeben
• Beschreiben Sie den Aufbau des WIE. Theoretische Grundlage Wechslers Intelligenzkonzept Verbal- und Handlungs-IQ Aufbau Sprachliches Verständnis (bspw. Wortschatztest) & Arbeitsgedächtnis (bspw. Zahlennachsprechen) → Verbal-IQ Wahrnehmungsorganisation (bspw- Matrizentest) & Arbeitsgeschwindigkeit (bspw. Symbolsuche) → Handlungs-IQ Verbal-IQ: 6 Subtests Handlungs-IQ: 5 Subtests
• Nennen Sie für den Verbal-IQ und den Handlungs-IQ je zwei Subtests des WIE mit Itembeispiel. Verbal-IQ GemeinsamkeitenfindenWas ist das Gemeinsame von Gelb und Grün? (Richtig: beides sind Farben.) Allgemeines WissenAuf welchem Kontinent liegt Brasilien? (Gültige Antworten: Südamerika, Amerika) Handlungs-IQ MatrizentestMatrizenbilder (ähnlich WMT-2) BilderergänzenIch zeige Ihnen ein Bild und Sie sagen mir, was darauf fehlt. (Beispiel: Gekippt gehaltene Kanne mit Wasser & Glas darunter. Es fehlt: Wasser, das aus der Kanne in das Glas fließt.)
• Was sind Anwendungsbereiche des WIE? Untersuchung schwerer Lernstörungen Hochbegabungsdiagnostik Diagnose neuropsychologischer Behinderungen Schullaufbahndiagnostik, Personalauswahl (USA)
• Was ist zur Durchführung, Auswertung und Interpretation des WIE zu sagen? Durchführung feste Reihenfolge der Untertests Zeitvorgaben einhalten Anweisungen als standardisierter Dialog langwierig schwierige Handhabbarkeit Auswertung Bewertungsvorgaben direkt an Durchführungsanweisungen gekoppelt meist direkte Protokollierung der Bewertung erforderlich Asuwertung teilweise nach Test durch Schablonen erleichtert gute Handhabbarkeit bei weniger Routine Interpretation insgesamt klare Vorgaben zur qualitativen & quantitativen Interpretation gute Handhabbarkeit auch ohne Routine
• Wei schätzen Sie die Objektivität des WIE ein? Durchführungsobjektivität √ gegeben durch konkrete Anweisungen Auswertungsobjektivität √ gegeben durch konkrete Anweisungen Punktevergabe schwierig → kann Auswertungsobjektivität beeinträchtigen Interpretationsobjektivität √ gegeben durch weitgehende Standardisierung der Befunde ⇒ Objektivität gegeben
• Was ist zur Reliabilität des WIE zu sagen? Paralleltestreliabilität & Innere Konsistenz: keine Angaben Retest-Reliabilität x Verweis auf Werte der Originalfassung (WAIS-II) varriieren für Untertests zwischen .48 (sehr schlecht) bis .93 (gut) Testhalbierungsreliabilität √ über alle Altersgruppen hinweg bestimmt variieren liegen hauptsächlich im guten Bereich (.91 bis .97) bis auf einige Ausnahmen ⇒ keine ausreichenden Reliabilitätsangaben
• Wie schätzen Sie die Validität des WIE ein? Inhaltsvalidität die englischsprachige Version wurde geprüft Experten sichern Validität zu Konstruktvalidität faktorielle V.: Faktorenanalysen bestätigen weitgehend die Konstruktvalidität (Test misst Allgemeine Intelligenz) keine Angaben zu konvergenter & divergenter V. gegeben Kriteriumsvalidität Verweis auf Vorläufermodelle Untersuchung verschiedener Gruppen (bspw. Gruppen mit Bildungsunterschieden) → es gab zu erwartende Mittelwertsunterschiede ⇒ Validität nur teilweise gegeben, weitere Forschung notwendig
• Was sagen Sie zur Normierung, Ökonomie & Zumutbarkeit des WIE? Normierung An 1897 Personen normiert, aus Deutschland, Österreich und der Schweiz Geschlecht gleichverteilt verschiedene Schulabschlüsse, 13 Altersgruppen Ökonomie umfangreiche, lange Einzeltestung hohe Anforderungen an Testleiter → nicht sehr ökonomisch Zumutbarkeit lange Testung schwer zumutbar
• Ordnen Sie den d2-R theoretisch ein. Messgegenstand: Konzentration Einordnung in mehrere Modelle möglich Durchstreichtest Klassifizierung anhand des Antwortformats - keine konzeptuelle Einordnung Allgemeine Leistungsfähigkeit es gibt allgemeine Voraussetzungen für das Erbringen von Leistungen (Bartenwerfer, 1964, 1983) Bearbeitung intellektuell anspruchsloser Aufgaben für eine gewisse Zeit mit hohem Tempo Konzentration Konzentrationstests sind Teilmengen der allgemeinen Leistungstests Aufmerksamkeit Aufmerksamkeit im d2-R mit Konzentration verbunden → konzentrierte Aufmerksamkeit Weitere: Wahrnehmungsgeschwindigkeit (perceptual speed) Mental speed Bearbeitungsgeschwindigkeit Belastbarkeit
• Welche Anwendungsbereiche gibt es für den d2-R? Verkehrspsychologie Beispiel: Anforderungen an die psychische Leistungsfähigkeit von Kraftfahrern Pädagogische PsychologieBeispiel: Ursachenklären bei allgemeinen oder fächerspezifischem Schulversagen Klinische PsychologieBeispiel: Aufmerksamkeit / Konzentration als diagnostisches Kriterium verschiedener Störungen Arbeits- und OrganisationpsychologieBeispiel: einige Berfue erfordern Konzentration NeuropsychologieBeispiel: Patienten nach Schlaganfall, Tumor, ... sind in Aufmerksamkeit und Kozentration beeinträchtigt
• Beschreiben Sie kurz Aufbau, Durchführung, Auswertung und Interpretation des d2-R. Aufbau 789 Zeichen, d oder p mit 1 - 4 Strichen Zielobjekt: d mit 2 Strichen 14 Zeilen Durchführung Aufgabe: alle Zielobjekte durchstreichen pro Zeile 20 Sekunden Bearbeitungszeit Einzel- und Gruppentestung möglich Instruktion ist wörtlich vorzulesen Auswertung erste und letzte Zeile gehen nicht in Auswertung mit ein Einige Kennwerte. Bearbeitete Zielobjekte, Auslassungfehler, Verwechslungsfehler, ... Interpretation Transformation der Rohwerte in standardisierte Werte anhand von Normtabellen Vorschlag zur Verbalisierung der Standardwerte im Manual gegeben
• Wie schätzen Sie die Objektivität des d2-R ein? Durchführungsobjektivität √ sehr hoch, durch standardisierte Instruktionen, einheitliches Testmaterial, ... Auswertungsobjektivität √ durch Studie belegt Interpretationsobjektivität √ durch Interpretationshinweise gegeben ⇒ Objektivität gegeben
• Wie schätzen Sie die Reliabilität des d2-R ein? Innere Konsistenz √ Cronbachs α im guten bis exzellenten Bereich (.80 bis .96) Retest-Reliabilität √ Bearbeitete Zielobjekte & Konzentrationsleistung: r = .90 durchschnittlicher Wert mehrerer Befunde: r = .66→ hohe Übungseffekte ⇒ Reliabilität weitesgehend gegeben
• Was ist zur Validität des d2-R zu sagen? Inhaltsvalidität √/x Nicht für alle Berufsbereiche gegeben Konstruktvalidität √/x konvergente: nur kleine Korrelationen mit anderen Konzentrationstests divergente: Korrelation mit Intelligenz unter r = .30 Kriteriumsvalidität √ Umweltpsychologie: d2-R konnte verminderte Kozentration nach Umgang mit neurotoxischen Substanzen nachweisen Pädagogische Psychologie: gute Noten werden mit höherem Arbeitstempo in Verbindung gebracht ⇒ Validität teilweise gegeben
• Wie schätzen Sie Unverfälschbarkeit, Ökonomie, Fairness & Normierung des d2-R ein? Normierung 4024 Personen Geschlechter gleichverteilt Leistung abhängig vom Alter Ökonomie √ Gruppenuntersuchungen möglich geringe Bearbeitungszeit schnelle Auswertung geringer Materialeinsatz Unverfälschbarkeit x Übungseffekte Faking bad möglich Bearbeitungsstrategien meist weniger hilfreich Fairness √ unter Beachtung der Voraussetzungen fair
• Worauf baut der KLT-R auf? soll Konzentrationsfähigkeit im Sinne von Belastbarkeit, Ausdauer und Ermüdungsresistenz messen baut auf dem Konzept der Koordination auf: Zusammenwirken der Einzeltätigkeiten „Auffassen“, „Rechnen“, „Merken“, Regelabruf“ und „Entscheiden“ zu einer Gesamttätigkeit soll so wenig wie möglich von intellektuellen Fähigkeiten abhängig sein
• In welchen Bereichen wird der KLT-R eingesetzt? Schulpsychologie Betriebspsychologie Vekehrspsychologie Pharmakopsychologie
• Beschreiben Sie kurz den Aufbau sowie die Durchführung, Auswertung und Interpretation des KLT-R. Aufbau besteht aus 9 Blöcken à 20 Rechenaufgaben (Speed-Test) 2 Reihen an RechenaufgabenKLT 4 - 6: Das kleinere Ergebnis muss von dem größeren subtrahiert werden.KLT 6-13: Wenn das Ergebnis der unteren Zeile größer ist, als das der oberen, dann Addition. Wenn das Ergebnis der unteren Zeile kleiner ist, als das der oberen, dann Subtraktion. Durchführung pro Aufgabenblock 2 Minuten = 18 Minuten gesamt Papier- und Bleistifttest Test als Einzel- oder Gruppenuntersuchung möglich Es dürfen keine Zwischenergebnisse notiert werden! Auswertung Schablonen erleichtern Auswertung Rohwerte in Normwerte umwandeln Interpretation Maß für quantitative Konzentrationsleistung: Gesamtleistungsmenge, Anzahl richtig bearbeiteter Aufgabenaß Maß für Qualität der Leistung: Anzahl falsch bearbeiteter Aufgaben, Fehlerrate Maß für Leistungskonstanz: Fehlerverteilung wenig Interpretationshilfen
• Advertisement
• Wie schätzen Sie die Objektivität des KLT-R ein? Durchführungsobjektivität √ Testausfürhung voll standardisiert Auswertungsobjektivität √ Schbalonen schützen vor Fehlern Interpretationsobjektivität √ Interpretation anhand von Normtabellen Interpretationshilfen wünschenswert ⇒ Objektivität gegeben
• Wie schätzen Sie die Reliabilität des KLT-R ein? Retest-Reliabilität √ keine Ergebnisse für KLT-R hoch für KLT (r = .86 bis r = .88) Testhalbierungsreliabilität √ hoch für Mengenleistung, etwas geringer für Fehleranzahl Innere Konsistenz √ Richtig gelöste Aufgaben: Cronbachs Alpha exzellent (α = .94 - .97) Falsch gelöste Aufgaben: Cronbachs Alpha akzeptabel bis gut (α = .79 - .93)
• Was sagen Sie zur Validität des KLT-R? Konstruktvalidität x konvergente: Korrelation mit zwei Untertests des PSB, r zwischen .26 und .53→ zu niedrig divergente: Korrelationen mit Rechentest RT, r zwischen .22 und .57→ zu hoch faktorielle: Bartenwerfer (1962): gute Übereinstimmung des KLT-R mit Pauli-Test Kriteriumsvalidität x Korrelationen zwischen Lehrerurteil zur Leistungsmenge und Fehleranteil des KLT→ mittlere Zusammenhänge Korrelationen zwischen Schulnoten und Fehleranteil des KLT→ niedrige Zusammenhänge ⇒ ungenügende Validität
• Auf welcher theoretischen Grundlage baut der FPI-R auf? aus theoretischen Interessen der Autoren an bestimmten Persönlichkeitseigenschaften entstanden Neurotizismus & Extraversion des dichotom hierarchischen Modells (Eysenck) als Skalen im FPI-R vorhanden
• Was ist zum Aufbau sowie zur Durchführung, Auswertung und Interpretation des FPI-R zu sagen? Aufbau Persönlichkeitsstrukturtest 10 Standardskalen + 2 Zusatzskalen nach Eysenck (Extraversion & Emotionalität) Durchführung Dauer: ca. 10 - 30 Minuten schriftlich oder am PC (Beantwortung der Items nur mit "stimmt", "stimmt nicht" Testleiter ist anwesend Instruktionen auf dem Fragebogen Auswertung Auswertungsschablone Skalenrohwerte anhand Normtabellen in Stanine-Werte umwandeln & diese in dem Auswertungsprofil abtragen Interpretation normorientierte und ipsative Interpretation möglich Interpretation nur empfehlenswert, wenn Item 1 mit "stimmt" beantwortet wurde keine näheren Hinweise zur klinischen Bedeutsamkeit
• Nennen Sie 5 Standard-Skalen und die zwei Zusatzskalen des FPI-R und je ein Beispiel-Item. Standardskalen Lebenszufriedenheit: Ich habe einen Beruf, der mich voll befriedigt. Leistungsorientierung: Ich bin leicht beim Ehrgeiz zu packen. Körperliche Beschwerden: Ich habe selbst bei warmem Wetter häufig kalte Hände & Füße. Beanspruchung: Die täglichen Belastungen sind so groß, dass ich davon oft müde und erschöpft bin. Offenheit: Manchmal schiebe ich etwas auf, was ich sofort tun sollte. Zusatzskalen Emotionalität: Ich habe manchmal ein Gefühl der Teilnahmslosigkeit und der inneren Leere. Extraversion: Ich gehe abends gern aus.
• Was ist zur Normierung des FPI-R zu sagen? 1999: 2 bevölkerungsrepräsentative Normierungsstichprobe→ zu lange her Normen sind nach Alter und Geschlecht getrennt
• Ich welchen Bereichen wird der FPI-R angewandt? Psychosomatik Psychotherapie Gesundheitspsychologie Rehabilitation Einzelverlaufsdiagnostik
• Was ist zur Objektivität des FPI-R zu sagen? Durchführungsobjektivität √/x standardisierte Instruktionen auf Fragebogen Anmerkungen zum Umgang mit Nachfragen keine Angaben zum Verhalten des Testleiters Auswertungsobjektivität √/x Auswertungsschablone passt nicht auf den Fragebogen → Fehler beim Auszählen Interpretationsobjektivität √/x Normtabellen & Auswertungsprofil keine genauen Interpretationshinweise & Hinweise zur (klinischen) Bedeutsamkeit ⇒ Objektivität teilweise gegeben
• Wie schätzen Sie die Reliabilität des FPI-R ein? Innere Konsistenz √ Cronbachs α = zwischen .73 und .83 akzeptabel bis gut Retest-Reliabilität √ zwischen r = .63 und r = .85 mangelhaft bis gut wobei an klinischem Kontext getestet → keine hohe Retest-Reliabilität gewünscht ⇒ ausreichende Reliabilität, weitere Forschung notwendig
• Wie schätzen Sie die Validität des FPI-R ein? Inhaltsvalidität √ attestiert (jedoch von Autoren selbst) Konstruktvalidität √/x konvergente: mittlere Validität zwischen den SkalenPROBLEM: mit welchem Konstrukt vergleichen? Kriteriumsvalidität √/x teilweise belegt ⇒ durchwachsene Validität
• Wie schätzen Sie den FPI-R im Hinblick auf Nebengütekriterien ein? Zumutbarkeit √ Ökonomie √ Unverfälschbarkeit x (verfälschbar) Störanfälligkeit x (anfällig für situative Gegebenheitenm bspw. Stimmung) Fairness √ (Sprachverständnis muss gegeben sein)
• Auf welcher theoretischen Grundlage baut der NEO-PI-R auf? NEO-PI-R als Operationalisierung des FFM FFM = fünf generelle und stabile Dimensionen zur Beschreibung der Persönlichkeit zunächst 3 Faktoren (NEO), dann Erweiterung um 2 (A+C) (N) Neurotizismus (E) Extraversion (O) Offenheit für Erfahrungen (A) Veträglichkeit (C) Gewissenhaftigkeit
• Für welche Anwendungsbereiche ist der NEO-PI-R geeignet? Beratung, klinische Psychologie und Psychiatrie Verhaltensmedizin und Gesundheitspsychologie Berufsberatung, Arbeits- Betriebs- und Organisationspsychologie Pädagogisch-psychologische Forschung Psychologische Forschung
• Was ist zum Aufbau des NEO-PI-R zu sagen? Nennen Sie für jede Skala bitte eine Beispielfacette mit Item. 5 Dimensionen, je 6 spezifische Facetten, je 8 Items. Beispiele für jede Skala: Neurotizismus → Ängstlichkeit → "Ich fühle mich oft angespannt und nervös." Extraversion → Geselligkeit → "Ich habe gerne viele Leute um mich herum." Offenheit → Phantasie → "Ich habe eine lebhafte Vorstellungskraft." Veträglichkeit → Vertrauen → "Ich neige dazu, von anderen das Beste anzunehmen." Gewissenhaftigkeit → Kompetenz → "Ich bin stolz auf mein gesundes Urteilsvermögen." Antwortformat:Starke Ablehung - Ablehnung - Neutral - Zustimmung - Starke Zustimmung
• Beschreiben Sie kurz Durchführung, Auswertung und Interpretation des NEO-PI-R. Durchführung Gruppen und Einzeltestung möglich Dauer: 30 bis 40 Minuten, keine Zeitbeschänkung 2 Versionen: mit integriertem oder mit separatem Antwortbogen viele Negationen enthalten, teilweise alte Formulierungen Auswertung Version mit integriertem Antwortmodus aufwändig auszuwerten Version mit separatem Antwortmodus: zeilenweise werden Rohwerte ermittelt → Rohwerte der 6 Facetten zu Dimensionsrohwerten → Transformierung in Standardwerte Interpretation Rückmeldung über "Persönlichkeitsbild" Profilvergleich(e) möglich
• Wie schätzen Sie die Objektivität des NEO-PI-R ein? Durchführungsobjektivität √ standardisierte Instruktionen Auswertungsobjektivität √  genaue Angaben zur Auswertung geschlossenes Antwortformat Interpretationsobjektivität √  Normtabellen inhaltliche Beschreibung der Skalen, Interpretationshilfen, etc. ⇒ objektiv
• Wie schätzen Sie die Reliabilität des NEO-PI-R ein? Innere Konsistenz √ Hauptskalen α zwischen .86 und .93 (Form S und Form F) Facetten niedriger Retest-Reliabilität √ nach 1-2 Monaten bei den Hauptskalen r = .82 bis r = .91 nach mehreren Jahren deutlich geringere Werte ⇒ Reliabilität weitesgehend gegeben
• Was ist zur Validität des NEO-PI-R zu sagen? Konstruktvalidität √ konvergente: Skalen anderer Persönlichkeitsfragebogen laden sinnvoll auf den 5 Faktoren des NEO-PI-R faktorielle: Interkorrelation der Facetten und Skalen; Übereinstimmung mit amerikanischer Faktorenstruktur Kriteriumsvalidität √ Korrelation von Selbst- und BekanntenurteilenHauptskalen mittlere Korrelation: r = .54Facetten mittlere Korrelation: r = .47 ⇒ weitesgehend valide
• Was ist zur Normierung des NEO-PI-R zu sagen? Form S Gesamtstichprobe: N = 12885N = 11724 nicht-klinische StichprobeN = 270 klinische Stichprobe nach Geschlecht und Alter Form F Gesamtstichprobe: N = 1547 Nach Alter und Geschlecht, aber weniger differenziert als bei Forn S

back  |  next 2 / 3