Diagnistik und Testtheorie (Fach) / Testtheorie I (Lektion)
In dieser Lektion befinden sich 104 Karteikarten
Testtheorie und Testkonstruktion
Diese Lektion wurde von lesanges erstellt.
- Welchen Zusammenhang gibt es zwischen Itemvarianz ... Ist die Itemschwierigkeit sehr hoch oder sehr gering, dann ist die Varianz gering bei mittlerer Itemschwierigkeit gibt es viele Differenzierungen Items mit einer Schwierigkeit von 0 oder 100 können gar ...
- Was ist die Trennschärfe`? Maß wie gut ein Item Personen mit unterschiedlichem Antwortverhalten voneinander trennt wie prototypisch das Item für den Gesamttest ist
- Was ist die Voraussetzun zur Berechnung der Trennschärfe? ... alle Items erfassen inhaltlich dasselbe Merkmal
- Welche Merkmalsarten gibt es? quantitativ vs. qualitiativ qualitativ = Ausprägung in unters. Kategorien unterteilbar, Nominalskalenniveau quantitativ= graduell ausgeprägte Merkmalskategorie, Ordinal-, Intervall- oder Verhältnisskalenniveau ...
- Welche Testarten gibt es? Leistungstest Speed-/ Geschwindigkeitstest Power-/Niveautests Persönlichkeitstest objektive Persönlichkeitstests (Merkmal wird indirekt über Verhalten erschlossen) projektive Verfahren (qualitative ...
- Was drückt der Geltungsbereich aus? gibt die Anwendungsmöglichkeiten von Tests und Fragebögen vor je mehr Kriterien mann vorhersagen möchte, umso mehr Infos müssen erfasst werden je enger Geltungsbereich umso homogener können Aufgaben ...
- Was ist die Zielgruppe? = Personenkreis, für den mit dem Test Aussagen getroffen werden sollen je breiter Zielgruppe, umso breiter gefächert muss der Schwierigkeitsgrad sein, um möglichst viele Merkmalsausprägungen abzudecken ...
- Wozu benötigt man die Analyse- bzw. die Eichstichprobe? ... Analysestichprobe: Überprüfung, ob Items gut passen Stichprobe für Itemanalyse Eichstichprobe zur Gewinnung von Normtabellen Überprüfung der Kriteriumsvalidität
- Wo liegt der Unterscheid zwischen einem unidimensionalen ... unidimensional = erfasst nur 1 Merkmal multidimensional = erfasst mehrere Merkmale
- Je mehr Items zur Merkmalserfassung benutzt werden... ... ... umso präziser das Ergebnis, umso geringer der Messfehler, umso höher die Reliabilität allerdings ab einer bestimmten Itemzahl kein bedeutsamer Reliabilitätszuwachs mehr möglich
- Was sind Screeningverfahren? Instrument zur groben Klassifikation des vorhanden/ Nicht-vorhanden-seins eines Merkmals kurze Testzeit
- Auf welche Art und Weise kann ein Test dargeboten ... grundsätzliche Formate: Paper- Pencil Computergestütze Tests Form der Testung: Einzeltestung Gruppentestung
- Welche Konstruktionsstrategien gibt es? Intuitive Konstruktion Konstruktion von intuition und Erfahrung des Testkonstrukeur geleitet oft am Beginn neuer Forschungszweige Rationale Konstruktion Methode der Deduktion, Vorhandensein einer elaborierten ...
- Was ist der Augabentyp? wie Fragen zu beantworten sind
- Woraus besteht eine Aufgabenstellung`? Aufgabenstamm (Aufgabe selbst) Antwortformat der Aufgabe
- Nenne Vor- und Nachteile von Kurzaufsatzaufgaben. Vorteile: zufällig richtige Antwort finden nicht möglich Nachteile nehmen erheblich viel Zeit in Anspruch eingschränkte Auswertungsobjektivität Probanden mit Formilierungsschwierigkeiten benachteiligt ...
- Nenne Vor- und Nachteile von Ergänzungsaufgaben1 Vorteile: Reproduktion von gespeichertem Wissen Wahrscheinlichkeit einer zufällig richtigen Lösung sehr gering Objektivität in der Regel gewährleistet auch Lösungsweg beobachtbar Nachteile: nur ...
- Nenne Vor- und Nachteile von Zuordnungsaufgaben Vorteile: ökonomisch und objektiv große Anzahl von Aufgaben platzsparend präsentiert zufällig richtige Antwort eher geringes Problem bei ausreichenden Antwortalternativen Nachteile: keine Reproduktionsleistung ...
- Was sind Distraktoren? Antwortalternativen, die wie die richitge Antwort aussehen, aber inhaltlich falsch sind
- Was ist Disjunktheit? gegenseitiges Ausschließen der Antwortalternativen es gibt genau 1 richtige Antwort
- Was ist Exhausivität? = Vollständigkeit der Antwortalterativen, es werden alle Verhaltensvarianten ausgeschöpft
- Nenne Vor und Nachteile von dichotomen Aufgaben` Vorteile einfach und ökonomisch relativ kurze Lösungszeit Nachteile 50% Ratewahrscheinlichkeit nur Wiedererkennungsleistung gefragt erhöhte Zustimmungstendenz teilw. Schwierigkeiten bei der Formulierung ...
- Nenne Vor und Nachteile von Mehrfachwahlaufgaben Vorteile: einfach, ökonomisch, objektiv Ratewahrscheinlichkeit durch Antwortalternativen stark gemindert Nachteile: Wiedererkennungsleistung Verzerrung möglich, wenn Mängel in den Distraktoren vorliegen ...
- Nenne Vor- und Nachteile von Beurteilungsaufgaben Vorteile: leicht zu handhaben ökonomisch im Materialverbrauch und dder Auswertungszeit durch einheitliches Antwortformat wird Bearbeitungszeit kürzer Nachteile: oft als Intervallskala benutzt
- Welche Aspekte zur Konstruktion von Beurteilungsaufgaben ... Verwendung von Skalenstufen visuelle Analogskala vs. diskret gestufte Ratingskala Polarität der Antwortskala bipolar vs. unipolar Bezeichnung der Skalenpunkte numerische, verbale, optische oder ...
- Welche Fehlerquellen können bei der Itembeantwortung ... Soziale Erwünschtheit Äußerungen, die mit sozialen und gesellschaftlichen Normen der Gesellschaft übereinstimmen Tendenz zur Mitte bewusste oder unbewusste Bevorzugung der mittleren, neutralen ...
- Was kann man gegen soziale Erwünschtheit tun? Aufklärung über den Untersuchungsgegenstand Zusicherung der Anonymität explizite Erfassung von Kontrollskalen Konstruktion des Tests (undurchschaubare Anforderungen und unmittelbare Erhebung von Verhalten) ...
- was kann man gegen die Tendenz zur Mitte tun? keine neutrale Mittelkategorie "Weiß- nicht" Kategorie
- Was kann man gegen Akquieszenz tun? Invertieren von Items
- Was sind Aktualisierungseffekte? Beantwortung des vorausgegangenen Items beeinflusst Beantwortung des darauffolgenden Items
- Was sind Konsistenzeffekte und wie vermeidet man sie? ... geben von stimmigen Antworten auf Items, die das gleiche Merkmal zu erfassen scheinen Gegenmaßnahmen: Pufferaufgaben Randomisieren Ausbalancieren der Itemreihenfolge Mischen einzelner Subskalen
- Welche Puntke müssen in der Instruktion angesprochen ... Erklärung des Antwortformats mit Bsp. spontane und wahrheitsgetreue Beantwortung Vollständigkeit Hinweis auf Anonymität verantwortliche Person/ Institut
- was ist beim Testlayout zu beachten? sprachlich und optisch ansprechend einfach und übersichtlich (gut lesbare Schrift, Hinweis auf Änderung des Antwortformats)
- Wie berechnet man die Trennschärfe? Korrelation eines Items mit dem Gesamttest ermittelt Werte im Bereich von -1 bis 1 "Part-whole-Korrektur"
- Was ist die Part- whole- Korrektur? das Item wird mit dem aus allen übrigen Items des Tests ermittelten Wert in Beziehung gesetzt ohne Korrektur -> Überschätzung der Trennschärfe, da das betreffende Item selbst Bestandteil des Tests ...
- Welche Puntke sollte man bei der Itemselektion und ... Itemschwierigkeit Itemvarianz Itemtrennschärfe
- Inwieweit unterscheidet sich die Testwertermittlung ... Leistungstests = Anzahl der richtigen Antworten, Rate-/Zufallskorrektur Persönlichkeitstests = Summe über Itemantworten hinweg bilden
- Warum sollte man eine Rate-/Zufallskorrektur vornehmen`? ... richtige Lösungen können durch Zufall entstehen Annahme: falsche Antworten entstehen nicht durch falschen Ansatz, sondern durch Raten
- Wie ist die Herangehensweise bei der Testwertermittlung ... Annahme: kategorien der Ratinskalen intervallskaliert bei k-fach abgestuften Items, jeder Amtwortmöglichkeit Wert zwischen 0 und k-1 0 spricht für am wenigsten Kriterium k-1 spricht für am meisten ...
- Welche Kennwerte nutzt man zur Bestimmung der Testwertverteilung` ... Maße der zentralen Tendenz Streuungsmaße Schiefe und exzess
- Wozu benötigt man Schiefe und Exzess`? zur beurteilung ob die Testwertverteilung von der Normalverteilung oder anderer symmetrischer Verteilung abweicht wichtig für weitere statistische Verfahren, wenn Normalverteilung Voraussetzung ist
- Was gibt die Schiefe an`? Gibt an, wie stark die Verteilung der Testwerte von einer systematischen Verteilung abweicht rechtschiefe und linksschiefe Verteilung
- Was gibt der Exzess an? gibt an, ob die Verteilung breit oder schmalgipflig ist Wölbung wie bei Normalverteilung schmalere Verteilung flachere Verteilung
- Was sind Ursachen für die Abweichungen in der Testwertverteilung`? ... mangelnde Testkonstruktion linksschief -> test zu leicht rechtsschief -> Test zu schwer Heterogene Stichprobe Stichprobe besteht aus Unterstichproben, die normalverteilt sind, aber zusammen eine Mischverteilung ...
- Wie ist Reliabilität in der KTT definiert? Varianzverhältnis zwischen der Varianz der wahren Werte und der tatsächlichen Varianz der vom Testverfahren gelieferten Messwerte Rel (x) = Var (τ) ______ ...
- Welche Faktoren haben Einfluss auf die Höhe der Reliabilität? ... Art des erfassenden Merkmals und Vergleich mit konkurrierenden Verfahren Leistungsvariablen leichter zu messen, als Persönlichkeitsvariablen bei Untersuchung von Merkmalen mit eher ungeeigneten Verfahren ...
- Was ist die Kernüberlegung der KTT? Messwert einer Person setzt sich zusammen aus dem wahren Ausprägung des Merkmals und einem zufälligen Messfehler
- Was sind die Axiome der KTT? Existenzaxiom τvi = E(xvi) Verknüpfungsaxiom xvi = τvi + εvi Unabhängigkeitsaxiom Corr(τvi, εvi)= 0 Zusatzannahmen
- Was besagt das Existenzaxiom der KTT? = der wahre Wert τvi als Erwartungswert der Messung xvi eines Probanden v in Item i existiert τvi = E(xvi)
- Was besagt das Verknüpfungsaxiom der KTT? = jede Messung xvi besteht aus dem wahren Wert τvi und einem zufälligen Messfehler εvi xvi= τvi + εvi Dabei hat der Zufallsfehler εvi den Erwartungswert Null E(εvi) = 0