28
Testtheorie und Testkonstruktion: Grundlagen (Subject) / Grundlagen: Itemkonstruktion (Lesson)
Advertisement
- Was ist ein Items? Kleinste Beobachtungseinheit in einem Test
- Woraus besteht ein Item? Itemstamm + Antwortformat
- Was kann ein Itemstamm sein? Frage, Aussage, Bild, Rechenaufgabe,...
- Was kann ein Antwortformat sein? ankreuzbare Alternativen, leere Zeilen, mehrstufige ANtwortskala,...
- Wonach werden Aufgaben- /Itemtypen unterschieden? nach dem Antwortformat (frei, gebunden, a-typisch)
- Aufgaben mit freiem Antwortformat: Welche Aufgabentypen gibt es? - Kurzaufsatz-Aufgaben - Ergänzungsaufgaben
- Was sind die Vorteile von Kurzaufsatz-Aufgaben? - Reproduktion von Wissen bzw. selbst erzeugte Antwort - zufällig richtige Antwort ist nicht möglich
- Was sind die Nachteile von Kurzaufsatz-Aufgaben? lange Bearbeitungszeit Auswertung kann schwierig sein (vorher festlegen, was wie kodiert werden soll)
- Wie sollten Kurzaufsatz-Aufgaben konstruiert werden? - Frage / Aufforderung sollte so formuliert sein, dass die Antwort kurz ausfällt - eindeutige Fragestellung - Freiplätze für Antworten möglichst gleich lang - Antwortschlüssel zur Kodierung der Antworten
- Welche Vorteile haben Ergänzungsaufgaben? - leichte Konstruktion - Herabsetzung d. Ratewahrscheinlichkeit
- Advertisement
- Welche Nachteile haben Ergänzungsaufgaben? - i.d.R. nur Faktenwissen testbar - bei nicht exakter Aufgabenstellung: unerwünschte Antworten, die als gültig angesehen werden können - Gefahr: Prüfung von Intelligenz und Lesefähigkeit statt beabsichtigtem Testinhalt
- Wie sollten Ergänzungsaufgaben konstruiert werden? eindeutige Fragestellung --> nur eine Antwort möglich keine grammatikalischen Hinweie auf die richtige Lösung Länge der Lücken ohne Hinweis auf die richtige Lösung Antwortschlüssel mit akzeptablen Antworten
- gebundenes Antwortformat: Welche Aufgabentypen gibt es? - Ordnungsaufgaben - Auswahlaufgaben - Beurteilungsaufgaben
- Welche Arten von Ordnungsaufgaben gibt es? - Zuordnungsaufgaben - Umordnungsaufgaben
- Was sind Vorteile von Zuordnungsaufgaben? einfach, ökonomisch, objektiv Ratewahrscheinlichkeit gering, wenn mehr Antwortalternativen als Fragen
- Was sind Nachteile von Zuordnungsaufgaben? nur Wiedererkennungsleistung, keine Reproduktion mit jeder richtigen Zuordnung steigt die Ratewahrscheinlichkeit
- Wie sollten Zuordnungsaufgaben konstruiert werden? mind. 50 % mehr Antwortalternativen als Fragen Testbearbeiter muss genau verstehen, wie er zuordnen soll Antwortalternativen sollen systematisch geordnet sein (z.B. alphabetisch)
- Was sind die Vorteile von Umordnungsaufgaben? einfache Konstruktion nicht auf verbales Material beschränkt
- Was sind die Nachteile von Umordnungsaufgaben? - nur anwendbar auf Sachverhalte, die eine Ordnung aufweisen - problematische Auswertung: ab wann gilt Aufgabe als gelöst?
- Wie sollten Umordnungsaufgaben konstruiert werden? - eindeutige Lösung muss vorhanden sein
- Was sind die Vorteile von Auswahlaufgaben? - einfach, ökonomisch, objektiv - bei Mehrfachwahlaufgaben: geringere Ratewahrscheinlichkeit bei mehreren richtigen Antwortalternative
- Was sind die Nachteile von Auswahlaufgaben? - bei dichotomen Aufgaben: 50%ige Ratewahrscheinlichkeit
- Wie sollten Auswahlaufgaben konstruiert werden? - Wahl geeigneter Distraktoren - Disjunktheit der Antwortalternativen - Exhaustivität der Antwortkategorien - Anzahl der Antwortalternativen
- Beurteilungsaufgaben: Welche Skalen können verwendet werden und worauf sollte man dabei achten? Analogskala (kontinuierlich gestuft): - mit Computern mittlerweile besser auswertbar Ratingskala (diskret gestuft): - bei mehr als 7 Skalenstufen kein weiterer Informationsgewinn in den individuellen Urteilsdifferenzierungen - Antworttendenzen müssen berücksichtigt werden
- Beurteilungsaufgaben: Sollten die Aufgaben bipolar oder unipolar sein? abhängig vom Iteminhalt bzw. von der zu erfassenden Eigenschaft
- Beurteilungsaufgaben: Wie können die Skalenpunkte bezeichnet werden? - numerische Skala - verbale Ratingskala - optische Skalen u. Symbolskalen
- Was sind die Vorteile von Beurteilungsaufgaben? Vorteile: - leicht zu handhaben, ökonomisch - da in einer Skala der Antwortmodus gleich bleibt, sinkt die Bearbeitungszeit
- Was sind die Nachteile von Beurteilungsaufgaben? Nachteile: - numerische Intervallskalen können den Anschein einer Intervallskalierung geben --> Antworten sind aber ordinalskaliert