Testpsychologie: Einheit 7: Empirische Überprüfung des Testentwurfs (II), Item und Skalenwerte

• Eigentrennschärfe: Aussage über Items der „eigenen“ Skala
• Fremtrennschärfe: Aussage über Beziehung eines Items zu einem (externen) Kriterium

Wie gut misst ein einzelnes Item die angestrebte Fähigkeit oder Eigenschaft?

• Bereinigung des Summenwerts um das Item, für das die Trennschärfe bestimmt werden soll
• Korrigiert man das nicht, dann kommt es zu einer Überschätzung

• Grad der Gemeinsamkeit dessen, was durch die Aufgabe (durch den gesamten Test) gemessen wird
  • Alle Items des Tests müssen dasselbe messen (Eindimensionalität)
  • Die Aufgaben müssen tatsächlich so gestaltet sein, dass sie eine sinnvolle Unterscheidung zwischen Testpersonen ermöglichen (Varianzen)
• Zahl der möglichen interindividuellen Differenzierungen, die eine Aufgabe treffen kann

• Hohe Trennschärfen begünstigen hohe Reliabilität
• Bei Aufgaben mittlerer Schwierigkeit können mehr Unterscheidungen (50x50) gemacht werden, das begünstigt eine hohe Trennschärfe
• In extremen Bereichen (niedrig & hoch): niedrige Trennschärfen (als im mittleren Bereich)

• Varianz: Wenn die Varianz steigt, dann steigt auch die Trennschärfe. Wenn man jedoch sehr heterogene Gruppen hat, dann nimmt die Trennschärfe zu und es kann zu einer Überschätzung der Trennschärfe kommen. Trennschärfe soll man im direkten Bezug zur Stichprobe anschauen
• Ausreisserwerte
• Verteilungen: vor allem Items in Randbereichen
• Homogenität: in homogenen Stichproben ist Varianz der Messwerte eingeschränkt; kleinere Varianz -> geringere Trennschärfe
• Selektionskennwert: kann bei dichotomen Items zusätzlich zum Schwierigkeitsindex berechnet werden und dient dazu, das Items mit extremer Schwierigkeit nicht so schnell ausgeschieden werden

Korrelation eines Items mit Messwerten eines anderen Kriterium

• Heterogene Analysestichprobe
• Mangelhafte Konstruktion des Tests
• Anormale Verteilung des untersuchten Merkmals