Bodeneffekte

• Das zu Messende ist nicht gegeben, sondern nur erschließbar, nicht direkt meßbar
• Keine einheitlichen Definitionen
• Zwei Schritte, bevor man messen kann: 1. konzeptuelle Definition, 2. Operationalisierung
• Latente Variable/Konstrukt: Intelligenz
• Beobachtete Variable/Indikator: Wortschatz, räumliches Vorstellungsvermögen, Wahrnehmungstempo, rechnerisches Denken usw.
• Reagibilität: die definierten Variablen betreffen Prozesse, die sich aufgrund der Tatsache, dass sie gemessen werden, verändern können (Lerneffekte, Variable kann nicht beliebig häufig gemessen werden)
• Kultureller und historischer Kontext von Wahrnehmung, Normen und Werten

Testtheorien befassen sich mit der Frage, wie empirische Testwerte mit den zu messenden (tatsächlichen) Merkmalsausprägungen zusammenhängen.

Testtheorien definieren Anforderungen, denen ein Test genügen muß, um von den empirischen Testwerten auf die tatsächliche Merkmalsausprägung schließen zu können.

Proband: Tagesform, Motivation, andere Merkmale
Diagnostiker: Durchführung, Auswertung, Interpretation
Meßinstrument: Reliabilität, Validität

1. Objektivität
2. Reliabilität
3. Validität

4. Skalierung
5. Normierung
6. Testökonomie
7. Nützlichkeit
8. Zumutbarkeit
9. Unverfälschbarkeit
10. Fairneß

Objektivität = Standardisierung
Objektivität stellt die Vergleichbarkeit mehrerer Tests sicher
Standardisierung der Testdurchführung, -auswertung und -interpretation

Ein Test ist objektiv, wenn er dasjenige Merkmal, das er mißt, unabhängig von
Testleiter, Testauswerter und von der Ergebnisinterpretation mißt.

Interaktionsfreiheit: Interaktion als Störvariable ausschließen (nur Merkmale der Vpn sollen
erfaßt werden, nicht die des Testleiters)

• Testergebnis unabhängig von den Bedingungen der Testdurchführung (Versuchsleiter, Testumgebung usw.)
• Stets gleiche Durchführungsbedingungen (Raum und Zeit)
• Unabhängigkeit des Testleiters
• Standardisierte Instruktion, kein Gespräch, Anweisungen dürfen nur wiederholt, nicht aber erklärt werden

• Testergebnis ist unabhängig davon, welcher Testleiter den Test auswertet
• Besonders schwierig bei offenen Fragen: detaillierte Auswertungsregeln erforderlich
• Überprüfung der Übereinstimmung von verschiedenen Auswertern mit demselben Rohmaterial

• Interpretation des Testergebnisses ist unabhängig vom Testleiter
• Ordnen verschiedene Anwender dem gleichen Test-Score die gleiche Merkmalsausprägung zu?
• Hilfreich: Normtabellen (Vergleich der Vp mit relevanter Bezugsgruppe)

Reliabilität = Meßpräzision, Meßgenauigkeit unabhängig vom Inhalt

Ein Test ist reliabel (zuverlässig), wenn er das Merkmal, das er mißt, exakt, d. h. ohne Meßfehler mißt.

• Retest-Reliabilität
• Paralleltest-Reliabilität
• Testhalbierungs-(Split-Half-)
• Reliabilität
• innere Konsistenz/Cronbachs alpha (Verallgemeinerung der Testhalbierungsmethode: jedes Item wird als eigenständiger Testteil betrachtet)

Validität = Gültigkeit
Grad der Übereinstimmung, mit dem ein Test mißt, was er messen soll bzw. die Generalisierbarkeit des gemessenen Merkmals auf das Verhalten außerhalb der Testsituation

Ein Test gilt als valide, wenn er das Merkmal, das er messen soll, auch wirklich mißt und nicht irgendein anderes.

Unter Inhaltsvalidität versteht man, inwieweit ein Test oder ein Testitem das zu messende Merkmal repräsentativ erfaßt.

Augenscheinvalidität gibt an, inwieweit der Validitätsanspruch eines Tests einem Laien vom bloßen Augenschein her gerechtfertigt erscheint.

Problem: soziale Erwünschtheit als Folge

Praktische Anwendbarkeit eines Tests für bestimmte Vorhersagen.

Ein Test weist Kriteriumsvalidität auf, wenn vom Verhalten der Testperson innerhalb der Testsituation erfolgreich auf ein Kriterium, nämlich auf ein Verhalten außerhalb der Testsituation, geschlossen werden kann (Korrelationsschluß).

Konstruktvalidität umfaßt die empirischen Befunde und Argumente, mit denen die Zuverlässigkeit der Interpretation von Testergebnissen im Sinne erklärender Konzepte gestützt wird, die sowohl die Testergebnisse selbst als auch die Zusammenhänge der Testwerte mit anderen Variablen erklären.

Beispiel: Konstrukt Depressivität: hohe Korrelation mit Hoffnungslosigkeit = konvergente Validität, niedrige Korrelation mit Gelassenheit = divergente/diskriminante Validität

Sie sind nicht disjunkt (schließen sich nicht aus), hängen zusammen:

• Objektivität: Teilaspekt der Reliabilität
• Reliabilität: Voraussetzung für Validität
• Validität: Sonderfall der Reliabilität

Resuliterende Testwerte bilden die empirischen Merkmalsrelativen ab durch die Verrechnungsregeln.

Bezieht sich auf das Skalenniveau.

Erstellt (bei Leistungstests) eine Relation zwichen Leistung und Testwert

Normierung = Eichung

Unter der Normierung/Eichung eines Tests versteht man das Erstellen eines Bezugssystems, mit dessen Hilfe die Ergebnisse einer Testperson im Vergleich zu den Merkmalsausprägungen anderer Personen eindeutig eingeordnet und interpretiert werden können.

• Eichstichprobe muß repräsentativ sein, Geltungsbereich definieren
• Normen dürfen nicht veraltet sein (mittlerer IQ steigt im Laufe der Jahrzehnte)
• Normen liefern Hinweise über Interpretationsobjektivität
• Normierungstechniken: z. B. via Prozentrang oder Standardwerte

Ein Test erfüllt das Gütekriterium der Ökonomie, wenn er, gemessen am diagnostischen Erkenntnisgewinn, relativ wenig Ressourcen wie Zeit, Geld oder andere Formen beansprucht.

Ein Test erfüllt das Kriterium der Zumutbarkeit, wenn er absolut und relativ zu dem aus seiner Anwendung resultierenden Nutzen die zu testende Person in zeitlicher, psychischer sowie körperlicher Hinsicht nicht über Gebühr belastet.

Ein Test ist nützlich, wenn für das von ihm gemessene Merkmal praktische Relevanz besteht und die auf seiner Grundlage getroffenen Entscheidungen/Maßnahmen mehr Nutzen als Schaden erwarten lassen.

Ein Test erfüllt das Gütekriterium der Unverfälschbarkeit, wenn das Verfahren derart konstruiert ist, daß die zu testende Person durch gezieltes Testverhalten die konkreten Ausprägungen ihrer Testwerte nicht steuern bzw. verzerren kann.

Problem: Steht in Konflikt mit Augenscheinvalidität

Ein Test erfüllt das Gütekriterium der Fairneß, wenn die resultierenden Testwerte zu keiner systematischen Benachteiligung bestimmter Personen aufgrund ihrer Zugehörigkeit zu ethnischen, soziokulturellen oder geschlechtsspezifischen Gruppen führen.

Problem: Itembias

Aufgabe ist nicht für alle Personengruppen gleich schwierig (z. B. Test am Computer für ältere Leute)

Lösung bieten bsps. Kulturfreie Tests

Ein Test ist ein wissenschaftliches Routineverfahren zur Erfassung eines oder mehrerer empirisch abgrenzbarer psychologischer Merkmale mit dem Ziel einer möglichst genauen quantitativen Aussage über den Grad der individuellen Merkmalsausprägung. Nicht unbedingt mit Fragebogen gleichzusetzen.

Mehr als nur eine Ansammlung von Aufgaben oder Fragen: Psychometrische Tests erfassen psychische Merkmale quantitativ auf der Basis von Testtheorien und ermöglichen somit eine metrisch vergleichende Diagnostik.

einzelne Testaufgabe/-frage/-aussage in einem Test

Mehrere Items, die ein Merkmal bzw. eine Dimension erfassen, Resultat: Stufen- oder Reihenfolge zur Charakterisierung eines Merkmals

Punktzahl für die Beantwortung eines einzelnen Items